CN104202359A - 一种基于刀片服务器的NVMe SSD虚拟化设计方法 - Google Patents
一种基于刀片服务器的NVMe SSD虚拟化设计方法 Download PDFInfo
- Publication number
- CN104202359A CN104202359A CN201410393925.7A CN201410393925A CN104202359A CN 104202359 A CN104202359 A CN 104202359A CN 201410393925 A CN201410393925 A CN 201410393925A CN 104202359 A CN104202359 A CN 104202359A
- Authority
- CN
- China
- Prior art keywords
- nvme
- layer
- blade
- node
- virtualization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
本发明提供一种基于刀片服务器的NVMeSSD虚拟化设计方法,包括刀片服务器,该刀片服务器内置若干刀片计算节点、高速网络交换节点、PCIEIO拓展模块、管理模块;基于该刀片服务器的虚拟化的详细映射过程为:设置底层虚拟PCIE设备层,该层包括若干刀片节点将本节点的若干个支持NVMe标准的SSD闪存作为PCIE终端设备;设置中间层虚拟化总线桥接层;设置顶层NVMe虚拟化层,将底层所有设备整合为单一NVMe设备。该一种基于刀片服务器的NVMeSSD虚拟化设计方法和现有技术相比,有效提高刀片服务器拓展的灵活性,可靠性高,实用性强,适用范围广泛。
Description
技术领域
本发明涉及计算机存储虚拟化技术领域,具体的说是一种实用性强、基于刀片服务器的NVMe SSD虚拟化设计方法。
背景技术
随着大数据时代的来临,对数据的处理能力以及响应速度要求越来越高,刀片服务器广泛运用在云计算与大数据处理领域,刀片服务器可以很好的完成多节点刀片数据处理能力的统一,但是IO访问性能由于外围存储速度受限,不能有效的提高。固态存储SSD可以极大的提高服务器存储的IO处理速度并降低IO延迟,NVMe SSD采用PCIE接口,更加靠近处理器CPU,凭借PCIE接口访问的高带宽低延迟优势,更好的发挥了固态存储SSD的性能。
刀片服务器刀片节点的PCIE槽位是独立的,NVMe SSD应用在刀片服务器上时,如果按照刀片服务器的设计特点,用刀片节点PCIE槽位分布式的方式布置NVMe SSD的方式,不能体现刀片服务器计算资源集中的优势。
而存储虚拟化通过将一个(或多个)目标(Target)服务或功能与其它附加的功能集成,统一提供有用的全面功能服务。可以有效的对存储资源进行管理,存储虚拟化技术可以屏蔽异构的存储系统并将其整合为一个统一的存储系统供用户使用。同时,存储虚拟化技术有可以对存储资源进行再分配,将存储资源划分给不同的用户使用。为了方便用户管理对存储虚拟化系统的管理,目前存储虚拟化系统的实现普遍采用BS架构,也即通过浏览器应用程序实现对存储虚拟化系统的管理。
因而,如果将存储虚拟化技术应用在计算机服务器存储方面,将有效提高服务器的存储速度,基于此,现提供一种刀片服务器上NVMe SSD的虚拟化方法,该方法通过整合刀片节点中分布式安装的NVMe SSD资源和管理,通过虚拟化PCIE Crosslink桥接各个节点的NVMe SSD与虚拟化NVMe层,虚拟化NVMe层采用NVMe接口标准,为系统提供统一接口。
发明内容
本发明的技术任务是解决现有技术的不足,提供一种实用性强、基于刀片服务器的NVMe SSD虚拟化设计方法。
本发明的技术方案是按以下方式实现的,该一种基于刀片服务器的NVMe SSD虚拟化设计方法,包括刀片服务器,该刀片服务器内置若干刀片计算节点、高速网络交换节点、PCIE IO拓展模块、管理模块;其中PCIE IO拓展模块用于拓展NVMe SSD,各个刀片计算节点的PCIE IO拓展模块则由各个刀片节点独立提供;基于该刀片服务器的虚拟化的详细映射过程为:
设置虚拟PCIE设备层,该虚拟PCIE设备层设置在底层,该层包括若干刀片节点,所述刀片节点将本节点的若干个支持NVMe标准的SSD闪存作为PCIE终端设备;
设置虚拟化总线桥接层,该总线桥接层设置在中间层,通过刀片服务器的高速通信网络虚拟PCIE Crosslink设备,即总线桥设备,该层桥接顶层的NVMe虚拟化层以及底层的各个刀片节点的NVMe SSD闪存;
设置NVMe虚拟化层,该NVMe虚拟化层设置在顶层,该层将底层所有设备整合为单一NVMe设备,并为上层系统提供统一的NVMe标准的接口。
所述NVMe SSD闪存均为PCIE接口且每个节点的NVMe SSD闪存都虚拟映射到PCIE Crosslink上,该NVMe SSD闪存分布安装在各个刀片节点的PCIE槽位上。
所述虚拟化总线桥层的下行端接各个节点的NVMe SSD闪存的PCIE终端设备,上行端为NVMe虚拟化层提供PCIE上行接口。
所述NVMe虚拟化层由操作系统直接操作NVMe SSD闪存的软件接口层,这里的软件接口层包括NVMe SSD闪存的虚拟化层和NVMe SSD闪存的管理虚拟化层;该NVMe虚拟化层将各节点分布式分布的NVMe SSD设备映射为单一的NVMe SSD闪存。
本发明与现有技术相比所产生的有益效果是:
本发明的一种基于刀片服务器的NVMe SSD虚拟化设计方法为刀片服务器的SSD应用提供了高效可靠的应用模型,整体提高刀片服务器的运算以及存储IO性能;通过虚拟化PCIE Crosslink将各个节点的NVMe SSD统一映射到上层系统,方便了NVMe SSD在刀片服务器上的拓展以及动态调整;实现软件可编程实时控制,便捷管理热插拔,功耗以及闪存的寿命管理等;数据可以动态灵活的在各个节点NVMe SSD盘位上动态迁移,并整合各个节点的SSD进行统一使用,并且对热插拔的支持,可以动态调整系统的SSD容量,极大的提高了易用灵活性;NVMe虚拟化层可以灵活配置RAID功能,提高数据使用的可靠性以及整体并行IO访问的性能;通过虚拟化管理接口,管理闪存的寿命,可以动态更换添加以及删除硬盘,有效的提高设备的可靠性;实用性强,适用范围广泛,易于推广。
附图说明
附图1是本发明的NVMe SSD虚拟化系统拓扑示意图。
附图2是本发明的虚拟化层结构示意图。
具体实施方式
下面结合附图对本发明的一种基于刀片服务器的NVMe SSD虚拟化设计方法作以下详细说明。
本发明提供一种基于刀片服务器的NVMe SSD虚拟化设计方法,该方法整合刀片节点中分布式安装的NVMe SSD资源和管理。通过虚拟化PCIE Crosslink桥接各个节点的NVMe SSD与虚拟化NVMe层,虚拟化NVMe层采用NVMe接口标准,为系统提供统一接口。基于此设计思路,如附图1所示,该附图整体展示了刀片服务器中NVMe SSD虚拟化的系统构成的拓扑关系。对于上层系统而言,直接面向NVMe虚拟化层,该层隔离了系统和底层设备之间的直接联系,将刀片节点,高速网络互联以及NVMe SSD设备虚拟化成整体的NVMe SSD供系统使用。
结合附图2,本发明的方法中包括刀片服务器,该刀片服务器内置若干刀片计算节点、高速网络交换节点、PCIE IO拓展模块、管理模块;其中PCIE IO拓展模块用于拓展NVMe SSD,各个刀片计算节点的PCIE IO拓展模块则由各个刀片节点独立提供;基于该刀片服务器的虚拟化的详细映射过程为:
设置虚拟PCIE设备层,该虚拟PCIE设备层设置在底层,该层包括若干刀片节点,所述刀片节点将本节点的若干个支持NVMe标准的SSD闪存作为PCIE终端设备;
设置虚拟化总线桥接层,该总线桥接层设置在中间层,通过刀片服务器的高速通信网络虚拟PCIE Crosslink设备,即总线桥设备,该层桥接顶层的NVMe虚拟化层以及底层的各个刀片节点的NVMe SSD闪存;
设置NVMe虚拟化层,该NVMe虚拟化层设置在顶层,该层将底层所有设备整合为单一NVMe设备,并为上层系统提供统一的NVMe标准的接口。
所述NVMe SSD闪存均为PCIE接口且每个节点的NVMe SSD闪存都虚拟映射到PCIE Crosslink上,该NVMe SSD闪存分布安装在各个刀片节点的PCIE槽位上。
所述虚拟化总线桥层的下行端接各个节点的NVMe SSD的PCIE终端设备,上行端为NVMe虚拟化层提供PCIE上行接口。
所述NVMe虚拟化层由操作系统直接操作NVMe SSD闪存的软件接口层,这里的软件接口层包括NVMe SSD闪存的虚拟化层和NVMe SSD闪存的管理虚拟化层。通过NVMe虚拟化层,各节点分布式分布的NVMe SSD设备,映射为独单一的NVMe SSD。通过虚拟化的方案,数据可以动态灵活的在各个节点NVMe SSD盘位上动态迁移,并整合各个节点的SSD进行统一使用,系统对热插拔的支持,可以动态调整系统的SSD容量,极大的提高了易用灵活性。NVMe虚拟化层还可以灵活配置RAID功能,提高数据使用的可靠性以及整体并行IO访问的性能。NVMe的管理接口的虚拟化,实现软件可编程实时控制,便捷管理热插拔,功耗以及闪存的寿命管理等。热插拔的管理也可以配合NVMe SSD虚拟化层,有效地提高刀片服务器拓展的灵活性。
本发明通过虚拟化方案,有效地统一刀片服务器中各刀片中节点分布式分布的遵循NVMe标准设计的PCIE SSD。刀片服务器各节点通过高速网络互联,具有计算能力集中统一的特点,各个节点中的NVMe SSD,通过虚拟化技术,统一映射到系统中,被识别成大容量的NVMe设备,并可以动态迁移各个刀片节点数据,在热插拔基础上可动态调整整个系统的SSD容量, 通过这一虚拟化技术既可以提高NVMe SSD在刀片服务器中的易用性,极大的提高刀片服务器的性能,也可以拓展刀片服务器中NVMe SSD的使用的纵向拓展能力、拓展的灵活性、高效性以及可靠性。同时管理接口的虚拟化,实现软件可编程实时控制,便捷管理热插拔,功耗以及闪存的寿命管理等。
以上实施方式仅用于说明本发明,而并非对本发明的限制,有关技术领域的普通技术人员,在不脱离本发明的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本发明的范畴,本发明的专利保护范围应由权利要求限定。
Claims (4)
1.一种基于有限状态机的存储虚拟化管理系统,其特征在于包括刀片服务器,该刀片服务器内置若干刀片计算节点、高速网络交换节点、PCIE IO拓展模块、管理模块;其中PCIE IO拓展模块用于拓展NVMe SSD,各个刀片计算节点的PCIE IO拓展模块则由各个刀片节点独立提供;基于该刀片服务器的虚拟化的详细映射过程为:
设置虚拟PCIE设备层,该虚拟PCIE设备层设置在底层,该层包括若干刀片节点,所述刀片节点将本节点的若干个支持NVMe标准的SSD闪存作为PCIE终端设备;
设置虚拟化总线桥接层,该总线桥接层设置在中间层,通过刀片服务器的高速通信网络虚拟PCIE Crosslink设备,即总线桥设备,该层桥接顶层的NVMe虚拟化层以及底层的各个刀片节点的NVMe SSD闪存;
设置NVMe虚拟化层,该NVMe虚拟化层设置在顶层,该层将底层所有设备整合为单一NVMe设备,并为上层系统提供统一的NVMe标准的接口。
2.根据权利要求1所述的一种基于有限状态机的存储虚拟化管理系统,其特征在于:所述NVMe SSD闪存均为PCIE接口且每个节点的NVMe SSD闪存都虚拟映射到PCIE Crosslink上,该NVMe SSD闪存分布安装在各个刀片节点的PCIE槽位上。
3.根据权利要求1所述的一种基于有限状态机的存储虚拟化管理系统,其特征在于:所述虚拟化总线桥层的下行端接各个节点的NVMe SSD闪存的PCIE终端设备,上行端为NVMe虚拟化层提供PCIE上行接口。
4.根据权利要求1所述的一种基于有限状态机的存储虚拟化管理系统,其特征在于:所述NVMe虚拟化层由操作系统直接操作NVMe SSD闪存的软件接口层,这里的软件接口层包括NVMe SSD闪存的虚拟化层和NVMe SSD闪存的管理虚拟化层;该NVMe虚拟化层将各节点分布式分布的NVMe SSD设备映射为单一的NVMe SSD闪存。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410393925.7A CN104202359A (zh) | 2014-08-12 | 2014-08-12 | 一种基于刀片服务器的NVMe SSD虚拟化设计方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410393925.7A CN104202359A (zh) | 2014-08-12 | 2014-08-12 | 一种基于刀片服务器的NVMe SSD虚拟化设计方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104202359A true CN104202359A (zh) | 2014-12-10 |
Family
ID=52087584
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410393925.7A Pending CN104202359A (zh) | 2014-08-12 | 2014-08-12 | 一种基于刀片服务器的NVMe SSD虚拟化设计方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104202359A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104601729A (zh) * | 2015-02-06 | 2015-05-06 | 浪潮集团有限公司 | 一种采用NVMe实现高性能云存储的方法 |
CN104615577A (zh) * | 2015-02-09 | 2015-05-13 | 浪潮集团有限公司 | 一种大数据服务器 |
CN107479828A (zh) * | 2017-07-31 | 2017-12-15 | 山东超越数控电子有限公司 | 一种提高固态硬盘吞吐量性能的方法 |
CN107480094A (zh) * | 2017-08-11 | 2017-12-15 | 郑州云海信息技术有限公司 | 一种融合架构的池化服务器系统架构 |
CN110825320A (zh) * | 2018-08-07 | 2020-02-21 | 马维尔国际贸易有限公司 | 虚拟化固态存储介质的隔离区域 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070047536A1 (en) * | 2005-09-01 | 2007-03-01 | Emulex Design & Manufacturing Corporation | Input/output router for storage networks |
CN101540685A (zh) * | 2008-06-06 | 2009-09-23 | 曙光信息产业(北京)有限公司 | 一种用于刀片服务器的PCIe共享存储刀片 |
US20100082874A1 (en) * | 2008-09-29 | 2010-04-01 | Hitachi, Ltd. | Computer system and method for sharing pci devices thereof |
CN102063158A (zh) * | 2010-12-10 | 2011-05-18 | 曙光信息产业(北京)有限公司 | 刀片服务器的io扩展模块 |
CN102063160A (zh) * | 2010-12-10 | 2011-05-18 | 曙光信息产业(北京)有限公司 | 刀片服务器的io扩展模块、设有该模块的刀片及服务器 |
-
2014
- 2014-08-12 CN CN201410393925.7A patent/CN104202359A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070047536A1 (en) * | 2005-09-01 | 2007-03-01 | Emulex Design & Manufacturing Corporation | Input/output router for storage networks |
CN101540685A (zh) * | 2008-06-06 | 2009-09-23 | 曙光信息产业(北京)有限公司 | 一种用于刀片服务器的PCIe共享存储刀片 |
US20100082874A1 (en) * | 2008-09-29 | 2010-04-01 | Hitachi, Ltd. | Computer system and method for sharing pci devices thereof |
CN102063158A (zh) * | 2010-12-10 | 2011-05-18 | 曙光信息产业(北京)有限公司 | 刀片服务器的io扩展模块 |
CN102063160A (zh) * | 2010-12-10 | 2011-05-18 | 曙光信息产业(北京)有限公司 | 刀片服务器的io扩展模块、设有该模块的刀片及服务器 |
Non-Patent Citations (1)
Title |
---|
喻波,胡怀湘,: ""MR-IOV:下一代数据中心I/O虚拟化技术"", 《计算机技术与发展》 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104601729A (zh) * | 2015-02-06 | 2015-05-06 | 浪潮集团有限公司 | 一种采用NVMe实现高性能云存储的方法 |
CN104615577A (zh) * | 2015-02-09 | 2015-05-13 | 浪潮集团有限公司 | 一种大数据服务器 |
CN107479828A (zh) * | 2017-07-31 | 2017-12-15 | 山东超越数控电子有限公司 | 一种提高固态硬盘吞吐量性能的方法 |
CN107480094A (zh) * | 2017-08-11 | 2017-12-15 | 郑州云海信息技术有限公司 | 一种融合架构的池化服务器系统架构 |
CN110825320A (zh) * | 2018-08-07 | 2020-02-21 | 马维尔国际贸易有限公司 | 虚拟化固态存储介质的隔离区域 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200192593A1 (en) | Distributed host copy migration in a cluster environment using changed block tracking | |
JP2022003577A (ja) | Hci環境でのvm/コンテナおよびボリューム配置決定方法及びストレージシステム | |
US20180373557A1 (en) | System and Method for Virtual Machine Live Migration | |
Kant | Data center evolution: A tutorial on state of the art, issues, and challenges | |
Darabseh et al. | Sdstorage: a software defined storage experimental framework | |
CN105426245B (zh) | 包括分散的部件的动态地组成的计算节点 | |
Nanavati et al. | Decibel: Isolation and sharing in disaggregated {Rack-Scale} storage | |
WO2016206198A1 (zh) | 存储系统 | |
CN115039077A (zh) | 为实时虚拟化执行环境迁移维护存储命名空间标识符 | |
US9329792B2 (en) | Storage thin provisioning and space reclamation | |
CN104202359A (zh) | 一种基于刀片服务器的NVMe SSD虚拟化设计方法 | |
US10331476B1 (en) | Storage device sharing among virtual machines | |
JP7467593B2 (ja) | リソース割振り方法、記憶デバイス、および記憶システム | |
CN103577122B (zh) | 分布式应用系统在平台间迁移的实现方法及装置 | |
US10866934B1 (en) | Token-based data flow control in a clustered storage system | |
CN104601684A (zh) | 云服务器系统 | |
WO2019011262A1 (zh) | 分配资源的方法和装置 | |
CN116069240A (zh) | 存储器池管理 | |
US8990815B1 (en) | Synchronizing allocated blocks of virtual disk files across primary and secondary volumes by excluding unused blocks | |
CN104123183A (zh) | 集群作业调度方法和装置 | |
US20160364268A1 (en) | Computer system, management computer, and management method | |
CN116389542A (zh) | 具有可配置的池化资源的平台 | |
US9465549B1 (en) | Dynamic allocation of a high-speed memory pool between a cluster file system and a burst buffer appliance | |
JP2013539111A (ja) | キャッシングに対応したストレージ装置上における効率的なシーケンシャルロギングのためのシステム及び方法 | |
CN103986665A (zh) | 云海os中网络负载均衡的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20141210 |