CN105786398B - 存储器映射方法和存储器映射系统 - Google Patents
存储器映射方法和存储器映射系统 Download PDFInfo
- Publication number
- CN105786398B CN105786398B CN201410809034.5A CN201410809034A CN105786398B CN 105786398 B CN105786398 B CN 105786398B CN 201410809034 A CN201410809034 A CN 201410809034A CN 105786398 B CN105786398 B CN 105786398B
- Authority
- CN
- China
- Prior art keywords
- address
- server
- main frame
- managing main
- extended menory
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013507 mapping Methods 0.000 title claims abstract description 39
- 238000000034 method Methods 0.000 title claims abstract description 25
- 230000008878 coupling Effects 0.000 claims abstract description 4
- 238000010168 coupling process Methods 0.000 claims abstract description 4
- 238000005859 coupling reaction Methods 0.000 claims abstract description 4
- 230000006870 function Effects 0.000 claims description 25
- 230000002093 peripheral effect Effects 0.000 claims description 11
- 230000005540 biological transmission Effects 0.000 claims description 3
- 101100309451 Arabidopsis thaliana SAD2 gene Proteins 0.000 description 26
- 238000010586 diagram Methods 0.000 description 14
- 238000004891 communication Methods 0.000 description 6
- 238000000151 deposition Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Landscapes
- Bus Control (AREA)
Abstract
一种存储器映射方法和存储器映射系统,用于通过PCIe总线耦接多个服务器。所述方法包括:在具有存储器地址的管理主机上配置扩展存储器地址;通过所述PCIe总线的多个非透明桥而将对应于所述服务器中的每一个的所述管理主机的所述扩展存储器地址分别映射到所述服务器中的每一个的存储器地址;在所述服务器中的每一个上配置扩展存储器地址;以及通过所述非透明桥而将所述服务器中的每一个的所述扩展存储器地址映射到所述管理主机的所述存储器地址和所述扩展存储器地址,其中所述服务器中的每一个的所述扩展存储器地址对应于所述服务器和所述管理主机。
Description
技术领域
本公开一般来说涉及用于通过快速PCI总线耦接多个服务器的存储器映射方法和存储器映射系统。
背景技术
已开发若干不同计算机I/O互连标准来连接计算机元件。多年来最流行的计算机I/O互连标准之一是周边组件互连(Peripheral Component Interconnect,PCI)标准。PCI允许总线表现得像桥,其将局部处理器总线与周边组件隔离,从而允许计算机的中央处理单元(CPU)较快速地运行。最近,PCI的后继标准已普及,被称为快速PCI(或,简称为PCIe)。PCIe提供较高的性能、针对小一代系统的提高的灵活性和可缩放性,同时维持与现有PCI应用的软件兼容性。
与传统PCI相比,具三个层(事务层、数据链路层和物理层)的PCIe快速协议显著更复杂。在事务层中,PCIe实施请求与响应根据时间分离的分割事务,从而允许链路承载其它业务,同时目标装置针对响应而聚集数据。数据链路层对由事务层产生的事务层分组(TLP)排序,确保经由明确需要未确认的/坏的TLP的重放的确认协议而在两个端点之间可靠地递送TLP,且初始化并管理流量控制信用。物理层规格划分为对应于电气规格和逻辑规格的两个子层。
在PCIe系统中,根复合装置(root complex device)将处理器和存储器子系统连接到包括一个或一个以上交换装置的PCIe交换矩阵(Switch Fabrics)。在PCIe中,使用点对点架构。类似于PCI系统中的主桥(host bridge),,根复合体代表经由局部I/O互连而互连的处理器而产生事务请求。根复合体功能性可实施为离散装置,或可与处理器集成。根复合体可维持一个以上PCIe端口,且多个交换装置可连接到根复合体上的端口或级联(cascaded)。
在多个主机使用PCIe交换器的非透明端口而连接时现有解决方案非透明桥(Non-Transparent Bridge,NTB)是使用存储器重定向方法。通常,NTB被呈现为具有两个背靠背端点,每一端点处置一个方向的存储器映射与转换功能,因此,NTB可在经由NTB连接的两个主机之间双向地进行存储器重定向功能。
图1为说明用于经由NTB的端点而将某一主机的物理地址映射到另一主机的物理地址(physical address)的存储器映射系统的图示。
在图1中,NTB的左端点(Left Endpoint,LE)具有6个基地址寄存器(Base AddressRegister,BAR)LEBar 0到LEBar 5,且支持32位地址的6地址映射。举例来说,LEBar(左端基地址寄存器)0和LEBar 1将主机1的物理地址0x00000000到0x10000000映射到主机2的物理地址0x30000000到0x40000000,LEBar 2和LEBar 3将主机1的物理地址0x20000000到0x40000000映射到主机2的物理地址0x00000000到0x20000000,且LEBar 4和LEBar 5将主机1的物理地址0x50000000到0x70000000映射到主机2的物理地址0x50000000到0x70000000。
图2为说明经由NTB的端点而将某一主机的物理地址映射到另一主机的物理地址的存储器映射系统的图示。在图2中,NTB的右端点RE具有6个BAR REBar 0到REBar 5,且支持32位地址的6地址映射。类似于图1,REBar0到REBar 5将主机2的物理地址映射到主机1的物理地址。每一PCIe端点仅具有6个Bar,且支持32位地址的6地址映射或64位地址的3地址映射,且因此,BAR的数量为NTB功能的最关键资源。
发明内容
因此,本公开提供存储器映射方法和存储器映射系统,其利用PCIe接口和NTB的存储器地址转换功能,以建构全局存储器地址映射系统,其中虚拟功能的主机间通信或共享可由NTB功能实现。
根据本公开的示范性实施例,提供一种用于通过PCIe总线耦接多个服务器的存储器映射方法。所述方法包含在具有存储器地址的管理主机上配置扩展存储器地址。所述方法还包含通过所述PCIe总线的多个非透明桥而将对应于所述服务器中的每一个的所述管理主机的所述扩展存储器地址分别映射到所述服务器中的每一个的存储器地址。所述方法还包含在所述服务器中的每一个上配置扩展存储器地址。所述方法还包含通过所述非透明桥而将所述服务器中的每一个的所述扩展存储器地址映射到所述管理主机的所述存储器地址和所述管理主机的所述扩展存储器地址,其中所述服务器中的每一个的所述扩展存储器地址对应于所述服务器和所述管理主机。
根据本公开的示范性实施例,提供一种存储器映射系统。所述存储器映射系统包含:管理主机;多个服务器,经由PCIe总线而耦接到所述管理主机;以及多个非透明桥,位于所述PCIe总线上。所述多个非透明桥将所述服务器耦接到所述管理主机。扩展存储器地址配置在具有存储器地址的所述管理主机上。对应于所述服务器中的每一个的所述管理主机的所述扩展存储器地址通过所述PCIe总线的多个非透明桥而分别映射到所述服务器中的每一个的存储器地址。扩展存储器地址配置在所述服务器中的每一个上。所述服务器中的每一个的所述扩展存储器地址通过所述非透明桥而映射到所述管理主机的所述存储器地址和所述管理主机的所述扩展存储器地址,其中所述服务器中的每一个的所述扩展存储器地址对应于所述服务器和所述管理主机。
基于上文描述,多个服务器可仅使用每一NTB功能的一个BAR通过全局存储器地址映射而共享SR-IOV装置的虚拟功能且相互通信,同时利用PCIe总线的多数带宽。
然而,应理解,此发明内容可能不含有本公开的所有方面和示范性实施例,且不打算以任何方式进行限制,且如本文所公开的本发明现被所属领域的技术人员理解且将被所属领域的技术人员理解涵盖本发明的明显改进和修改。
附图说明
包含附图以便进一步理解本发明,且附图并入本说明书中并构成本说明书的一部分。所述附图说明本发明的示范性实施例,且与描述一起用以解释本发明的原理。
图1为说明根据现有技术的用于经由NTB的端点而将某一主机的物理地址映射到另一主机的物理地址的存储器映射系统的图示。
图2为说明根据现有技术的用于经由NTB的端点而将某一主机的物理地址映射到另一主机的物理地址的存储器映射系统的图示。
图3为说明根据本公开的示范性实施例的存储器映射系统的框图。
图4为说明根据本公开的示范性实施例的从管理主机到服务器的NTB地址映射的图示。
图5为说明根据本公开的示范性实施例的从服务器到管理主机的NTB地址映射的图示。
图6为说明根据本公开的示范性实施例的当服务器相互通信时的存储器存取转移路径的图示。
图7为说明根据本公开的示范性实施例的当SR-IOV虚拟功能从管理主机共享到服务器时的存储器存取转移路径的图示。
图8为说明根据本公开的示范性实施例的存储器映射方法的流程图。
【主要元件标号说明】
100:存储器映射系统
110:管理主机
111:块
112:CPU
114:存储器
116:存储器映射控制器
118a~118n:SR-IOV装置
120a~120n:服务器
121a:块
121b:块
130:PCIe总线
140a~140n:非透明桥(NTB)
EMA1:扩展存储器地址
EMA2:扩展存储器地址
EMA3:扩展存储器地址
LE:左端点
LEBar 0~LEBar 5:基地址寄存器(BAR)
MA1:存储器地址
MA2:存储器地址
MA3:存储器地址
RE:右端点
REBar 0~REBar 5:BAR
S801~S807:步骤
具体实施方式
现将详细参考本发明的示范性实施例,其实例在附图中得以说明。只要有可能,相同元件符号在附图及描述中用来表示相同或相似部分。
本公开的示范性实施例可包括本文中所描述(包括具体实施方式中所描述)和/或附图中所展示的新颖特征中的任何一个或一个以上。如本文中所使用,“至少一个”、“一个或一个以上”和“和/或”为在操作中既连接又分离的开端表达。举例来说,表达“A、B和C中的至少一个”、“A、B或C中的至少一个”、“A、B和C中的一个或一个以上”、“A、B或C中的一个或一个以上”和“A、B和/或C”中的每一个意味单独A、单独B、单独C、A和B一起、A和C一起、B和C一起或A、B和C一起。
应注意,术语“一”实体指一个或一个以上所述实体。因此,术语“一”、“一个或一个以上”和“至少一个”可在本文中互换使用。
图3为说明根据本公开的示范性实施例的存储器映射系统的框图。
参看图3,本公开的存储器映射系统100包含管理主机110、PCIe总线130和多个服务器120a到120n。服务器120a到120n可经由PCIe总线130而耦接到管理主机110。PCIe总线130上的非透明桥(NTB)(即,140a到140n)执行管理主机110与服务器120a到120n之间的存储器地址映射。具体来说,NTB 140a到140n中的每一个被呈现为具有两个端点,且端点中的每一个处置一个方向的存储器地址映射。管理主机110包含CPU 112、存储器114、存储器映射控制器116和单一根I/O虚拟化(Single Root I/OVirtualization,SR-IOV)装置118a到118n。存储器映射控制器116可控制管理主机110与服务器120a到120n之间的存储器地址映射。SR-IOV装置118a到118n(例如,以太网10G适配器)可插在管理主机110上,且SR-IOV装置118a到118n的虚拟功能可经由PCIe总线130而共享到服务器120a到120n。
在示范性实施例中,NTB 140a的端点可经由PCIe总线130而将管理主机110的地址空间映射到服务器120a,而NTB 140a的另一端点可经由PCIe总线130而将服务器120a的地址空间映射到管理主机110。以这种方式,对管理主机110的存储器的存取可定向到服务器120a的所映射的存储器地址,且对服务器120a的存储器的存取可定向到管理主机110的所映射的存储器地址。
值得注意的是,存储器映射控制器116可实施为软件模块或程序代码。举例来说,当在PCIe总线上检测到新的服务器时,程序代码可加载到存储器114中且由CPU 112执行,以使得管理主机110与服务器之间的映射信息得以更新。然而,本公开不限于此。存储器映射控制器116还可实施为控制管理主机110与服务器120a到120n之间的存储器地址映射的硬件电路。
图4为说明根据本公开的示范性实施例的从管理主机到服务器的NTB地址映射的图示。
参看图3和图4,管理主机110的地址空间配置有存储器地址MA1和扩展存储器地址EMA1。存储器地址MA1可为管理主机110的动态随机存取存储器(dynamic random accessmemory,DRAM),且扩展存储器地址EMA1可为管理主机110的存储器地址MA1之外的地址空间。在管理主机110的扩展存储器地址EMA1中,块121a和块121b可经配置以分别对应于服务器120a和服务器120b。在本公开的示范性实施例中,管理主机110的扩展存储器地址EMA1上的块121a可经由PCIe总线130上的NTB 140a的端点而映射到服务器120a的存储器地址MA2,且管理主机110的扩展存储器地址EMA1上的块121b可经由PCIe总线130上的NTB 140b的端点而映射到服务器120b的存储器地址MA3。以这种方式,对管理主机110的扩展存储器地址EMA1上的块121a的存取可经由PCIe总线130上的NTB 140a的端点而定向到服务器120a的存储器地址MA2,且对管理主机110的扩展存储器地址EMA1上的块121b的存取可经由PCIe总线130上的NTB 140b的端点而映射到服务器120b的存储器地址MA3。
图5为说明根据本公开的示范性实施例的从服务器到管理主机的NTB地址映射的图示。
参看图3和图5,服务器120a的地址空间配置有存储器地址MA2和扩展存储器地址EMA2,且服务器120b的地址空间配置有存储器地址MA3和扩展存储器地址EMA3。存储器地址MA2和MA3可分别为服务器120a和服务器120b的动态随机存取存储器(DRAM),且扩展存储器地址EMA2和EMA3可分别为服务器120a和服务器120b的存储器地址MA2和MA3之外的地址空间。在服务器120a的扩展存储器地址EMA2和服务器120b的扩展存储器地址EMA3中,块121a、块121b和块111可经配置以分别对应于服务器120a、服务器120b和管理主机110。在本公开的示范性实施例中,服务器120a和服务器120b的扩展存储器地址EMA2和EMA3上的块121a和块121b可分别经由PCIe总线130上的NTB 140a和NTB 140b的端点而映射到管理主机110的扩展存储器地址EMA1的块121a和块121b,且服务器120a和服务器120b的扩展存储器地址EMA2和EMA3上的块111可分别经由PCIe总线130上的NTB 140a和NTB 140b的端点而映射到管理主机110的存储器地址MA1。
以这种方式,对服务器120a的扩展存储器地址EMA2上的块121a的存取可经由PCIe总线130上的NTB 140a的端点而定向到管理主机110的扩展存储器地址EMA1上的块121a,对服务器120a的扩展存储器地址EMA2上的块121b的存取可经由PCIe总线130上的NTB 140a的端点而定向到管理主机110的扩展存储器地址EMA1的块121b,且对服务器120a的扩展存储器地址EMA2上的块111的存取可经由PCIe总线130上的NTB 140a的端点而定向到管理主机110的存储器地址MA1。
类似地,对服务器120b的扩展存储器地址EMA3上的块121a的存取可经由PCIe总线130上的NTB 140b的端点而定向到管理主机110的扩展存储器地址EMA1上的块121a,对服务器120b的扩展存储器地址EMA3上的块121b的存取可经由PCIe总线130上的NTB 140b的端点而定向到管理主机110的扩展存储器地址EMA1的块121b,且对服务器120b的扩展存储器地址EMA3上的块111的存取可经由PCIe总线130上的NTB 140b的端点而定向到管理主机110的存储器地址MA1。
图6为说明根据本公开的示范性实施例的当服务器相互通信时的存储器存取转移路径的图示。
参看图3和图6,当服务器120a希望存取服务器120b的存储器地址MA3时,服务器120a存取其自身的扩展存储器地址EMA2上的块121b,且存储器存取将经由NTB 140a的端点而转移到管理主机110的扩展存储器地址EMA1上的块121b(参见图5)。在存储器存取转移到管理主机110的扩展存储器地址EMA1上的块121b之后,存储器存取将还经由NTB 140b的端点而转移到服务器120b的存储器地址MA3(参见图4)。类似地,当服务器120b希望存取服务器120a的存储器地址MA2时,服务器120b存取其自身的扩展存储器地址EMA3上的块121a,且存储器存取将经由NTB 140b的端点而转移到管理主机110的扩展存储器地址EMA1上的块121a。在存储器存取转移到管理主机110的扩展存储器地址EMA1上的块121a之后,存储器存取将还经由NTB 140a的端点而转移到服务器120a的存储器地址MA2。
值得注意的是,NTB 140a的左端点上的一个BAR可保持将服务器120a的扩展存储器地址EMA2中的块121a映射到管理主机110的扩展存储器地址EMA1中的块121a、将服务器120a的扩展存储器地址EMA2中的块121b映射到管理主机110的扩展存储器地址EMA1中的块121b以及将服务器120a的扩展存储器地址EMA2中的块111映射到管理主机110的存储器地址MA1的信息。NTB 140a的右端点上的一个BAR可保持将管理主机110的扩展存储器地址EMA1中的块121a映射到服务器120a的存储器地址MA2的信息。
类似地,NTB 140b的右端点上的一个BAR可保持将服务器120b的扩展存储器地址EMA3中的块121a映射到管理主机110的扩展存储器地址EMA1中的块121a、将服务器120b的扩展存储器地址EMA3中的块121b映射到管理主机110的扩展存储器地址EMA1中的块121b以及将服务器120b的扩展存储器地址EMA3中的块111映射到管理主机110的存储器地址MA1的信息。NTB 140b的左端点上的一个BAR可保持将管理主机110的扩展存储器地址EMA1中的块121b映射到服务器120b的存储器地址MA3的信息。
因此,服务器120a和服务器120b能够经由全局存储器地址映射系统而相互通信,其仅使用NTB的端点处的一个BAR而存储服务器120a、服务器120b和管理主机110的所有存储器映射信息。
图7为说明根据本公开的示范性实施例的当SR-IOV虚拟功能从管理主机共享到服务器时的存储器存取转移路径的图示。
参看图3和图7,当服务器120a的驱动器(driver)希望存取SR-IOV装置的虚拟功能(VF)的控制与状态寄存器(CSR)时,服务器120a存取其自身的扩展存储器地址EMA2上的块111中对应于CSR的区段(section),且存储器存取将经由NTB 140a的端点而转移到管理主机110的存储器地址MA1中对应于CSR的区段(参见图5)。在存取管理主机110的存储器地址MA1中对应于CSR的区段之后,虚拟功能存取管理主机110的扩展存储器地址EMA1的块121a中对应于接收/发送(RX/TX)缓冲器的区段,且存储器存取将经由NTB 140a的端点而转移到服务器120a的存储器地址MA2中对应于RX/TX缓冲器的区段(参见图4)。因此,虚拟功能的中断转递到服务器120a。在这种存储器映射系统中,虚拟功能能够在管理主机110和服务器上以零复制(zero-copy)方式操作。
值得注意的是,在图3到图7中,服务器120a和服务器120b中的全局存储器映射结构包含分别对应于服务器120a、服务器120b和管理主机110的块121a、块121b和块111。然而,本公开不限于此。服务器中的全局存储器映射结构可将数量等于服务器和管理主机110的数量的总和的块包含在服务器的扩展存储器地址中,且因为所有映射信息可记录在一个基地址寄存器中,因此,每一个NTB功能仅需一个基地址寄存器(BAR)。还应理解,虽然在图3到图7中,在管理主机110的扩展存储器地址EMA1中仅存在块121a和块121b,但本公开不限于此。管理主机110中的全局存储器映射结构可将数量等于服务器的数量的块包含在管理主机110的扩展存储器地址EMA1中。
图8为说明根据本公开的示范性实施例的存储器映射方法的流程图。
参看图8,在步骤S801中,具有存储器地址的管理主机配置扩展存储器地址。
在步骤S803中,PCIe总线的NTB将对应于服务器中的每一个的管理主机的扩展存储器地址分别映射到服务器中的每一个的存储器地址。
在步骤S805中,服务器中的每一个配置扩展存储器地址。
在步骤S807中,NTB将服务器中的每一个的扩展存储器地址映射到管理主机的存储器地址和扩展存储器地址,其中服务器中的每一个的扩展存储器地址对应于服务器和管理主机。
如上所述,本公开的存储器映射方法在服务器和管理主机中建构全局存储器映射结构,以使得服务器可仅使用每一NTB功能的仅一个BAR通过全局存储器地址映射而共享SR-IOV装置的虚拟功能且相互通信,同时利用PCIe总线的多数带宽。本公开的先前描述的示范性实施例具有前述优点,其中前述优点并非本发明的所有形式所需。
对于本领域技术人员将显而易见的是,可对本公开的结构进行各种修改和改变,而不偏离本发明的范围或精神。鉴于是前述内容,希望本公开涵盖本发明的修改和改变,只要所述修改和改变落入所附权利要求书和其等效物的范围内。
Claims (18)
1.一种用于通过快速周边组件互连总线耦接多个服务器的存储器映射方法,包括:
在具有存储器地址的管理主机上配置扩展存储器地址;
通过所述快速周边组件互连总线的多个非透明桥而将对应于所述服务器中的每一个的所述管理主机的所述扩展存储器地址分别映射到所述服务器中的每一个的存储器地址;
在所述服务器中的每一个上配置扩展存储器地址;
通过所述非透明桥而将所述服务器中的每一个的所述扩展存储器地址映射到所述管理主机的所述存储器地址和所述管理主机的所述扩展存储器地址,其中所述服务器中的每一个的所述扩展存储器地址对应于所述服务器和所述管理主机;以及
经由所述服务器中对应于所述管理主机的所述存储器地址的第一服务器的所述扩展存储器地址而存取所述管理主机的所述存储器地址中的虚拟功能的控制与状态寄存器。
2.根据权利要求1所述的方法,还包括:
经由对应于所述第一服务器的所述存储器地址的所述管理主机的所述扩展存储器地址而存取所述第一服务器的所述存储器地址中的所述虚拟功能的发送/接收缓冲器。
3.根据权利要求1所述的方法,还包括:
由所述服务器中的第一服务器经由所述管理主机的所述扩展存储器地址而存取所述服务器中的第二服务器的所述存储器地址。
4.根据权利要求3所述的方法,其中所述由所述第一服务器经由所述管理主机的所述扩展存储器地址而存取所述第二服务器的所述存储器地址的步骤包括:
经由对应于所述第二服务器的所述第一服务器的所述扩展存储器地址而存取对应于所述第二服务器的所述管理主机的所述扩展存储器地址。
5.根据权利要求4所述的方法,其中所述由所述第一服务器经由所述管理主机的所述扩展存储器地址而存取所述第二服务器的所述存储器地址的步骤还包括:
经由对应于所述第二服务器的所述管理主机的所述扩展存储器地址而存取所述第二服务器的所述存储器地址。
6.根据权利要求1所述的方法,其中所述非透明桥中的每一个包括两个端点,且所述两个端点中的每一个包括多个基地址寄存器。
7.根据权利要求6所述的方法,其中所述通过所述快速周边组件互连总线的所述非透明桥而将对应于所述服务器中的每一个的所述管理主机的所述扩展存储器地址分别映射到所述服务器中的每一个的存储器地址的步骤包括:
通过所述快速周边组件互连总线的所述非透明桥的所述基地址寄存器中的仅一个而将对应于所述服务器中的每一个的所述管理主机的所述扩展存储器地址分别映射到所述服务器中的每一个的存储器地址。
8.根据权利要求6所述的方法,其中所述通过所述非透明桥而将所述服务器中的每一个的所述扩展存储器地址映射到所述管理主机的所述存储器地址和所述扩展存储器地址的步骤包括:
通过所述快速周边组件互连总线的所述非透明桥的所述基地址寄存器中的仅一个而将所述服务器中的每一个的所述扩展存储器地址映射到所述管理主机的所述存储器地址和所述扩展存储器地址。
9.根据权利要求1所述的方法,其中
所述虚拟功能在所述管理主机和所述服务器上以零复制方式操作。
10.一种存储器映射系统,包括:
管理主机,具有存储器地址;
多个服务器,经由快速周边组件互连总线而耦接到所述管理主机;以及多个非透明桥,位于所述快速周边组件互连总线上,将所述服务器耦接到所述管理主机,
其中所述管理主机上配置扩展存储器地址的,
其中对应于所述服务器中的每一个的所述管理主机的所述扩展存储器地址通过所述快速周边组件互连总线的所述多个非透明桥而分别映射到所述服务器中的每一个的存储器地址,
其中所述服务器中的每一个配置扩展存储器地址,
其中所述服务器中的每一个的所述扩展存储器地址通过所述非透明桥而映射到所述管理主机的所述存储器地址和所述管理主机的所述扩展存储器地址,其中所述服务器中的每一个的所述扩展存储器地址对应于所述服务器和所述管理主机,
其中所述服务器中的第一服务器经由对应于所述管理主机的所述存储器地址的所述第一服务器的所述扩展存储器地址而存取所述管理主机的所述存储器地址中的虚拟功能的控制与状态寄存器。
11.根据权利要求10所述的系统,其中所述虚拟功能经由对应于所述第一服务器的所述存储器地址的所述管理主机的所述扩展存储器地址而存取所述第一服务器的所述存储器地址中的所述虚拟功能的发送/接收缓冲器。
12.根据权利要求10所述的系统,其中所述服务器中的第一服务器经由所述管理主机的所述扩展存储器地址而存取所述服务器中的第二服务器的所述存储器地址。
13.根据权利要求12所述的系统,其中所述第一服务器经由对应于所述第二服务器的所述第一服务器的所述扩展存储器地址而存取对应于所述第二服务器的所述管理主机的所述扩展存储器地址。
14.根据权利要求13所述的系统,其中所述管理主机经由对应于所述第二服务器的所述管理主机的所述扩展存储器地址而存取所述第二服务器的所述存储器地址。
15.根据权利要求10所述的系统,其中所述非透明桥中的每一个包括两个端点,且所述两个端点中的每一个包括多个基地址寄存器。
16.根据权利要求15所述的系统,其中对应于所述服务器中的每一个的所述管理主机的所述扩展存储器地址通过所述快速周边组件互连总线的所述非透明桥的所述基地址寄存器中的仅一个而分别映射到所述服务器中的每一个的存储器地址。
17.根据权利要求15所述的系统,其中所述服务器中的每一个的所述扩展存储器地址通过所述快速周边组件互连总线的所述非透明桥的所述基地址寄存器中的仅一个而映射到所述管理主机的所述存储器地址和所述扩展存储器地址。
18.根据权利要求10所述的系统,其中所述虚拟功能在所述管理主机和所述服务器上以零复制方式操作。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/543,906 US9734115B2 (en) | 2014-11-18 | 2014-11-18 | Memory mapping method and memory mapping system |
US14/543,906 | 2014-11-18 | ||
TW103142433A TWI557570B (zh) | 2014-11-18 | 2014-12-05 | 記憶體映射方法和記憶體映射系統 |
TW103142433 | 2014-12-05 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105786398A CN105786398A (zh) | 2016-07-20 |
CN105786398B true CN105786398B (zh) | 2019-04-05 |
Family
ID=56385470
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410809034.5A Active CN105786398B (zh) | 2014-11-18 | 2014-12-23 | 存储器映射方法和存储器映射系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105786398B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108121496B (zh) * | 2016-11-28 | 2021-01-29 | 成都华为技术有限公司 | 数据的存储方法、装置和系统 |
CN107766181B (zh) * | 2017-09-12 | 2021-04-20 | 中国电子科技集团公司第五十二研究所 | 一种基于PCIe非透明桥的双控制器存储高可用子系统 |
US10452540B2 (en) * | 2017-10-20 | 2019-10-22 | International Business Machines Corporation | Memory-mapped interface for message passing computing systems |
CN111581139B (zh) * | 2020-05-06 | 2022-05-17 | 浙江宇视科技有限公司 | PCIe设备的兼容处理方法、装置、设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103384551A (zh) * | 2013-01-04 | 2013-11-06 | 华为技术有限公司 | 一种基于pcie网络的虚拟机通信方法、服务器及系统 |
CN103488436A (zh) * | 2013-09-25 | 2014-01-01 | 华为技术有限公司 | 内存扩展系统及方法 |
CN103823638A (zh) * | 2014-02-08 | 2014-05-28 | 华为技术有限公司 | 一种虚拟设备访问方法及装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101736384B1 (ko) * | 2010-09-29 | 2017-05-16 | 삼성전자주식회사 | 비휘발성 메모리 시스템 |
-
2014
- 2014-12-23 CN CN201410809034.5A patent/CN105786398B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103384551A (zh) * | 2013-01-04 | 2013-11-06 | 华为技术有限公司 | 一种基于pcie网络的虚拟机通信方法、服务器及系统 |
CN103488436A (zh) * | 2013-09-25 | 2014-01-01 | 华为技术有限公司 | 内存扩展系统及方法 |
CN103823638A (zh) * | 2014-02-08 | 2014-05-28 | 华为技术有限公司 | 一种虚拟设备访问方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN105786398A (zh) | 2016-07-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI765138B (zh) | 主機系統及其方法和加速模組 | |
US10936535B2 (en) | Providing remote, reliant and high performance PCI express device in cloud computing environments | |
US8103810B2 (en) | Native and non-native I/O virtualization in a single adapter | |
CN107995129B (zh) | 一种nfv报文转发方法和装置 | |
JP5763873B2 (ja) | データ処理システムの複数のルート複合体間の通信のために共用メモリを初期設定するための方法、コンピュータ・プログラム、およびデータ処理システム | |
JP4931787B2 (ja) | データ処理システム内で第1のホスト・システムと第2のホスト・システムとの間で通信するための方法、プログラム、およびシステム(トランザクション・プロトコルおよび共用メモリを使用するホスト・システム間の通信のためのシステムおよび方法) | |
JP5362980B2 (ja) | データ処理システム内で第1のホスト・システムと第2のホスト・システムとの間で通信するための方法、プログラム、およびシステム(ソケット接続および共用メモリを使用するホスト・システム間の通信のためのシステムおよび方法) | |
TWI557570B (zh) | 記憶體映射方法和記憶體映射系統 | |
US7562176B2 (en) | Apparatus and methods for clustering multiple independent PCI express hierarchies | |
US11178063B2 (en) | Remote hardware acceleration | |
US20110060859A1 (en) | Host-to-host software-based virtual system | |
US11403141B2 (en) | Harvesting unused resources in a distributed computing system | |
JP2008152786A (ja) | データ処理システム内で1つまたは複数のエンドポイントの第1の物理機能から第2の物理機能に仮想機能を移行するための方法、プログラム、およびシステム(単一ルート・ステートレス仮想機能の移行のためのシステムおよび方法) | |
JP2008152787A (ja) | データ処理システム内で実行中の通信ファブリックにコンポーネントをホット・プラグするための方法、プログラム、およびシステム(実行中のPCIeファブリックにおける新しいコンポーネントのホット・プラグ/除去のためのシステムおよび方法) | |
CN105786398B (zh) | 存储器映射方法和存储器映射系统 | |
US20110082949A1 (en) | Presenting multi-function devices behind a switch hierarchy as a single function device | |
US9292462B2 (en) | Broadcast for a distributed switch network | |
US9483290B1 (en) | Method and system for virtual machine communication | |
CN103392175A (zh) | Pci快速多根i/o虚拟化环境中的低延迟优先排序 | |
KR20160031494A (ko) | 캡슐화 가능한 pcie 가상화 | |
US9753883B2 (en) | Network interface device that maps host bus writes of configuration information for virtual NIDs into a small transactional memory | |
JP6760579B2 (ja) | ネットワークラインカード(lc)のホストオペレーティングシステム(os)への統合 | |
US9535851B2 (en) | Transactional memory that performs a programmable address translation if a DAT bit in a transactional memory write command is set | |
CN109002414A (zh) | 一种跨节点虚拟机通信方法及相关装置 | |
US20150222513A1 (en) | Network interface device that alerts a monitoring processor if configuration of a virtual nid is changed |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |