CN114127699A - 在存储器拷贝和存储器映射之间动态切换以优化i/o性能 - Google Patents
在存储器拷贝和存储器映射之间动态切换以优化i/o性能 Download PDFInfo
- Publication number
- CN114127699A CN114127699A CN202080049597.2A CN202080049597A CN114127699A CN 114127699 A CN114127699 A CN 114127699A CN 202080049597 A CN202080049597 A CN 202080049597A CN 114127699 A CN114127699 A CN 114127699A
- Authority
- CN
- China
- Prior art keywords
- memory
- data transfer
- request
- cache
- transfer technique
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000015654 memory Effects 0.000 title claims abstract description 272
- 238000000034 method Methods 0.000 claims abstract description 249
- 238000012546 transfer Methods 0.000 claims abstract description 180
- 230000002085 persistent effect Effects 0.000 claims abstract description 34
- 238000004590 computer program Methods 0.000 claims abstract description 14
- 238000013507 mapping Methods 0.000 claims description 56
- 238000012545 processing Methods 0.000 claims description 19
- 230000002093 peripheral effect Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 24
- 238000005516 engineering process Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 239000007787 solid Substances 0.000 description 6
- 238000013519 translation Methods 0.000 description 6
- 230000014616 translation Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 239000000835 fiber Substances 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000003139 buffering effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/14—Handling requests for interconnection or transfer
- G06F13/16—Handling requests for interconnection or transfer for access to memory bus
- G06F13/1668—Details of memory controller
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/0223—User address space allocation, e.g. contiguous or non contiguous base addressing
- G06F12/023—Free address space management
- G06F12/0238—Memory management in non-volatile memory, e.g. resistive RAM or ferroelectric memory
- G06F12/0246—Memory management in non-volatile memory, e.g. resistive RAM or ferroelectric memory in block erasable memory, e.g. flash memory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/06—Addressing a physical block of locations, e.g. base addressing, module addressing, memory dedication
- G06F12/0646—Configuration or reconfiguration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
- G06F13/42—Bus transfer protocol, e.g. handshake; Synchronisation
- G06F13/4204—Bus transfer protocol, e.g. handshake; Synchronisation on a parallel bus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
- G06F3/0613—Improving I/O performance in relation to throughput
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
- G06F3/068—Hybrid storage device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0688—Non-volatile semiconductor memory arrays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0689—Disk arrays, e.g. RAID, JBOD
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
- G06F2212/10—Providing a specific technical effect
- G06F2212/1016—Performance improvement
- G06F2212/1024—Latency reduction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
- G06F2212/60—Details of cache memory
- G06F2212/608—Details relating to cache mapping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
- G06F2212/72—Details relating to flash memory management
- G06F2212/7201—Logical to physical mapping or translation of blocks or pages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
- G06F2212/72—Details relating to flash memory management
- G06F2212/7203—Temporary buffering, e.g. using volatile buffer or dedicated buffer blocks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2213/00—Indexing scheme relating to interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F2213/0024—Peripheral component interconnect [PCI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0647—Migration mechanisms
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Memory System Of A Hierarchy Structure (AREA)
Abstract
一种在数据传送技术之间动态切换的方法,包括接收I/O请求,并计算使用存储器拷贝数据传送技术执行I/O请求的成本。存储器拷贝数据传送技术将与I/O请求相关联的高速缓存段从高速缓存存储器拷贝到永久映射存储器,该永久映射存储器被永久映射到总线地址窗口。该方法还计算使用存储器映射数据传送技术执行I/O请求的成本。存储器映射数据传送技术将与I/O请求相关联的高速缓存段从高速缓存存储器临时映射到总线地址窗口。取决于哪个技术成本更低,该方法使用存储器拷贝数据传送技术和存储器映射数据传送技术之一来传送与I/O请求相关联的高速缓存段。还公开了对应的系统和计算机程序产品。
Description
技术领域
本发明涉及用于在存储器拷贝和存储器映射技术之间动态切换以优化存储系统中的I/O性能的系统和方法。
背景技术
外围部件互连(PCI)主桥可以实现数据处理系统内的处理器和输入/输出(I/O)子系统之间的通信。PCI主桥提供数据缓冲能力,以使读和写数据能够在处理器和I/O子系统之间传送。I/O子系统可以是一组连接到PCI总线的PCI设备。当PCI总线上的PCI设备通过直接存储器存取(DMA)向系统存储器发出读或写命令时,PCI主桥将DMA的PCI地址转换成系统存储器的系统存储器地址。
PCI总线上的每个PCI设备可以与驻留在系统存储器内的相应转换控制条目(TCE)表相关联。TCE表可以用于执行从PCI地址到系统存储器地址的TCE转换。响应于DMA读或写操作,PCI主桥读取相应的TCE表以提供TCE转换。
在诸如DS8000TM企业存储系统的存储系统中,由存储系统处理的每个I/O需要一次或多次映射存储系统的高速缓存存储器。例如,对高速缓存存储器的读取命中需要创建TCE映射,使得主机适配器可以经由DMA读取高速缓存存储器。然后在DMA完成之后解除映射该TCE映射。在读取未命中的情况下,需要两个TCE映射:在高速缓存存储器和设备适配器之间的一个映射,以便从存储驱动器检索读取的数据,以及在高速缓存存储器和主机适配器之间的第二映射,以便将读取的数据返回到主机系统。在DMA完成之后,TCE映射可以被解除映射。IBM和DS8000是国际商业机器公司在世界许多地区注册的商标。
鉴于上述内容,需要的是用于在诸如IBM DS8000TM企业存储系统的存储系统内传送数据的替代数据传送技术。进一步需要的是在几种数据传送技术之间动态切换以优化诸如IBM DS8000TM企业存储系统的存储系统中的I/O性能的系统和方法。
因此,需要解决上述问题的技术。
发明内容
从第一方面来看,本发明提供了一种用于在存储器拷贝和存储器映射数据传送技术之间动态切换以改进I/O性能的方法,该方法包括:接收I/O请求;计算使用存储器拷贝数据传送技术执行所述I/O请求的成本,所述存储器拷贝数据传送技术将与所述I/O请求相关联的高速缓存段从高速缓存存储器拷贝到永久映射存储器,其中所述永久映射存储器被永久映射到总线地址窗口;计算使用存储器映射数据传送技术执行所述I/O请求的成本,所述存储器映射数据传送技术将与所述I/O请求相关联的高速缓存段从所述高速缓存存储器临时映射到所述总线地址窗口;在使用所述存储器拷贝数据传送技术比使用所述存储器映射数据传送技术成本更低的情况下,使用所述存储器拷贝数据传送技术传送与所述I/O请求相关联的高速缓存段;以及在使用存储器映射数据传送技术比使用存储器拷贝数据传送技术成本更低的情况下,使用存储器映射数据传送技术来传送与I/O请求相关联的高速缓存段。
从另一方面来看,本发明提供了一种用于在存储器拷贝和存储器映射数据传送技术之间动态切换以改进I/O性能的系统,该系统包括:至少一个处理器;至少一个存储器设备,所述至少一个存储器设备耦合到所述至少一个处理器并且存储用于在所述至少一个处理器上执行的指令,所述指令使所述至少一个处理器:接收I/O请求;计算使用存储器拷贝数据传送技术执行所述I/O请求的成本,所述存储器拷贝数据传送技术将与所述I/O请求相关联的高速缓存段从高速缓存存储器拷贝到永久映射存储器,其中所述永久映射存储器被永久映射到总线地址窗口;计算使用存储器映射数据传送技术执行所述I/O请求的成本,所述存储器映射数据传送技术将与所述I/O请求相关联的高速缓存段从所述高速缓存存储器临时映射到所述总线地址窗口;在使用所述存储器拷贝数据传送技术比使用所述存储器映射数据传送技术成本更低的情况下,使用所述存储器拷贝数据传送技术来传送与所述I/O请求相关联的高速缓存段;以及在使用所述存储器映射数据传送技术比使用所述存储器拷贝数据传送技术成本更低的情况下,使用所述存储器映射数据传送技术来传送与所述I/O请求相关联的高速缓存段。
从另一方面来看,本发明提供了一种用于在存储器拷贝和存储器映射数据传送技术之间动态切换以改进I/O性能的计算机程序产品,该计算机程序产品包括计算机可读存储介质,该计算机可读存储介质可由处理电路读取并且存储用于由处理电路执行以便执行用于执行本发明的步骤的方法的指令。
从另一方面来看,本发明提供了一种存储在计算机可读介质上并且可加载到数字计算机的内部存储器中的计算机程序,包括软件代码部分,当所述程序在计算机上运行时,用于执行本发明的步骤。
从另一方面来看,本发明提供了一种用于在存储器拷贝和存储器映射数据传送技术之间动态切换以改进I/O性能的计算机程序产品,该计算机程序产品包括其中包含有计算机可用程序代码的计算机可读介质,该计算机可用程序代码被配置为当由至少一个处理器执行时执行以下操作:接收I/O请求;计算使用存储器拷贝数据传送技术执行所述I/O请求的成本,所述存储器拷贝数据传送技术将与所述I/O请求相关联的高速缓存段从高速缓存存储器拷贝到永久映射存储器,其中所述永久映射存储器被永久映射到总线地址窗口;计算使用存储器映射数据传送技术来执行所述I/O请求的成本,所述存储器映射数据传送技术将与所述I/O请求相关联的高速缓存段从所述高速缓存存储器临时映射到所述总线地址窗口;在使用所述存储器拷贝数据传送技术比使用所述存储器映射数据传送技术成本更低的情况下,使用所述存储器拷贝数据传送技术来传送与所述I/O请求相关联的高速缓存段;以及在使用所述存储器映射数据传送技术比使用所述存储器拷贝数据传送技术成本更低的情况下,使用所述存储器映射数据传送技术来传送与所述I/O请求相关联的高速缓存段。
本发明已经响应于本领域的当前状态,并且特别地,响应于本领域中尚未被当前可用的系统和方法完全解决的问题和需要而被开发。因此,本发明的实施例已经被开发来在存储器拷贝和存储器映射数据传送技术之间动态地切换以改进I/O性能。本发明的特征和优点将从以下描述和所附权利要求书中变得更加完全显而易见,或者可以通过如下文所述的本发明的实践来了解。
与前述一致,公开了一种在存储器拷贝和存储器映射数据传送技术之间动态切换以改进I/O性能的方法。该方法接收I/O请求并计算使用存储器拷贝数据传送技术执行I/O请求的成本。存储器拷贝数据传送技术将与I/O请求相关联的高速缓存段从高速缓存存储器拷贝到永久映射存储器,该永久映射存储器被永久映射到总线地址窗口。该方法还计算使用存储器映射数据传送技术执行I/O请求的成本。存储器映射数据传送技术将与I/O请求相关联的高速缓存段从高速缓存存储器临时映射到总线地址窗口。取决于哪个技术成本更低,该方法使用存储器拷贝数据传送技术和存储器映射数据传送技术中的一种来传送与I/O请求相关联的高速缓存段。
还公开了对应的系统和计算机程序产品,并在这里请求保护。
附图说明
为了容易地理解本发明的优点,将通过参考附图中示出的具体实施例来呈现对以上简要描述的本发明的更具体的描述。应理解,这些附图仅描绘了本发明的典型实施例,因此不应被认为是对其范围的限制,将通过使用附图以附加的特征和细节来描述和解释本发明,在附图中:
图1是示出其中可以实现根据本发明的系统和方法的网络环境的一个示例的高级框图;
图2是示出用于图1的网络环境中的存储系统的一个实施例的高级框图;
图3是示出存储器映射数据传送技术的示例的高级框图;
图4是示出存储器拷贝数据传送技术的示例的高级框图;
图5是示出用于确定针对特定I/O请求使用哪种数据传送技术的方法的一个实施例的流程图;
图6是示出为与存储器映射数据传送技术一起使用而分配的“映射”窗口和为与存储器拷贝数据传送技术一起使用而分配的“拷贝”窗口的高级框图;
图7是示出动态调整“映射”窗口的数量和“拷贝”窗口的数量以便在处理I/O请求时提高效率的高级框图;
图8是示出用于优化与存储器映射数据传送技术相关联使用的“映射”窗口的数量和与存储器拷贝数据传送技术相关联使用的“拷贝”窗口的数量的方法的一个实施例的流程图;
图9是示出用于优化与存储器映射数据传送技术相关联使用的“映射”窗口的数量和与存储器拷贝数据传送技术相关联使用的“拷贝”窗口的数量的方法的另一个实施例的流程图;以及
图10是示出用于确定是利用存储器映射数据传送技术还是存储器拷贝数据传送技术来处理I/O请求的方法的一个实施例的流程图。
具体实施方式
容易理解,如在这里的附图中一般性描述和示出的,本发明的部件可以以各种不同的配置来布置和设计。因此,如附图中所表示的,本发明的实施例的以下更详细的描述不旨在限制所要求保护的本发明的范围,而仅仅是根据本发明的目前预期的实施例的某些示例的代表。通过参考附图,将更好地理解目前描述的实施例,其中,在所有附图中,相同的部件由相同的附图标记表示。
本发明可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本发明的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。
计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本发明的各个方面。
在此可以参考根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图来描述本发明的各方面。将理解,流程图和/或框图的每个框以及流程图和/或框图中的框的组合可由计算机可读程序指令来实现。
这些计算机可读程序指令可以被提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器以产生机器,使得经由计算机或其他可编程数据处理装置的处理器执行的指令创建用于实现流程图和/或框图的一个或多个框中指定的功能/动作的装置。这些计算机可读程序指令还可以存储在计算机可读存储介质中,其可以引导计算机、可编程数据处理装置和/或其他设备以特定方式工作,使得其中存储有指令的计算机可读存储介质包括制品,该制品包括实现流程图和/或框图的一个或多个框中指定的功能/动作的各方面的指令。
计算机可读程序指令还可以被加载到计算机、其他可编程数据处理装置或其他设备上,以使得在计算机、其他可编程装置或其他设备上执行一系列操作步骤,以产生计算机实现的过程,使得在计算机、其他可编程装置或其他设备上执行的指令实现流程图和/或框图的一个或多个框中指定的功能/动作。
参考图1,示出了网络环境100的一个示例。网络环境100被呈现以示出其中可以实现根据本发明的系统和方法的环境的一个示例。网络环境100是作为示例而非限制来呈现的。实际上,本文公开的系统和方法可适用于除所示网络环境100之外的各种各样的不同网络环境。
如图所示,网络环境100包括通过网络104互连的一个或多个计算机102、106。网络104可以包括例如局域网(LAN)104、广域网(WAN)104、因特网104、内联网104等。在某些实施例中,计算机102、106可以包括客户端计算机102和服务器计算机106(在此也称为"主机"106或"主机系统"106)。通常,客户端计算机102发起通信会话,而服务器计算机106等待并响应来自客户端计算机102的请求。在某些实施例中,计算机102和/或服务器106可以连接到一个或多个内部或外部直接附接的存储系统112(例如,硬盘存储驱动器、固态驱动器、磁带驱动器等的阵列)。这些计算机102、106和直接附接的存储系统112可以使用诸如ATA、SATA、SCSI、SAS、光纤通道等协议进行通信。
在某些实施例中,网络环境100可以包括服务器106后面的存储网络108,例如存储区域网络(SAN)108或LAN 108(例如,当使用网络附接的存储装置时)。该网络108可以将服务器106连接到一个或多个存储系统110,例如硬盘驱动器或固态驱动器的阵列110a、磁带库110b、单独的硬盘驱动器110c或固态驱动器110c、磁带驱动器110d、CD-ROM库等。为了访问存储系统110,主机系统106可以通过从主机106上的一个或多个端口到存储系统110上的一个或多个端口的物理连接进行通信。连接可以通过交换机、结构、直接连接等。在某些实施例中,服务器106和存储系统110可以使用诸如光纤通道(FC)或iSCSI的联网标准进行通信。
参考图2,示出了包含硬盘驱动器204和/或固态驱动器204的阵列的存储系统110a的一个示例。示出了存储系统110a的内部组件,因为根据本发明的系统和方法可以在这样的存储系统110a中实现。如图所示,存储系统110a包括存储控制器200、一个或多个交换机202以及一个或多个存储驱动器204,诸如硬盘驱动器204和/或固态驱动器204(例如,基于闪存存储器的驱动器204)。存储控制器200可以使一个或多个主机系统106(例如,运行诸如等的操作系统的开放系统和/或主机服务器106)能够访问一个或多个存储驱动器204中的数据。z/OS和z/VM**是国际商业机器公司在世界许多地区注册的商标
在所选实施例中,存储控制器200包括一个或多个服务器206a、206b。存储控制器200还可以包括主机适配器208和设备适配器210,以将存储控制器200分别连接到主机系统106和存储驱动器204。多个服务器206a、206b可以提供冗余以确保数据总是可用于连接的主机系统106。因此,当一个服务器206a发生故障时,另一个服务器206b可以获得发生故障的服务器206a的I/O负载,以确保I/O能够在主机系统106和存储驱动器204之间继续。该过程可以被称为"故障转移"。"
在所选实施例中,每个服务器206包括一个或多个处理器212和存储器214。存储器214可以包括易失性存储器(例如,RAM)以及非易失性存储器(例如,ROM、EPROM、EEPROM、硬盘、闪存等)。在某些实施例中,易失性和非易失性存储器可以存储在处理器212上运行并且用于访问存储驱动器204中的数据的软件模块。这些软件模块可以管理对存储驱动器204中的逻辑卷的所有读取和写入请求。
在某些实施例中,存储器214包括高速缓存216,例如DRAM高速缓存216。无论何时主机106(例如,开放系统或主机服务器)对未驻留在高速缓存216中的数据执行读取操作,执行读取的服务器206可以从存储驱动器204获取数据,并且在再次需要数据的情况下将其保存在其高速缓存216中。如果主机系统106再次请求数据,则服务器206可以从高速缓存216获取数据,而不是从存储驱动器204获取数据,从而节省时间和资源。类似地,当主机系统106执行写入时,接收写入请求的服务器206可以将修改的数据存储在其高速缓存216中,并且在稍后的时间将修改的数据送出到存储驱动器204。
具有与图2所示的体系结构类似的体系结构的存储系统110a的一个例子是IBMDS8000TM企业存储系统。DS8000TM是高性能、高容量的存储控制器,提供被设计成支持连续操作的磁盘和固态存储。然而,这里公开的技术不限于IBM DS8000TM企业存储系统110a,而是可以在任何可比较的或类似的存储系统110中实现,而不管与系统110相关联的制造商、产品名称、或组件名称。任何可以从本发明的一个或多个实施例中受益的存储系统都被认为落入本发明的范围内。因此,IBM DS8000TM仅作为示例而非限制给出。
参考图3,通常,外围部件互连(PCI)主桥可以使能数据处理系统内的处理器和输入/输出(I/O)子系统之间的通信。PCI主桥可以提供数据缓冲能力,以使得能够在处理器和I/O子系统之间传送读取和写入数据。I/O子系统可以是连接到PCI总线的一组PCI设备(主机适配器和/或设备适配器)。当PCI总线上的PCI设备经由直接存储器访问(DMA)向系统存储器发起读取或写入命令时,PCI主桥可以将DMA的PCI地址转换成系统存储器的系统存储器地址。
PCI总线上的每个PCI设备可以与驻留在系统存储器214内的相应的转换控制条目(TCE)映射302相关联。TCE映射302可以用于执行从PCI地址到系统存储器地址的TCE转换。响应于DMA读或写操作,PCI主桥读取相应的TCE映射以提供TCE转换。
在诸如IBM DS8000TM企业存储系统的存储系统中,由存储系统110处理的每个I/O需要一次或多次映射存储系统110的高速缓存存储器216。例如,对高速缓存存储器216的读取命中需要创建TCE映射302,使得主机适配器208可以经由DMA读取高速缓存存储器216。然后在DMA完成之后解除映射该TCE映射302。在读取未命中的情况下,需要两个TCE映射:在高速缓存存储器216和设备适配器210之间的一个映射302,以便从存储驱动器204检索读取的数据,以及在高速缓存存储器216和主机适配器208之间的第二映射302,以便将读取的数据返回到主机系统106。在DMA完成之后,TCE映射302可以被解除映射。
TCE映射和解除映射在时间方面可能是昂贵的,尤其是在高I/O速率的情况下。一种规避对TCE映射302的需要的方法是保持高速缓存存储器216的某些部分被永久映射(即,使用专用永久映射存储器)。当I/O到达时,可以将所请求的数据从高速缓存存储器216拷贝到该永久映射存储器400。然后,DMA可以从该永久映射存储器400发生,而不需要执行TCE映射/解除映射。该技术消除了执行TCE映射/解除映射的成本(例如,所需的时间),但是引入了将数据从一个存储器位置拷贝到另一个存储器位置的成本(例如,所需的时间)。该成本可以取决于两个存储器位置相对于彼此的位置。有时,执行TCE映射/解除映射的成本可能较小,而在其它时候,将数据拷贝到永久映射存储器400的成本可能较小。
鉴于上述内容,需要在存储器拷贝和存储器映射数据传送技术之间动态切换的系统和方法,以优化诸如IBM DS8000TM企业存储系统的存储系统中的I/O性能。理想地,取决于所涉及的I/O操作,这样的系统和方法将利用最有效的数据传送技术(即,存储器拷贝或存储器映射)。
图3是示出诸如TCE映射的存储器映射数据传送技术的一个示例的高级框图。如图所示,高速缓存216可以包括一个或多个高速缓存段300,例如四千字节的高速缓存段300。在某些实施例中,诸如"轨道"的数据元素可以由多个高速缓存段300、诸如十七个高速缓存段300组成。因此,在轨道由十七个各为四千字节的高速缓存段300构成的情况下,该轨道可包含六十八个千字节的数据。在许多情况下,与轨道相关联的高速缓存段300在高速缓存216中可能不是连续的。即,轨道的高速缓存段300可以零星地或随机地位于高速缓存216中的不同位置。因此,为了在高速缓存216中读取或写入轨道(即,高速缓存段300的连续序列),可能需要将轨道映射到对应的高速缓存段300。在某些实施例中,映射302(例如,TCE映射302)可以将与轨道相关联的高速缓存段300映射到总线地址窗口304,使得主机适配器208和/或设备适配器210可以经由DMA向/从高速缓存216传送轨道。在某些实施例中,映射302可以按照高速缓存段300在轨道中的排列顺序对其进行排序,如图3所示。
图4是示出存储器拷贝数据传送技术的示例的高级框图。如图所示,存储器拷贝数据传送技术可以首先将与数据元素(例如,轨道)相关联的高速缓存段300拷贝到永久映射存储器400,而不是将高速缓存段300映射到总线地址窗口304。永久映射存储器400可以驻留在与高速缓存216相同的存储器214(例如,存储器芯片)中,或者驻留在不同的存储器214(例如,存储器芯片)中。因此,将高速缓存段300从高速缓存216拷贝到永久映射存储器400可能具有一些成本,其大小可能根据高速缓存216和永久映射存储器400的位置以及在它们之间拷贝数据所需的时间而变化。在某些实施例中,拷贝的高速缓存段300可以与它们存在于轨道中相同的方式在永久映射存储器400中排序,从而提供可以由主机适配器208和/或设备适配器210经由DMA传送的高速缓存段300的连续排序的组。
参考图5,示出了用于确定针对特定I/O请求使用哪种数据传送技术的方法500的一个实施例的流程图。该方法500可以在每次存储系统110接收到I/O请求时执行。如图所示,方法500最初接收502I/O请求。然后,方法500使用存储器映射数据传送技术、例如图3中描述的存储器映射数据传送技术,计算504与执行I/O请求相关联的成本。在某些实施例中,可以通过分析过去的统计数据来确定映射和解除映射特定数据轨道通常花费多长时间来计算504成本。
然后,方法500计算506使用存储器拷贝数据传送技术、诸如结合图4描述的存储器拷贝数据传送技术来执行I/O请求的成本。在某些实施例中,通过确定要拷贝到永久映射存储器400的高速缓存段300的数量,计算与使用存储器拷贝数据传送技术相关联的成本。在某些实施例中,存储器拷贝数据传送技术可以用于拷贝少于完整轨道的数据,而存储器映射数据传送技术可能需要映射高速缓存段300的完整轨道。因此,存储器拷贝数据传送技术可以比存储器映射数据传送技术更高效地进行较小传送(例如,少于数据的完整轨道)。与存储器拷贝数据传送技术相关联的成本也可取决于高速缓存216和永久映射存储器400的相对位置。例如,如果高速缓存216和永久映射存储器400位于同一存储器芯片中,则成本可以更低,因为拷贝数据的时间可以更短。另一方面,如果高速缓存216和永久映射存储器400位于不同的存储器芯片上,则成本可能更高,因为拷贝数据所需的时间可能更长。
然后,方法500比较508存储器映射数据传送技术的成本与存储器拷贝数据传送技术的成本。如果存储器映射数据传送技术的成本较大,则如果可能,方法500可使用510存储器拷贝数据传送技术来将与I/O请求相关联的数据从/向高速缓存216传送到主机适配器208和/或设备适配器210。另一方面,如果存储器拷贝数据传送技术的成本较大,则如果可能,方法500可以使用512存储器映射数据传送技术来将与I/O请求相关联的数据从/向高速缓存216传送到主机适配器208和/或设备适配器210。如将结合图10更详细地解释的,存储器映射或存储器拷贝数据传送技术的使用可取决于是"映射"窗口还是"拷贝"窗口可用于传送数据。将结合图10描述用于执行图5的步骤510和512的方法的更详细的实施例。
参考图6,在某些实施例中,可以分配指定数量的"映射"窗口600用于使用存储器映射数据传送技术来传送数据,并且可以分配指定数量的"拷贝"窗口602用于使用存储器拷贝数据传送技术来传送数据。每个"映射"窗口可以提供用于使用存储器映射数据传送技术来传送数据的总线地址窗口304,并且每个"拷贝"窗口可以提供用于使用存储器拷贝数据传送技术来传送数据的总线地址窗口304。如前所述,总线地址窗口304可以为主机适配器208和/或设备适配器210提供在地址总线上读或写一定量的连续存储空间(例如,轨道)的方式。
例如,假设最初分配了总共两千个窗口用于传送数据,并且在这两千个窗口中,一千个窗口是"映射"窗口,而另一千个窗口是"拷贝"窗口。"映射"窗口可用于为认为存储器映射数据传送技术更有效的I/O请求服务,而"拷贝"窗口可用于为认为存储器拷贝数据传送技术更有效的I/O请求服务。如果最初分配了一定数量的"拷贝"窗口和"映射"窗口用于传送数据,则根据本发明的系统和方法可根据输入的I/O请求动态地调整分配给每一数据传送技术的窗口的相应数量。例如,如果没有足够的"拷贝"窗口可用于服务被标识为使用存储器拷贝数据传送技术的传入I/O请求,则可以将总共的窗口中的更多窗口分配给"拷贝"窗口602,并可以将总共的窗口中的更少窗口分配给"映射"窗口600,如图7所示。以此方式,"拷贝"窗口的数量和"映射"窗口的数量可被动态地改变以对应于传入的I/O请求。
参考图8,示出了用于分配窗口和动态改变窗口分配的方法800的一个实施例。如图所示,方法800最初分配802将与存储器拷贝数据传送技术相关联地使用的第一数量的"拷贝"窗口和将与存储器映射数据传送技术相关联地使用的第二数量的"映射"窗口。在某些实施例中,分配窗口可以包括分配一定量的存储器214以实现窗口。例如,可以将存储器214的两个吉字节(gigabyte)分配给窗口,其中,一个吉字节被分配给与存储器映射数据传送技术相关联的映射302,一个吉字节被分配给与存储器拷贝数据传送技术相关联的永久映射存储器400。
在其它实施例中,分配可包括窗口的总数,其中总窗口的某一比例是"映射"窗口,而总窗口的剩余比例是"拷贝"窗口。在某些实施例中,窗口的总数或分配给窗口的存储器214的总量是固定的。在其它实施例中,窗口的总数或分配给窗口的存储器214的总量根据需要进行调整。窗口的初始分配可以基于对需要多少的估计或猜测,或者基于统计数据,例如过去已经接收到的I/O的类型。
一旦分配了第一数量的"拷贝"窗口和第二数量的"映射"窗口,方法800就在一段时间内使用(如果可能的话)处理I/O请求最有效的数据传送技术来处理804I/O请求。也就是说,如果存储器映射数据传送技术被认为对于处理I/O请求更有效,则方法800理想地利用存储器映射数据传送技术和相关联的"映射"窗口来处理I/O请求。类似地,如果存储器拷贝数据传送技术被认为对于处理I/O请求更有效,则方法800理想地利用存储器拷贝数据传送技术和相关联的"拷贝"窗口来处理I/O请求。
在处理I/O请求时,方法800跟踪806存储器拷贝数据传送技术理想地被利用但由于缺少相关联的"拷贝"窗口而不可用的次数。类似地,方法800跟踪808存储器映射数据传送技术理想地被利用但由于缺少相关联的"映射"窗口而不可用的次数。基于每种类型的窗口不可用的次数,方法800动态地改变810"拷贝"窗口和"映射"窗口的分配(例如,相对于"映射"窗口的数量改变"拷贝"窗口的数量,或增加/减少"拷贝"窗口和/或"映射"窗口的数量)。这可以以最小化需要特定类型的窗口但不可用的次数为目标来执行。
参考图9,示出了用于分配窗口和动态改变窗口分配的方法900的另一实施例。如图所示,方法900最初分配902与存储器拷贝数据传送技术相关联地使用的第一数量的"拷贝"窗口和与存储器映射数据传送技术相关联地使用的第二数量的"映射"窗口。一旦分配了第一数量的"拷贝"窗口和第二数量的"映射"窗口,方法900就在一段时间内使用(如果可能的话)处理I/O请求最有效的数据传送技术来处理904I/O请求。
在处理I/O请求的同时,方法900跟踪906特定类型的I/O请求的比例。例如,方法900可以跟踪906什么比例的I/O请求是顺序I/O请求、大的随机I/O请求和小的随机I/O请求。顺序I/O请求和大的随机I/O请求通常是全轨道访问,因此可以使用存储器映射数据传送技术来更有效地处理。相反,小的随机I/O请求可以包括少于全轨道的访问,因此可以使用存储器拷贝数据传送技术来更有效地处理。如先前所解释的,存储器拷贝数据传送技术可以用于拷贝少于完整轨道的数据,而存储器映射数据传送技术可能需要映射完整轨道的高速缓存段300。
根据每种类型的I/O请求的比例,方法900可以动态地调整"拷贝"窗口的数量和"映射"窗口的数量,以符合输入I/O请求的组成和类型。这可以尽可能地确保为每个输入I/O请求选择和使用最有效的数据传送技术。
图10是示出用于确定是利用存储器映射数据传送技术还是存储器拷贝数据传送技术来处理I/O请求的方法1000的一个实施例的流程图。在某些实施例中,使用该方法1000来代替图5中所示的步骤510、512。如图所示,方法1000最初为接收的I/O请求确定1002使用存储器拷贝数据传送技术是否比使用存储器映射数据传送技术成本更低。如果是,则方法1000确定"拷贝"窗口的可用数目是否低于阈值(例如,100),"映射"窗口的可用数目是否高于阈值(例如,100),以及使用存储器拷贝数据传送技术和使用存储器映射数据传送技术之间的成本差是否低于阈值(例如,5微秒)。如果满足这些条件,则方法1000使用1004存储器映射数据传送技术来传输与I/O请求相关联的数据。实质上,如果"拷贝"窗口供应不足,"映射"窗口未处于供应不足,并且数据传送技术之间的成本差不是太大,则该步骤1004使用存储器映射数据传送技术来传送与I/O请求相关联的数据。否则,方法1000进行到下一步骤1006。
在步骤1006,如果没有"拷贝"窗口可用,但是至少一个"映射"窗口可用,则方法1000使用1006存储器映射数据传送技术来传送与I/O请求相关联的数据,而不管使用存储器拷贝数据传送技术和使用存储器映射数据传送技术之间的成本差异。实质上,如果存储器映射数据传送技术是仅有的选项,即使使用存储器拷贝数据传送技术是最有效的,该步骤1006也使用存储器映射数据传送技术来传送与I/O请求相关联的数据。否则,方法1000进行到下一步骤1008。
在步骤1008,如果没有"拷贝"窗口和"映射"窗口可用,则方法1000等待1008下一个可用窗口("拷贝"窗口或"映射"窗口),并使用该窗口以及相应的数据传送技术来传送与I/O请求相关联的数据。这是在不考虑使用存储器拷贝数据传送技术和使用存储器映射数据传送技术之间的成本差异的情况下执行的。否则,方法1000进行到下一步骤1010。在步骤1010,方法1000使用存储器拷贝数据传送技术来传送与I/O请求相关联的数据,因为"拷贝"窗口是可用的,并且使用存储器拷贝数据传送技术比使用存储器映射数据传送技术成本更低。
如果在步骤1002存储器拷贝数据传送技术不比存储器映射数据传送技术成本更低(意味着存储器映射数据传送技术比存储器拷贝数据传送技术成本更低),则方法1000进行到步骤1012。在步骤1012,方法1000确定1012"映射"窗口的可用数目是否低于阈值(例如,100),"拷贝"窗口的可用数目是否高于阈值(例如,100),以及使用存储器映射数据传送技术和使用存储器拷贝数据传送技术之间的成本差是否低于阈值(例如,5微秒)。如果满足这些条件,则方法1000使用1012存储器拷贝数据传送技术来传送与I/O请求相关联的数据。实质上,如果"映射"窗口供应不足,"拷贝"窗口未处于供应不足,并且数据传送技术之间的成本差不是太大,则该步骤1012使用存储器拷贝数据传送技术来传送与I/O请求相关联的数据。否则,方法1000进行到下一步骤1014。
在步骤1014,如果没有"映射"窗口可用但至少一个"拷贝"窗口可用,则方法1000使用1014存储器拷贝数据传送技术来传送与I/O请求相关联的数据,而不管使用存储器映射数据传送技术和使用存储器拷贝数据传送技术之间的成本差异。实质上,如果存储器拷贝数据传送技术是仅有的选项,则该步骤1014就使用存储器拷贝数据传送技术来传送与I/O请求相关联的数据,即使使用存储器映射数据传送技术会更有效。否则,方法1000进行到下一步骤1016。
在步骤1016,如果没有"映射"窗口或"拷贝"窗口可用,则方法1000等待1016下一个可用窗口("拷贝"窗口或"映射"窗口),并使用该窗口以及相应的数据传送技术来传送数据。这是在不考虑存储器映射数据传送技术和存储器拷贝数据传送技术之间的成本差异的情况下执行的。否则,方法1000进行到下一步骤1018。在步骤1018,方法1000使用1018存储器映射数据传送技术来传送与I/O请求相关联的数据,因为"映射"窗口是可用的,并且使用存储器映射数据传送技术比使用存储器拷贝数据传送技术成本更低。
附图中的流程图和/或框图示出了根据本发明的各种实施例的系统、方法和计算机可用介质的可能实现的架构、功能和操作。在这点上,流程图或框图中的每个框可以表示代码的模块、段或部分,其包括用于实现指定的逻辑功能的一个或多个可执行指令。还应当注意,在一些备选实现中,框中所标注的功能可以不按图中所标注的顺序发生。例如,连续示出的两个框实际上可以基本上同时执行,或者这些框有时可以以相反的顺序执行,这取决于所涉及的功能。还将注意,框图和/或流程图的每个框以及框图和/或流程图中的框的组合可以由执行指定功能或动作的基于专用硬件的系统或专用硬件和计算机指令的组合来实现。
Claims (15)
1.一种用于在存储器拷贝和存储器映射数据传送技术之间动态切换以改进I/O性能的方法,所述方法包括:
接收I/O请求;
计算使用存储器拷贝数据传送技术执行所述I/O请求的成本,所述存储器拷贝数据传送技术将与所述I/O请求相关联的高速缓存段从高速缓存存储器拷贝到永久映射存储器,其中所述永久映射存储器被永久映射到总线地址窗口;
计算使用存储器映射数据传送技术执行所述I/O请求的成本,所述存储器映射数据传送技术将与所述I/O请求相关联的高速缓存段从所述高速缓存存储器临时映射到所述总线地址窗口;
在使用所述存储器拷贝数据传送技术比使用所述存储器映射数据传送技术成本更低的情况下,使用所述存储器拷贝数据传送技术来传送与所述I/O请求相关联的高速缓存段;以及
在使用所述存储器映射数据传送技术比使用所述存储器拷贝数据传送技术成本更低的情况下,使用所述存储器映射数据传送技术来传送与所述I/O请求相关联的高速缓存段。
2.根据权利要求1所述的方法,其中,所述总线地址窗口是外围部件互连(PCI)总线地址窗口。
3.根据前述权利要求中任一项所述的方法,其中,计算使用所述存储器拷贝数据传送技术执行所述I/O请求的成本包括计算要拷贝到所述永久映射存储器的高速缓存段的数量。
4.根据前述权利要求中任一项所述的方法,其中,计算使用所述存储器拷贝数据传送技术执行所述I/O请求的成本包括确定所述高速缓存存储器与所述永久映射存储器之间的拷贝等待时间。
5.根据权利要求4所述的方法,其中确定所述高速缓存存储器与所述永久映射存储器之间的所述拷贝等待时间包括确定所述高速缓存存储器和所述永久映射存储器的位置。
6.根据前述权利要求中任一项所述的方法,其中计算使用所述存储器映射数据传送技术执行所述I/O请求的成本包括估计将与所述I/O请求相关联的高速缓存段从所述高速缓存存储器映射到所述总线地址窗口和解除映射中的至少一个所需的时间量。
7.根据前述权利要求中任一项所述的方法,其中,所述高速缓存段在所述高速缓存存储器中不是全部连续的。
8.一种用于在存储器拷贝和存储器映射数据传送技术之间动态切换以改进I/O性能的计算机程序产品,所述计算机程序产品包括:
一种计算机可读存储介质,其可由处理电路读取并且存储用于由所述处理电路执行以用于执行根据权利要求1至7中任一项所述的方法的指令。
9.一种存储在计算机可读介质上并且可加载到数字计算机的内部存储器中的计算机程序,包括软件代码部分,当所述程序在计算机上运行时,用于执行根据权利要求1至7中任一项所述的方法。
10.一种用于在存储器拷贝和存储器映射数据传送技术之间动态切换以改进I/O性能的系统,所述系统包括:
至少一个处理器;
至少一个存储器设备,所述至少一个存储器设备耦合到所述至少一个处理器并且存储用于在所述至少一个处理器上执行的指令,所述指令使所述至少一个处理器:
接收I/O请求;
计算使用存储器拷贝数据传送技术执行所述I/O请求的成本,所述存储器拷贝数据传送技术将与所述I/O请求相关联的高速缓存段从高速缓存存储器拷贝到永久映射存储器,其中所述永久映射存储器被永久映射到总线地址窗口;
计算使用存储器映射数据传送技术执行所述I/O请求的成本,所述存储器映射数据传送技术将与所述I/O请求相关联的高速缓存段从所述高速缓存存储器临时映射到所述总线地址窗口;
在使用所述存储器拷贝数据传送技术比使用所述存储器映射数据传送技术成本更低的情况下,使用所述存储器拷贝数据传送技术来传送与所述I/O请求相关联的高速缓存段;以及
在使用所述存储器映射数据传送技术比使用所述存储器拷贝数据传送技术成本更低的情况下,使用所述存储器映射数据传送技术来传送与所述I/O请求相关联的高速缓存段。
11.根据权利要求10所述的系统,其中,所述总线地址窗口是外围部件互连(PCI)总线地址窗口。
12.根据权利要求10或11中任一项所述的系统,其中,计算使用所述存储器拷贝数据传送技术执行所述I/O请求的成本包括计算要拷贝到所述永久映射存储器的高速缓存段的数量。
13.根据权利要求10至12中任一项所述的系统,其中,计算使用所述存储器拷贝数据传送技术执行所述I/O请求的成本包括确定所述高速缓存存储器与所述永久映射存储器之间的拷贝等待时间。
14.根据权利要求13所述的系统,其中确定所述高速缓存存储器与所述永久映射存储器之间的所述拷贝等待时间包括确定所述高速缓存存储器和所述永久映射存储器的位置。
15.根据权利要求10至14中任一项所述的系统,其中计算使用所述存储器映射数据传送技术执行所述I/O请求的成本包括估计将与所述I/O请求相关联的高速缓存段从所述高速缓存存储器映射到所述总线地址窗口和解除映射中的至少一个所需的时间量。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/567,747 US11016692B2 (en) | 2019-09-11 | 2019-09-11 | Dynamically switching between memory copy and memory mapping to optimize I/O performance |
US16/567,747 | 2019-09-11 | ||
PCT/IB2020/058197 WO2021048709A1 (en) | 2019-09-11 | 2020-09-03 | Dynamically switching between memory copy and memory mapping to optimize 1/o performance |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114127699A true CN114127699A (zh) | 2022-03-01 |
CN114127699B CN114127699B (zh) | 2024-06-25 |
Family
ID=74849768
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080049597.2A Active CN114127699B (zh) | 2019-09-11 | 2020-09-03 | 在存储器拷贝和存储器映射之间动态切换以优化i/o性能 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11016692B2 (zh) |
JP (1) | JP7495191B2 (zh) |
CN (1) | CN114127699B (zh) |
DE (1) | DE112020003721T5 (zh) |
GB (1) | GB2602404B (zh) |
WO (1) | WO2021048709A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11860773B2 (en) * | 2022-02-03 | 2024-01-02 | Micron Technology, Inc. | Memory access statistics monitoring |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1685329A (zh) * | 2002-07-24 | 2005-10-19 | 英特尔公司 | 用于控制多个输入/输出设备的方法、系统和程序 |
CN1801121A (zh) * | 2004-05-03 | 2006-07-12 | 微软公司 | 非易失性存储器高速缓存性能改进 |
CN103246614A (zh) * | 2012-02-08 | 2013-08-14 | 国际商业机器公司 | 多处理器数据处理系统、高速缓存存储器及其方法 |
CN103500316A (zh) * | 2012-05-14 | 2014-01-08 | 英飞凌科技奥地利有限公司 | 用于具有不同执行模式的处理装置的系统和方法 |
CN103842967A (zh) * | 2011-10-03 | 2014-06-04 | 国际商业机器公司 | 维护多个目标拷贝 |
US8966133B2 (en) * | 2012-11-16 | 2015-02-24 | International Business Machines Corporation | Determining a mapping mode for a DMA data transfer |
US20180081568A1 (en) * | 2015-12-15 | 2018-03-22 | International Business Machines Corporation | Implementing synchronization for remote disk mirroring |
CN108694101A (zh) * | 2017-03-31 | 2018-10-23 | 英特尔公司 | 存储器侧高速缓存内容的持久性高速缓存 |
CN109522102A (zh) * | 2018-09-11 | 2019-03-26 | 华中科技大学 | 一种基于i/o调度的多任务外存模式图处理方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007079715A (ja) | 2005-09-12 | 2007-03-29 | Fuji Xerox Co Ltd | データ転送方法、プログラムおよび装置 |
US7685330B2 (en) * | 2006-03-09 | 2010-03-23 | International Business Machines Corporation | Method for efficient determination of memory copy versus registration in direct access environments |
KR101532951B1 (ko) | 2006-12-06 | 2015-07-09 | 론지튜드 엔터프라이즈 플래시 에스.에이.알.엘. | 고-용량, 비-휘발성 스토리지를 위한 캐시로서의 솔리드-스테이트 스토리지 장치, 시스템 및 방법 |
US20120036302A1 (en) | 2010-08-04 | 2012-02-09 | International Business Machines Corporation | Determination of one or more partitionable endpoints affected by an i/o message |
US9432298B1 (en) | 2011-12-09 | 2016-08-30 | P4tents1, LLC | System, method, and computer program product for improving memory systems |
US10268583B2 (en) | 2012-10-22 | 2019-04-23 | Intel Corporation | High performance interconnect coherence protocol resolving conflict based on home transaction identifier different from requester transaction identifier |
-
2019
- 2019-09-11 US US16/567,747 patent/US11016692B2/en active Active
-
2020
- 2020-09-03 GB GB2203249.4A patent/GB2602404B/en active Active
- 2020-09-03 WO PCT/IB2020/058197 patent/WO2021048709A1/en active Application Filing
- 2020-09-03 JP JP2022515916A patent/JP7495191B2/ja active Active
- 2020-09-03 CN CN202080049597.2A patent/CN114127699B/zh active Active
- 2020-09-03 DE DE112020003721.5T patent/DE112020003721T5/de active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1685329A (zh) * | 2002-07-24 | 2005-10-19 | 英特尔公司 | 用于控制多个输入/输出设备的方法、系统和程序 |
CN1801121A (zh) * | 2004-05-03 | 2006-07-12 | 微软公司 | 非易失性存储器高速缓存性能改进 |
CN103842967A (zh) * | 2011-10-03 | 2014-06-04 | 国际商业机器公司 | 维护多个目标拷贝 |
CN103246614A (zh) * | 2012-02-08 | 2013-08-14 | 国际商业机器公司 | 多处理器数据处理系统、高速缓存存储器及其方法 |
CN103500316A (zh) * | 2012-05-14 | 2014-01-08 | 英飞凌科技奥地利有限公司 | 用于具有不同执行模式的处理装置的系统和方法 |
US8966133B2 (en) * | 2012-11-16 | 2015-02-24 | International Business Machines Corporation | Determining a mapping mode for a DMA data transfer |
US20180081568A1 (en) * | 2015-12-15 | 2018-03-22 | International Business Machines Corporation | Implementing synchronization for remote disk mirroring |
CN108694101A (zh) * | 2017-03-31 | 2018-10-23 | 英特尔公司 | 存储器侧高速缓存内容的持久性高速缓存 |
CN109522102A (zh) * | 2018-09-11 | 2019-03-26 | 华中科技大学 | 一种基于i/o调度的多任务外存模式图处理方法 |
Also Published As
Publication number | Publication date |
---|---|
US20210072918A1 (en) | 2021-03-11 |
GB2602404A (en) | 2022-06-29 |
DE112020003721T5 (de) | 2022-05-25 |
US11016692B2 (en) | 2021-05-25 |
WO2021048709A1 (en) | 2021-03-18 |
GB202203249D0 (en) | 2022-04-20 |
JP2022547684A (ja) | 2022-11-15 |
CN114127699B (zh) | 2024-06-25 |
GB2602404B (en) | 2022-11-09 |
JP7495191B2 (ja) | 2024-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111095188B (zh) | 用于动态数据重定位的计算机实现的方法和存储系统 | |
CN107241913B (zh) | 信息处理装置 | |
US10459652B2 (en) | Evacuating blades in a storage array that includes a plurality of blades | |
US8782335B2 (en) | Latency reduction associated with a response to a request in a storage system | |
CN110825670A (zh) | 基于NVMe协议的主机与固态驱动器(SSD)之间的受管理交换 | |
US20100262762A1 (en) | Raid configuration in a flash memory data storage device | |
CN111095903B (zh) | 使用云存储作为模组的存储系统 | |
US9542328B2 (en) | Dynamically controlling a file system write cache | |
US10581969B2 (en) | Storage system using cloud based ranks as replica storage | |
US9535844B1 (en) | Prioritization for cache systems | |
WO2019047026A1 (zh) | 数据迁移的方法、系统及智能网卡 | |
JP7135074B2 (ja) | クラウド・ベースのランクを使用するシン・プロビジョニング | |
US20160011801A1 (en) | Storage region metadata management | |
US20210255794A1 (en) | Optimizing Data Write Size Using Storage Device Geometry | |
CN114127699B (zh) | 在存储器拷贝和存储器映射之间动态切换以优化i/o性能 | |
CN112486406B (zh) | 动态调整多个存储器拷贝和存储器映射窗口以优化i/o性能 | |
EP3166019B1 (en) | Memory devices and methods | |
US10705905B2 (en) | Software-assisted fine-grained data protection for non-volatile memory storage devices | |
US11163475B2 (en) | Block input/output (I/O) accesses in the presence of a storage class memory |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |