CN112181870A - 内存页面管理方法、装置、设备及可读存储介质 - Google Patents
内存页面管理方法、装置、设备及可读存储介质 Download PDFInfo
- Publication number
- CN112181870A CN112181870A CN202010978998.8A CN202010978998A CN112181870A CN 112181870 A CN112181870 A CN 112181870A CN 202010978998 A CN202010978998 A CN 202010978998A CN 112181870 A CN112181870 A CN 112181870A
- Authority
- CN
- China
- Prior art keywords
- page
- memory
- read
- write
- disk
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/957—Browsing optimisation, e.g. caching or content distillation
- G06F16/9574—Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
- G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
- G06F12/0866—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches for peripheral storage systems, e.g. disk cache
- G06F12/0871—Allocation or management of cache space
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Memory System Of A Hierarchy Structure (AREA)
- Techniques For Improving Reliability Of Storages (AREA)
Abstract
本发明公开了一种内存页面管理方法、装置、设备及可读存储介质,所述内存页面管理方法包括:当需要将页面从磁盘加载到内存时,根据预先得到的页面对混合内存系统的各种内存的模拟测试访问记录,得到所述页面的对各种所述内存的模拟访问热度信息;根据所述页面的所述模拟访问热度信息,分析所述页面的读写特征;根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存。本发明能有效解决现有技术的内存介质对页面初始化不合理且导致额外的内存页面迁移的问题。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种内存页面管理方法、装置、设备及可读存储介质。
背景技术
混合内存技术作为提高计算机整体性能的重要手段之一,近年来在存储领域已经得到了工业界和学术界的广泛关注。混合内存初始化和内存管理主要作用是更加合理分配和管理内存页面。混合内存页面初始化是为了在数据页面加载到内存时,选择一个合理的存储介质;混合内存管理则主要是针对内存数据页面,设计优秀的管理算法,能尽量减少DRAM和NVM内存之间的数据页面迁移,从而提高混合内存整体性能。
目前经典的混合内存管理算法(CLOCK-DWF),为了克服NVM写性能和写耐久的限制,充分利用混合内存架构异构硬件的优势,CLOCK-DWF提出尽可能将写操作集中到DRAM中,而NVM则主要服务读操作。在CLOCK-DWF算法中,当有页缺失发生需从磁盘或者闪存等外存设备将数据读入内存时,如果引发页缺失的是读请求,CLOCK-DWF会将数据写入到NVM中;而如果引发缺失的是写请求,则CLOCK-DWF会将数据写入到DRAM中。因此,几乎所有的脏数据页都在DRAM中而干净页在NVM中。当写请求命中了NVM中数据页之后,CLOCK-DWF会首先将NVM中数据页迁移到DRAM中再继续写操作。
Refinery Swap算法提出容忍一定量的NVM写操作,减少数据的交换,更有利于混合内存的性能。当NVM中一个数据页被读请求命中时,直接从NVM中读取数据。而一旦NVM中数据页被写请求命中,Refinery Swap首先检查数据页被写请求命中的累计次数是否超过阈值:如果写命中累计次数小于阈值,则Refinery Swap直接在NVM中进行写操作并将写命中次数加一;如果写命中大于阈值,则将数据迁移到DRAM中并进行写操作。
本发明人在实施本发明的过程中发现,现有技术中存在以下技术问题:现有的内存数据页面初始化方法未能全面综合衡量其在程序运行时的特征而合理对其初始化,以经典混合内存管理算法CLOCK-DWF在内存页发生缺页时,从外部设备加载页面到内存时,通过判断当访问类型,即若当前对页面的访问为读操作时,则将该页面初始化至NVM;若对当前页面的访问类型为写时,则将该页面初始化至DRAM。Refinery Swap内存管理算法在页面初始化会优先选择将数据页面加载至NVM内存,只有当页面在NVM中达到了一定的热度,才会将页面迁移至DRAM内存;而UIMigrate内存管理算法在数据页面初始化时,会优先将页面初始化至DRAM内存,若在加载时,当前DRAM已经处于满负荷状态时,会从DRAM内存中选择一个待淘汰页面和当前全局热度值相比较,若当前待淘汰页面的热度值高于全局热度值时,则将新数据页面初始化至NVM内存;反之将数据页面初始化至DRAM内存。从以上的内存管理算法可知,已有的内存管理策略都未能根据一个页面在其后面的访问特征合理初始化内存介质,因此会出现内存介质对页面初始化不合理,导致额外的内存页面迁移。
发明内容
本发明实施例提供一种内存页面管理方法、装置、设备及可读存储介质,能有效解决现有技术的内存介质对页面初始化不合理且导致额外的内存页面迁移的问题。
本发明一实施例提供一种内存页面管理方法,包括:
当需要将页面从磁盘加载到内存时,根据预先得到的页面对混合内存系统的各种内存的模拟测试访问记录,得到所述页面的对各种所述内存的模拟访问热度信息;所述混合内存系统包括两种不同存储类型的所述内存,分别为第一种内存和第二种内存,第一种内存适用于读操作类型的页面数据,第二种内存适用于写操作类型的页面数据;所述模拟访问热度信息用于指示所述页面的读写特征;
根据所述页面的所述模拟访问热度信息,分析所述页面的读写特征;
根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存。
作为上述方案的改进,所述根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存,包括:
当所述页面的读写特征的分析结果为读写均热、写热且读冷、写一般但读冷或写热且读一般时,将所述页面从磁盘初始化至第二种内存;
当所述页面的读写特征的分析结果为读写均冷、写冷且读热、写一般但读热或写冷且读一般时,将所述页面从磁盘初始化至第一种内存;
当所述页面的读写特征的分析结果为读写均一般时,若第二种内存的当前剩余存储容量值大于预设阈值时,将所述页面从磁盘初始化至第二种内存,否则将所述页面从磁盘初始化至第一种内存。
作为上述方案的改进,所述第一种内存为NVM内存,所述第二种内存为DRAM内存。
本发明另一实施例对应提供了一种内存页面管理装置,包括:
访问热度信息获得模块,用于当需要将页面从磁盘加载到内存时,根据预先得到的页面对混合内存系统的各种内存的模拟测试访问记录,得到所述页面的对各种所述内存的模拟访问热度信息;所述混合内存系统包括两种不同存储类型的所述内存,分别为第一种内存和第二种内存,第一种内存适用于读操作类型的页面数据,第二种内存适用于写操作类型的页面数据;所述模拟访问热度信息用于指示所述页面的读写特征;
读写特征分析模块,用于根据所述页面的所述模拟访问热度信息,分析所述页面的读写特征;
页面加载模块,用于根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存。
作为上述方案的改进,所述页面加载模块包括:
第一页面加载单元,用于当所述页面的读写特征的分析结果为读写均热、写热且读冷、写一般但读冷或写热且读一般时,将所述页面从磁盘初始化至第二种内存;
第二页面加载单元,用于当所述页面的读写特征的分析结果为读写均冷、写冷且读热、写一般但读热或写冷且读一般时,将所述页面从磁盘初始化至第一种内存;
第三页面加载单元,用于当所述页面的读写特征的分析结果为读写均一般时,若第二种内存的当前剩余存储容量值大于预设阈值时,将所述页面从磁盘初始化至第二种内存,否则将所述页面从磁盘初始化至第一种内存。
作为上述方案的改进,所述第一种内存为NVM内存,所述第二种内存为DRAM内存。
本发明另一实施例提供了一种内存页面管理设备,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现上述发明实施例所述的内存页面管理方法。
本发明另一实施例提供了一种存储介质,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行上述发明实施例所述的内存页面管理方法。
相比于现有技术,上述技术方案中的一个技术方案具有如下优点:
当需要将页面从磁盘加载到内存时,根据预先得到的页面对混合内存系统的各种内存的模拟测试访问记录,得到所述页面的对各种所述内存的模拟访问热度信息;根据所述页面的所述模拟访问热度信息,分析所述页面的读写特征;最后根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存。由此可见,在内存的页面初始化前,通过离线的方式提取页面对内存的访存特征,并根据内存页面的访存特征的分析结果,指导混合内存对页面的初始化,这样能够使得内存页面的初始化更加合理,从而能有效解决现有技术的内存介质对页面初始化不合理且导致额外的内存页面迁移的问题。当然,实施本发明的任一产品并不一定需要同时达到以上所述的所有优点。
附图说明
图1是本发明一实施例提供的一种内存页面管理方法的流程示意图;
图2是本发明一实施例提供的一种内存页面管理方法的框架示意图;
图3是本发明一实施例提供的一种内存页面管理方法对内存页面初始化的示意图;
图4是本发明一实施例提供的一种内存页面管理装置的结构示意图;
图5是本发明一实施例提供的一种内存页面管理设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,是本发明一实施例提供的一种内存页面管理方法的流程示意图,所述管理方法包括:
S10,当需要将页面从磁盘加载到内存时,根据预先得到的页面对混合内存系统的各种内存的模拟测试访问记录,得到所述页面的对各种所述内存的模拟访问热度信息;所述混合内存系统包括两种不同存储类型的所述内存,分别为第一种内存和第二种内存,第一种内存适用于读操作类型的页面数据,第二种内存适用于写操作类型的页面数据;所述模拟访问热度信息用于指示所述页面的读写特征;
其中,在所述步骤S10之前,需要先进行页面对混合内存系统的各种内存访问的模拟测试。模拟测试实施例示例如下:在收集应用程序的页面访问混合系统的内存的访问记录之前,首先需要安装应用程序必要的编译工具和静态编译工具链,并将应用程序编译选项设置为静态编译,然后通过gcc或者其他编译器将应用程序按照编译选项编译得到可执行的二进制文件。根据实验需求设置Gem5模拟器的各项参数,将参数写入到配置文件,得到实验所需的模拟器平台。在实验模拟器平台中运行应用程序通过静态编译得到的可执行二进制文件,收集得到应用程序在实验平台上运行时页面对内存的访问记录,并将该记录持久化到文件中。
此外,具体地,所述模拟访问热度信息可以是根据页面对各种所述内存的访问次数进行统计并计算而得到的。例如,页面在模拟测试访问内存的过程中,若页面对第一种内存的读次数为10次,对第一种内存的写次数为2次,对第二种内存的读次数为3次,对第二种内存的写次数为9次,则该页面的模拟访问热度信息可以通过如下方式计算得到:页面的对第一种内存的读写比例为5:1,对第二种内存的读写比例为:1:3,页面的对两种内存的读比例为10:3,页面的对两种内存的写比例为:2:9。
S11,根据所述页面的所述模拟访问热度信息,分析所述页面的读写特征;
示例的,当应用程序在运行过程中,某个地址被访问时,若当前访问地址所对应的数据页面均不存在于DRAM和NVM,则表示该页面需要从磁盘加载到内存。因此在加载该页面时首先会计算被访问地址所在的页面对应的数据页号,然后从profile文件中找到该页号所对应的模拟访问热度信息,将页面对应的全局热度信息和全局阈值进行比较,并根据比较结果得到页面的读写特征。示例的,所述全局阈值包括第一读阈值、第二读阈值、第一写阈值及第二写阈值;第一读阈值小于第二读阈值,所述第一写阈值小于所述第二写阈值;其中,若页面的对内存的读特征值小于第一读阈值,则所述页面的读写特征的分析结果为读冷;若页面的对内存的读特征值大于第一读阈值且小于第二读阈值,则所述页面的读写特征的分析结果为读一般;若页面的对内存的读特征值大于第二读阈值,则所述页面的读写特征的分析结果为读热。此外,若页面的对内存的写特征值小于第一写阈值,则所述页面的读写特征的分析结果为写冷;若页面的对内存的写特征值大于第一写阈值且小于第二写阈值,则所述页面的读写特征的分析结果为写一般;若页面的对内存的写特征值大于第二写阈值,则所述页面的读写特征的分析结果为写热。
S12,根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存。
在本发明实施例中,在内存的页面初始化前,通过离线的方式提取页面对内存的访存特征,并根据内存页面的访存特征的分析结果,指导混合内存对页面的初始化,这样能够使得内存页面的初始化更加合理,从而能有效解决现有技术的内存介质对页面初始化不合理且导致额外的内存页面迁移的问题。
示例的,所述步骤S12包括:
S120,当所述页面的读写特征的分析结果为读写均热、写热且读冷、写一般但读冷或写热且读一般时,将所述页面从磁盘初始化至第二种内存;
S121,当所述页面的读写特征的分析结果为读写均冷、写冷且读热、写一般但读热或写冷且读一般时,将所述页面从磁盘初始化至第一种内存;
S122,当所述页面的读写特征的分析结果为读写均一般时,若第二种内存的当前剩余存储容量值大于预设阈值时,将所述页面从磁盘初始化至第二种内存,否则将所述页面从磁盘初始化至第一种内存。
在本实施例中,通过将页面的读写特征进行如上的细化分析,并结合当前DRAM内存剩余容量及读写特征的分析结果,指导混合内存的页面初始化,这样能够使得内存页面的初始化更加合理,从而能更有效解决现有技术的内存介质对页面初始化不合理且导致额外的内存页面迁移的问题。
为了便于对本发明的理解,作为示例的,所述第一种内存为NVM内存,所述第二种内存为DRAM内存。同时,对上述实施例的步骤S10-S12进行如下具体介绍:
参见图2,当应用程序在运行过程中,某个地址被访问时,若当前访问地址所对应的数据页面均不存在于DRAM和NVM,则表示该页面需要从磁盘加载到内存。因此在加载该页面时首先会计算被访问地址所在内存页面对应的数据页号,然后从profile文件中找到该页号所对应的全局热度信息,将页面对应的全局热度信息和全局阈值进行比较,若该热度信息大于阈值则认为该页面从全局的角度来看是热页面,即这类数据页面在初始化时会优先选择DRAM作为初始化介质,而当热度信息小于全局热度值则在该页面初始化时被初始化到NVM中。其整个初始化过程如图3所示。
图3使用两个页面分别分配到DRAM内存和NVM内存的例子详细解释基于访存特征分析文件的内存初始化过程,当页面D被申请访问时,此时D页面并不存在于DRAM和NVM中,此时需要将页面D从磁盘调入到内存中。当D在申请内存空间时,首先查找分析文件中页面D所对应的物理介质,此时查到建议分配物理介质标识为true,而在分析文件中标识为false则代表当前页面在内存页面初始化时建议分配到NVM,若标识为true则对应于DRAM。因此从NVM介质中申请一块内存区域并将页面D的内容加载到所申请的内存空间;页面E展示了页面建议分配到DRAM的情形。
将在内存初始化前通过离线的方式提取该类应用程序的访存特征,结合当前DRAM内存剩余容量及分析特征结果,指导混合内存的页面初始化。在提取应用程序访存特征时,首先分别按照一个页面读写热度将其分为以下九种类型(读热且写热、读热且写一般、读热且写冷、读一般且写热、读一般且写一般、读一般且写冷、读冷且写热、读冷且写一般、读冷且写冷)。
1、当所述页面的读写特征的分析结果为读写均热、写热且读冷、写一般但读冷或写热且读一般时,将所述页面从磁盘初始化至DRAM内存;
2、当所述页面的读写特征的分析结果为读写均冷、写冷且读热、写一般但读热或写冷且读一般时,将所述页面从磁盘初始化至NVM内存;
3、当所述页面的读写特征的分析结果为读写均一般时,若第二种内存的当前剩余存储容量值大于预设阈值时,将所述页面从磁盘初始化至DRAM内存,否则将所述页面从磁盘初始化至NVM内存。
参见图4,是本发明一实施例提供的一种内存页面管理装置的结构示意图,所述内存页面管理装置包括:
访问热度信息获得模块10,用于当需要将页面从磁盘加载到内存时,根据预先得到的页面对混合内存系统的各种内存的模拟测试访问记录,得到所述页面的对各种所述内存的模拟访问热度信息;所述混合内存系统包括两种不同存储类型的所述内存,分别为第一种内存和第二种内存,第一种内存适用于读操作类型的页面数据,第二种内存适用于写操作类型的页面数据;所述模拟访问热度信息用于指示所述页面的读写特征;
读写特征分析模块11,用于根据所述页面的所述模拟访问热度信息,分析所述页面的读写特征;
页面加载模块12,用于根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存。
在本发明实施例中,在内存的页面初始化前,通过离线的方式提取页面对内存的访存特征,并根据内存页面的访存特征的分析结果,指导混合内存对页面的初始化,这样能够使得内存页面的初始化更加合理,从而能有效解决现有技术的内存介质对页面初始化不合理且导致额外的内存页面迁移的问题。
作为上述方案的改进,所述页面加载模块12包括:
第一页面加载单元,用于当所述页面的读写特征的分析结果为读写均热、写热且读冷、写一般但读冷或写热且读一般时,将所述页面从磁盘初始化至第二种内存;
第二页面加载单元,用于当所述页面的读写特征的分析结果为读写均冷、写冷且读热、写一般但读热或写冷且读一般时,将所述页面从磁盘初始化至第一种内存;
第三页面加载单元,用于当所述页面的读写特征的分析结果为读写均一般时,若第二种内存的当前剩余存储容量值大于预设阈值时,将所述页面从磁盘初始化至第二种内存,否则将所述页面从磁盘初始化至第一种内存。
作为上述方案的改进,所述第一种内存为NVM内存,所述第二种内存为DRAM内存。
参见图5,是本发明一实施例提供的内存页面管理设备的示意图。该实施例的内存页面管理设备包括:处理器1、存储器2以及存储在所述存储器2中并可在所述处理器1上运行的计算机程序。所述处理器执行所述计算机程序时实现上述各个内存页面管理方法实施例中的步骤。或者,所述处理器执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能。
示例性的,所述计算机程序可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器中,并由所述处理器执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序在所述内存页面管理设备中的执行过程。
所述内存页面管理设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述内存页面管理设备可包括,但不仅限于,处理器、存储器。本领域技术人员可以理解,所述示意图仅仅是内存页面管理设备的示例,并不构成对内存页面管理设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述内存页面管理设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等,所述处理器是所述内存页面管理设备的控制中心,利用各种接口和线路连接整个内存页面管理设备的各个部分。
所述存储器可用于存储所述计算机程序和/或模块,所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块,以及调用存储在存储器内的数据,实现所述内存页面管理设备的各种功能。所述存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
其中,所述内存页面管理设备集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
需说明的是,以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外,本发明提供的装置实施例附图中,模块之间的连接关系表示它们之间具有通信连接,具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。
Claims (8)
1.一种内存页面管理方法,其特征在于,包括:
当需要将页面从磁盘加载到内存时,根据预先得到的页面对混合内存系统的各种内存的模拟测试访问记录,得到所述页面的对各种所述内存的模拟访问热度信息;所述混合内存系统包括两种不同存储类型的所述内存,分别为第一种内存和第二种内存,第一种内存适用于读操作类型的页面数据,第二种内存适用于写操作类型的页面数据;所述模拟访问热度信息用于指示所述页面的读写特征;
根据所述页面的所述模拟访问热度信息,分析所述页面的读写特征;
根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存。
2.如权利要求1所述的内存页面管理方法,其特征在于,所述根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存,包括:
当所述页面的读写特征的分析结果为读写均热、写热且读冷、写一般但读冷或写热且读一般时,将所述页面从磁盘初始化至第二种内存;
当所述页面的读写特征的分析结果为读写均冷、写冷且读热、写一般但读热或写冷且读一般时,将所述页面从磁盘初始化至第一种内存;
当所述页面的读写特征的分析结果为读写均一般时,若第二种内存的当前剩余存储容量值大于预设阈值时,将所述页面从磁盘初始化至第二种内存,否则将所述页面从磁盘初始化至第一种内存。
3.如权利要求1所述的内存页面管理方法,其特征在于,所述第一种内存为NVM内存,所述第二种内存为DRAM内存。
4.一种内存页面管理装置,其特征在于,包括:
访问热度信息获得模块,用于当需要将页面从磁盘加载到内存时,根据预先得到的页面对混合内存系统的各种内存的模拟测试访问记录,得到所述页面的对各种所述内存的模拟访问热度信息;所述混合内存系统包括两种不同存储类型的所述内存,分别为第一种内存和第二种内存,第一种内存适用于读操作类型的页面数据,第二种内存适用于写操作类型的页面数据;所述模拟访问热度信息用于指示所述页面的读写特征;
读写特征分析模块,用于根据所述页面的所述模拟访问热度信息,分析所述页面的读写特征;
页面加载模块,用于根据对所述页面的读写特征的分析结果,将所述页面从磁盘加载到与所述页面的读写特征的分析结果对应的所述内存。
5.如权利要求4所述的内存页面管理装置,其特征在于,所述页面加载模块包括:
第一页面加载单元,用于当所述页面的读写特征的分析结果为读写均热、写热且读冷、写一般但读冷或写热且读一般时,将所述页面从磁盘初始化至第二种内存;
第二页面加载单元,用于当所述页面的读写特征的分析结果为读写均冷、写冷且读热、写一般但读热或写冷且读一般时,将所述页面从磁盘初始化至第一种内存;
第三页面加载单元,用于当所述页面的读写特征的分析结果为读写均一般时,若第二种内存的当前剩余存储容量值大于预设阈值时,将所述页面从磁盘初始化至第二种内存,否则将所述页面从磁盘初始化至第一种内存。
6.如权利要求4所述的内存页面管理方法,其特征在于,所述第一种内存为NVM内存,所述第二种内存为DRAM内存。
7.一种内存页面管理设备,其特征在于,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至3中任意一项所述的内存页面管理方法。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如权利要求1至3中任意一项所述的内存页面管理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010978998.8A CN112181870B (zh) | 2020-09-17 | 2020-09-17 | 内存页面管理方法、装置、设备及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010978998.8A CN112181870B (zh) | 2020-09-17 | 2020-09-17 | 内存页面管理方法、装置、设备及可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112181870A true CN112181870A (zh) | 2021-01-05 |
CN112181870B CN112181870B (zh) | 2022-10-28 |
Family
ID=73921547
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010978998.8A Active CN112181870B (zh) | 2020-09-17 | 2020-09-17 | 内存页面管理方法、装置、设备及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112181870B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117234432A (zh) * | 2023-11-14 | 2023-12-15 | 苏州元脑智能科技有限公司 | 一种混合内存系统的管理方法、管理装置、设备及介质 |
WO2024066575A1 (zh) * | 2022-09-26 | 2024-04-04 | 华为技术有限公司 | 物理页的冷热识别方法、装置、芯片以及存储介质 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000027640A1 (en) * | 1998-11-09 | 2000-05-18 | Silverbrook Research Pty Ltd | Printer and methods of operation |
US20090156190A1 (en) * | 2007-12-13 | 2009-06-18 | Mobile Candy Dish, Inc. | Method and system for delivering customized information to a mobile communication device based on user affiliations |
CN102750221A (zh) * | 2012-05-29 | 2012-10-24 | 兰雨晴 | 一种针对Linux文件系统的性能测试方法 |
CN103488578A (zh) * | 2012-12-28 | 2014-01-01 | 晶天电子(深圳)有限公司 | 虚拟存储设备(vmd)应用/驱动器 |
CN104346284A (zh) * | 2013-08-02 | 2015-02-11 | 华为技术有限公司 | 一种内存管理方法及内存管理设备 |
CN104794064A (zh) * | 2015-04-21 | 2015-07-22 | 华中科技大学 | 一种基于区域热度的缓存管理方法 |
CN105677879A (zh) * | 2016-01-12 | 2016-06-15 | 诸葛晴凤 | 内存关系数据库的数据组织及访问方法 |
CN107193646A (zh) * | 2017-05-24 | 2017-09-22 | 中国人民解放军理工大学 | 一种基于混合主存架构的高效动态页面调度方法 |
CN107301270A (zh) * | 2017-05-23 | 2017-10-27 | 东南大学 | Ddr存储系统访存延时的解析建模方法 |
CN107636433A (zh) * | 2014-11-07 | 2018-01-26 | 3M创新有限公司 | 使用具有激发元件的感测装置的无线感测系统 |
CN109558093A (zh) * | 2018-12-19 | 2019-04-02 | 哈尔滨工业大学 | 一种针对图像处理型负载的混合内存页面迁移方法 |
CN109901800A (zh) * | 2019-03-14 | 2019-06-18 | 重庆大学 | 一种混合内存系统及其操作方法 |
CN110134492A (zh) * | 2019-04-18 | 2019-08-16 | 华中科技大学 | 一种异构内存虚拟机不停机的内存页面迁移系统 |
CN110347510A (zh) * | 2019-07-09 | 2019-10-18 | 中国科学院微电子研究所 | 一种混合内存的管理方法、系统、设备及介质 |
-
2020
- 2020-09-17 CN CN202010978998.8A patent/CN112181870B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000027640A1 (en) * | 1998-11-09 | 2000-05-18 | Silverbrook Research Pty Ltd | Printer and methods of operation |
US20090156190A1 (en) * | 2007-12-13 | 2009-06-18 | Mobile Candy Dish, Inc. | Method and system for delivering customized information to a mobile communication device based on user affiliations |
CN102750221A (zh) * | 2012-05-29 | 2012-10-24 | 兰雨晴 | 一种针对Linux文件系统的性能测试方法 |
CN103488578A (zh) * | 2012-12-28 | 2014-01-01 | 晶天电子(深圳)有限公司 | 虚拟存储设备(vmd)应用/驱动器 |
CN104346284A (zh) * | 2013-08-02 | 2015-02-11 | 华为技术有限公司 | 一种内存管理方法及内存管理设备 |
CN107636433A (zh) * | 2014-11-07 | 2018-01-26 | 3M创新有限公司 | 使用具有激发元件的感测装置的无线感测系统 |
CN104794064A (zh) * | 2015-04-21 | 2015-07-22 | 华中科技大学 | 一种基于区域热度的缓存管理方法 |
CN105677879A (zh) * | 2016-01-12 | 2016-06-15 | 诸葛晴凤 | 内存关系数据库的数据组织及访问方法 |
CN107301270A (zh) * | 2017-05-23 | 2017-10-27 | 东南大学 | Ddr存储系统访存延时的解析建模方法 |
CN107193646A (zh) * | 2017-05-24 | 2017-09-22 | 中国人民解放军理工大学 | 一种基于混合主存架构的高效动态页面调度方法 |
CN109558093A (zh) * | 2018-12-19 | 2019-04-02 | 哈尔滨工业大学 | 一种针对图像处理型负载的混合内存页面迁移方法 |
CN109901800A (zh) * | 2019-03-14 | 2019-06-18 | 重庆大学 | 一种混合内存系统及其操作方法 |
CN110134492A (zh) * | 2019-04-18 | 2019-08-16 | 华中科技大学 | 一种异构内存虚拟机不停机的内存页面迁移系统 |
CN110347510A (zh) * | 2019-07-09 | 2019-10-18 | 中国科学院微电子研究所 | 一种混合内存的管理方法、系统、设备及介质 |
Non-Patent Citations (5)
Title |
---|
LO W H: "Thermal-aware dynamic page allocation policy by future access patterns for Hybrid Memory Cube", 《DESIGN, AUTOMATION & TEST IN EUROPE CONFERENCE & EXHIBITION》 * |
周传万: "基于全局访存特征的混合内存空间布局研究", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》 * |
陈俊熹: "混合内存页面管理策略的性能和能耗研究", 《现代计算机(专业版)》 * |
陈俊熹: "面向新型混合内存架构的内存管理机制", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》 * |
陈咸彰: "面向非易失性内存的文件系统与页面交换机制研究", 《中国优秀博硕士学位论文全文数据库(博士)信息科技辑》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024066575A1 (zh) * | 2022-09-26 | 2024-04-04 | 华为技术有限公司 | 物理页的冷热识别方法、装置、芯片以及存储介质 |
CN117234432A (zh) * | 2023-11-14 | 2023-12-15 | 苏州元脑智能科技有限公司 | 一种混合内存系统的管理方法、管理装置、设备及介质 |
CN117234432B (zh) * | 2023-11-14 | 2024-02-23 | 苏州元脑智能科技有限公司 | 一种混合内存系统的管理方法、管理装置、设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112181870B (zh) | 2022-10-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3992801A1 (en) | Data storage method for flash memory device and flash memory device | |
CN108459826B (zh) | 一种处理io请求的方法及装置 | |
US20150106656A1 (en) | Application program startup method and apparatus | |
US20100106935A1 (en) | Pretranslating Input/Output Buffers In Environments With Multiple Page Sizes | |
US9710283B2 (en) | System and method for pre-storing small data files into a page-cache and performing reading and writing to the page cache during booting | |
CN111324303B (zh) | Ssd垃圾回收方法、装置、计算机设备及存储介质 | |
CN112181870B (zh) | 内存页面管理方法、装置、设备及可读存储介质 | |
CN112632069B (zh) | 哈希表数据存储管理方法、装置、介质和电子设备 | |
US20140040541A1 (en) | Method of managing dynamic memory reallocation and device performing the method | |
CN108710474A (zh) | 一种数据存储方法、装置及计算机存储介质 | |
CN111984204B (zh) | 一种数据读写方法、装置及电子设备和存储介质 | |
US20240086332A1 (en) | Data processing method and system, device, and medium | |
US8028118B2 (en) | Using an index value located on a page table to index page attributes | |
CN115657946A (zh) | Raid顺序写场景下的片外ddr带宽卸载方法、终端及存储介质 | |
US10628048B2 (en) | Storage control device for controlling write access from host device to memory device | |
CN112148486B (zh) | 内存页面管理方法、装置、设备及可读存储介质 | |
CN108959105B (zh) | 一种实现地址映射的方法及装置 | |
CN112000591A (zh) | 可指定逻辑区块地址的扫描ssd方法、装置、计算机设备及存储介质 | |
CN115826882B (zh) | 一种存储方法、装置、设备及存储介质 | |
CN116820342A (zh) | 磁盘阵列的数据处理方法、装置和磁盘阵列 | |
CN108519860B (zh) | 一种ssd读命中的处理方法和装置 | |
CN115952084A (zh) | 验证访存部件的方法及系统 | |
US11360687B2 (en) | Method of processing a input-output request, an electronic device, and a computer program product | |
CN110795045B (zh) | 混合内存的数据迁移方法、系统及电子设备 | |
CN112015672A (zh) | 一种存储系统中数据处理方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |