CN108664419A - 一种确定内存大页数目的方法及其装置 - Google Patents

一种确定内存大页数目的方法及其装置 Download PDF

Info

Publication number
CN108664419A
CN108664419A CN201810288018.4A CN201810288018A CN108664419A CN 108664419 A CN108664419 A CN 108664419A CN 201810288018 A CN201810288018 A CN 201810288018A CN 108664419 A CN108664419 A CN 108664419A
Authority
CN
China
Prior art keywords
hugepages
memory
big page
pages
total
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810288018.4A
Other languages
English (en)
Inventor
郭靖伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201810288018.4A priority Critical patent/CN108664419A/zh
Publication of CN108664419A publication Critical patent/CN108664419A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02Addressing or allocation; Relocation
    • G06F12/08Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G06F12/10Address translation
    • G06F12/1009Address translation using page tables, e.g. page table structures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本申请提供了一种确定内存大页数目的方法,所述方法应用于Linux操作系统中,包括:根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,其中,nr_hugepages表征所述Linux系统提供的内存大页总数,所述nr_overcommit_hugepages表征所述系统能够提供的最大内存大页总数。因此,本申请提供的方法能够对当前系统的内存大页数目进行合理的调整,提供了一种简洁高效的确定内存大页数目的方法,既满足了应用程序对内存大页的需求,又降低人工需求。

Description

一种确定内存大页数目的方法及其装置
技术领域
本申请涉及计算机领域,并且更具体地,涉及一种确定内存大页数目的方法及其装置。
背景技术
随着计算规模的不断增加,应用程序对系统内存的需求也不断增大,为了更好的对内存进行管理,现代CPU采用虚拟内存地址代替物理内存地址,内存管理单元将虚拟内存地址转换为物理内存地址提供CPU使用。同时Linux操作系统引入了内存分页管理机制,默认的内存页大小为4KB。虚拟内存地址到物理内存地址的映射关系存放于内存页表中,访问内存页表时获得虚拟内存地址到物理内存地址的映射关系。内存页表的访问时间成为了限制CPU内存访问速度的一个瓶颈,为了提高寻址速度,现代CPU架构中引入了转换检测缓冲区(Translation lookaside buffer,TLB)用于存储一部分经常访问的内存映射关系,访问TLB的速度要快于访问内存页表的速度,但TLB的大小是有限的,当访问的地址不在TLB中则CPU会访问内存页表,这种情况称为TLB Miss,频繁发生TLB Miss的时候将会造成程序性能下降。为此,当操作系统以2MB甚至更大作为分页的单位时,该内存相对较大的分页可以称之为内存大页,相对4KB的分页大小,TLB就能够映射更多的内存空间,降低了TLB Miss,提高CPU访问内存的性能。
目前针对Linux操作系统的内存大页设置主要是通过管理员手动向/proc/sys/vm/nr_hugepages文件中写入内存大页数目来进行设定,当需要对内存大页数目进行修改的时候则需要重新设定。
目前对系统参数的修改主要是采用手工方式向大页文件中写入要设定的内存大页的数目,这种方式需要首先预估应用程序需要的内存大小,然后设定大页内存的数目,一旦发生应用程序需要的内存超过大页内存时,就会发生大页内存分配失败的警告信息,需要管理员再次重新设定大页内存数目,当应用程序不需要使用那么多内存的时候,可能需要释放一部分大页内存,这时同样需要管理员重新设定大页内存的数目,费时费力。
因此,亟需一种确定内存大页数目的方法,能够简洁、高效地确定内存大页数目。
发明内容
本申请提供一种,能够够简洁、高效地确定内存大页数目。
第一方面,提供一种确定内存大页数目的方法,所述方法应用于Linux操作系统中,包括:根据内存信息文件,获取当前内存大页总数HugePages_Total,空闲的大页内存总数HugePages_Free,超过所述HugePages_Total使用的大页数目HugePages_Surp;获取额外内存大页数目add_pages,所述add_pages表示表示当应用程序使用的内存大于HugePages_Total提供的内存大小时,所述Linux系统额外能够提供的内存大页数目;根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,其中,nr_hugepages表征所述Linux系统提供的内存大页总数,所述nr_overcommit_hugepages表征所述系统能够提供的最大内存大页总数。
结合第一方面,在第一方面的第一种可能的实现方式中,在根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages之前,所述方法还包括:根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages。
结合第一方面及其上述实现方式,在第一方面的第二种可能的实现方式中,所述根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,包括:当确定所述HugePages_Surp值非零时,确定所述nr_hugepages=HugePages_Total+add_pages;当所述HugePages_Surp值为零时,且HugePages_Free大于add_pages时,确定所述nr_hugepages=nr_hugepages–(HugePages_Free–add_pages);当所述HugePages_Surp值为零时,且HugePages_Free不大于add_pages时,确定nr_hugepages=HugePages_Total。
结合第一方面及其上述实现方式,在第一方面的第三种可能的实现方式中,所述方法还包括:当所述nr_hugepages发生变化时,将所述nr_hugepages的值更新在/proc/sys/vm/nr_hugepages中。
结合第一方面及其上述实现方式,在第一方面的第四种可能的实现方式中,根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages,包括:获取当前Linux系统内存大小,按照内存大页为2M的大小计算空闲内存的总页数,并将所述系统空闲内存大页数的百分之三十设定为所述nr_hugepages的初始值,所述系统空闲内存大页数百分之七十设定为所述nr_overcommit_hugepages的初始值。
第二方面,提供一种确定内存大页数目的装置,包括:获取单元,所述获取单元用于根据内存信息文件,获取当前Linux系统中内存大页总数HugePages_Total,空闲的大页内存总数HugePages_Free,超过所述HugePages_Total使用的大页数目HugePages_Surp;所述获取单元还用于获取额外内存大页数目add_pages,所述add_pages表示表示当应用程序使用的内存大于HugePages_Total提供的内存大小时,所述Linux系统额外能够提供的内存大页数目;处理单元,所述处理单元用于根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,其中,nr_hugepages表征所述Linux系统提供的内存大页总数,所述nr_overcommit_hugepages表征所述系统能够提供的最大内存大页总数。
结合第二方面,在第二方面的第一种可能的实现方式中,所述获取单元用于:根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages。
结合第二方面及其上述实现方式,在第二方面的第二种可能的实现方式中,所述处理单元用于:当确定所述HugePages_Surp值非零时,确定所述nr_hugepages=HugePages_Total+add_pages;当所述HugePages_Surp值为零时,且HugePages_Free大于add_pages时,确定所述nr_hugepages=nr_hugepages–(HugePages_Free–add_pages);当所述HugePages_Surp值为零时,且HugePages_Free不大于add_pages时,确定nr_hugepages=HugePages_Total。
结合第二方面及其上述实现方式,在第二方面的第三种可能的实现方式中,所述处理单元还用于:当所述nr_hugepages发生变化时,将所述nr_hugepages的值更新在/proc/sys/vm/nr_hugepages中。
结合第二方面及其上述实现方式,在第二方面的第四种可能的实现方式中,所述获取单元用于:获取当前Linux系统内存大小,按照内存大页为2M的大小计算空闲内存的总页数,并将所述系统空闲内存大页数的百分之三十设定为所述nr_hugepages的初始值,所述系统空闲内存大页数百分之七十设定为所述nr_overcommit_hugepages的初始值。
第三方面,提供了一种装置,包括接收器、发送器、存储器和处理器,该存储器用于存储计算机程序,该接收器用于受处理器控制接收信号,该发送器用于受处理器控制发送信号,该处理器用于从存储器中调用并运行该计算机程序,使得该设备执行上述各方面所述的方法。
第四方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述各方面所述的方法。
第五方面,提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述各方面所述的方法。
因此,本申请提供的方法能够对当前系统的内存大页数目进行合理的调整,提供了一种简洁高效的确定内存大页数目的方法,既满足了应用程序对内存大页的需求,又降低人工需求。
附图说明
图1是本申请一个实施例的方法的示意性流程图。
图2示出了本申请一个实施例的方法的示意性流程图。
图3示出了本申请一个实施例的方法的示意性流程图。
图4示出了本申请一个实施例的方法的示意性流程图。
图5示出了本申请一个实施例的装置的示意性框图。
图6示出了本申请另一实施例的装置的示意性框图。
图7示出了本申请另一实施例的装置的实现框图。
具体实施方式
下面将结合附图,对本申请中的技术方案进行描述。
图1示出了本申请一个实施例的方法的示意性流程图,如图1所示,该方法100包括:
步骤110,根据内存信息文件,获取当前内存大页总数HugePages_Total,空闲的大页内存总数HugePages_Free,超过所述HugePages_Total使用的大页数目HugePages_Surp。
步骤120,获取额外内存大页数目add_pages,所述add_pages表示表示当应用程序使用的内存大于HugePages_Total提供的内存大小时,所述Linux系统额外能够提供的内存大页数目。
步骤130,根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,其中,nr_hugepages表征所述Linux系统提供的内存大页总数,所述nr_overcommit_hugepages表征所述系统能够提供的最大内存大页总数。
具体地,在步骤110中,内存信息文件可以为/proc/meminfo文件。
在步骤120中的add_pages可以为用户输入的参数。
可选地,作为本申请一个实施例,在根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages之前,所述方法还包括:根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages。
可选地,作为本申请一个实施例,图2示出了本申请一个实施例的方法的示意性流程图。如图2所示,示出了初始化所述nr_hugepages和所述nr_overcommit_hugepages的方法的示意性流程图。
可选地,作为本申请一个实施例,根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages,包括:获取当前Linux系统内存大小,按照内存大页为2M的大小计算空闲内存的总页数,并将所述系统空闲内存大页数的百分之三十设定为所述nr_hugepages的初始值,所述系统空闲内存大页数百分之七十设定为nr_overcommit_hugepages的初始值。
应理解,本申请实施例中内存大页的大小2M、初始化所述nr_hugepages、所述nr_overcommit_hugepages的数值仅仅是实例性,本申请对此不作限定。
可选地,作为本申请一个实施例,所述根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,包括:当确定所述HugePages_Surp值非零时,确定所述nr_hugepages=HugePages_Total+add_pages;当所述HugePages_Surp值为零时,且HugePages_Free大于add_pages时,确定所述nr_hugepages=nr_hugepages–(HugePages_Free–add_pages);当所述HugePages_Surp值为零时,且HugePages_Free不大于add_pages时,确定nr_hugepages=HugePages_Total。
具体地,图3示出了本申请一个实施例的方法的示意性流程图,如图3所示,首先判断当前使用的内存大页数目是否超过了设定的内存大页总数,即HugePages_Surp的值是否为0,分为两种情况:
1.如果HugePages_Surp的值不为0则表示当前应用程序使用的内存大页数目超过了系统设定的内存大页的总数,此时需要调整内存大页总数,将nr_hugepages设定为HugePages_Total加上一个固定值add_pages,此值可由用户在工具启动时通过参数设定,表示当应用程序使用的大页内存超内存大页总数时,除分配足够的内存大页外,还额外分配的内存大页数目。将nr_hugepages的新值传递给设定模块。
2.如果HugePages_Surp的值为0,则表示当前设定的内存大页数目满足应用程序的需求,此时判断是否需要释放掉一部分没有使用的内存大页,将HugePages_Free与add_pages相比较,当HugePages_Free大于add_pages时,将释放掉HugePages_Free–add_pages数目的内存大页,此时的nr_hugepages应该设定为nr_hugepages-(HugePages_Free–add_pages),将nr_hugepages的新值传递给设定模块。当HugePages_Free值不大于add_pages时,则nr_hugepages值不变,等于HugePages_Total。
可选地,作为本申请一个实施例,所述方法还包括:当所述nr_hugepages发生变化时,将所述nr_hugepages的值更新在/proc/sys/vm/nr_hugepages中。
也就是说,重新根据上述步骤确定的nr_hupgepages的值与原/proc/sys/vm/nr_hugepages文字中的nr_hugepages的值是否一致,如果不一致则更新系统nr_hugepages设定,否则不做处理。图4示出了本申请一个实施例的方法的示意性流程图。
因此,本申请提供的方法能够对当前系统的内存大页数目进行合理的调整,提供了一种简洁高效的确定内存大页数目的方法,既满足了应用程序对内存大页的需求,又降低人工需求。
图5示出了本申请一个实施例的装置的示意性框图。如图5所示,本申请实施例提供的方法可以由初始化模块、内存大页监测模块、计算模块和设定模块四部分组成。其中初始化模块主要为系统设定内存大页的初始数目和最大允许内存大页的初始数目,同时获取用户的输入参数add_pages的值,此值表示当应用程序使用的大页内存超内存大页总数时,除分配足够的内存大页外,还额外分配的内存大页数目。内存大页监测模块主要负责对当前系统的内存大页使用情况进行监测,获取当前内存大页总数,空闲的内存大页数目,超过设定的内存大页数目。计算模块根据当前内存大页总数、空闲内存大页数目和超过设定的内存大页数目计算下一次需要设定的内存大页总数。设定模块根据计算模块的计算结果重新设定内存大页总数和最大允许内存大页数目。
图6示出了本申请另一实施例的装置的示意性框图。如图6所示,该装置包括:获取单元610和处理单元620,其中,所述获取单元610用于根据内存信息文件,获取当前Linux系统中内存大页总数HugePages_Total,空闲的大页内存总数HugePages_Free,超过所述HugePages_Total使用的大页数目HugePages_Surp;所述获取单元610还用于获取额外内存大页数目add_pages,所述add_pages表示表示当应用程序使用的内存大于HugePages_Total提供的内存大小时,所述Linux系统额外能够提供的内存大页数目;所述处理单元620用于根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,其中,nr_hugepages表征所述Linux系统提供的内存大页总数,所述nr_overcommit_hugepages表征所述系统能够提供的最大内存大页总数。
可选地,作为本申请一个实施例,所述获取单元用于:根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages。
可选地,作为本申请一个实施例,所述处理单元用于:当确定所述HugePages_Surp值非零时,确定所述nr_hugepages=HugePages_Total+add_pages;当所述HugePages_Surp值为零时,且HugePages_Free大于add_pages时,确定所述nr_hugepages=nr_hugepages–(HugePages_Free–add_pages);当所述HugePages_Surp值为零时,且HugePages_Free不大于add_pages时,确定nr_hugepages=HugePages_Total。
可选地,作为本申请一个实施例,所述处理单元还用于:当所述nr_hugepages发生变化时,将所述nr_hugepages的值更新在/proc/sys/vm/nr_hugepages中。
可选地,作为本申请一个实施例,所述获取单元用于:获取当前Linux系统内存大小,按照内存大页为2M的大小计算空闲内存的总页数,并将所述系统空闲内存大页数的百分之三十设定为所述nr_hugepages的初始值,所述系统空闲内存大页数百分之七十设定为所述nr_overcommit_hugepages的初始值。
图7示出了本申请另一实施例的装置的实现框图。该装置700能够执行本申请实施例提供的设计波导缝隙阵天线的方法。其中,该装置700包括:处理器701、接收器702、发送器703、以及存储器704。其中,该处理器701可以与接收器702和发送器703通信连接。该存储器704可以用于存储该装置700的程序代码和数据。因此,该存储器704可以是处理器701内部的存储单元,也可以是与处理器701独立的外部存储单元,还可以是包括处理器701内部的存储单元和与处理器701独立的外部存储单元的部件。
可选的,装置700还可以包括总线705。其中,接收器702、发送器703、以及存储器704可以通过总线705与处理器701连接;总线705可以是外设部件互连标准(PeripheralComponent Interconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。所述总线705可以分为地址总线、数据总线、控制总线等。为便于表示,图7中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
处理器701例如可以是中央处理器(Central Processing Unit,CPU),通用处理器,数字信号处理器(Digital Signal Processor,DSP),专用集成电路(Application-Specific Integrated Circuit,ASIC),现场可编程门阵列(Field Programmable GateArray,FPGA)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本发明公开内容所描述的各种示例性的逻辑方框,模块和电路。所述处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等等。
接收器702和发送器703可以是包括上述天线和发射机链和接收机链的电路,二者可以是独立的电路,也可以是同一个电路。
应理解,图6或图7示出的实施例可以实现上述实施例的一个或多个有益效果,为了简洁起见,在此不再赘述
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者第二设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种确定内存大页数目的方法,其特征在于,所述方法应用于Linux操作系统中,包括:
根据内存信息文件,获取当前内存大页总数HugePages_Total,空闲的大页内存总数HugePages_Free,超过所述HugePages_Total使用的大页数目HugePages_Surp;
获取额外内存大页数目add_pages,所述add_pages表示表示当应用程序使用的内存大于HugePages_Total提供的内存大小时,所述Linux系统额外能够提供的内存大页数目;
根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,其中,nr_hugepages表征所述Linux系统提供的内存大页总数,所述nr_overcommit_hugepages表征所述系统能够提供的最大内存大页总数。
2.根据权利要求1所述的方法,其特征在于,在根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages之前,所述方法还包括:
根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,包括:
当确定所述HugePages_Surp值非零时,确定所述nr_hugepages=HugePages_Total+add_pages;
当所述HugePages_Surp值为零时,且HugePages_Free大于add_pages时,
确定所述nr_hugepages=nr_hugepages–(HugePages_Free–add_pages);
当所述HugePages_Surp值为零时,且HugePages_Free不大于add_pages时,确定nr_hugepages=HugePages_Total。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述方法还包括:
当所述nr_hugepages发生变化时,将所述nr_hugepages的值更新在/proc/sys/vm/nr_hugepages中。
5.根据权利要求2所述的方法,其特征在于,根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages,包括:
获取当前Linux系统内存大小,按照内存大页为2M的大小计算空闲内存的总页数,并将所述系统空闲内存大页数的百分之三十设定为所述nr_hugepages的初始值,所述系统空闲内存大页数百分之七十设定为所述nr_overcommit_hugepages的初始值。
6.一种确定内存大页数目的装置,其特征在于,包括:
获取单元,所述获取单元用于根据内存信息文件,获取当前Linux系统中内存大页总数HugePages_Total,空闲的大页内存总数HugePages_Free,超过所述HugePages_Total使用的大页数目HugePages_Surp;
所述获取单元还用于获取额外内存大页数目add_pages,所述add_pages表示表示当应用程序使用的内存大于HugePages_Total提供的内存大小时,所述Linux系统额外能够提供的内存大页数目;
处理单元,所述处理单元用于根据所述HugePages_Total、所述add_pages、以及所述HugePages_Free或所述HugePages_Surp中的至少一项,配置内存大页总数nr_hugepages和允许内存大页总数nr_overcommit_hugepages,其中,nr_hugepages表征所述Linux系统提供的内存大页总数,所述nr_overcommit_hugepages表征所述系统能够提供的最大内存大页总数。
7.根据权利要求6所述的装置,其特征在于,所述获取单元用于:
根据所述Linux系统的内存大小,初始化所述nr_hugepages和所述nr_overcommit_hugepages。
8.根据权利要求6或7所述的装置,其特征在于,所述处理单元用于:
当确定所述HugePages_Surp值非零时,确定所述nr_hugepages=HugePages_Total+add_pages;
当所述HugePages_Surp值为零时,且HugePages_Free大于add_pages时,
确定所述nr_hugepages=nr_hugepages–(HugePages_Free–add_pages);
当所述HugePages_Surp值为零时,且HugePages_Free不大于add_pages时,确定nr_hugepages=HugePages_Total。
9.根据权利要求6至8中任一项所述的装置,其特征在于,所述处理单元还用于:
当所述nr_hugepages发生变化时,将所述nr_hugepages的值更新在/proc/sys/vm/nr_hugepages中。
10.根据权利要求7所述的装置,其特征在于,所述获取单元用于:
获取当前Linux系统内存大小,按照内存大页为2M的大小计算空闲内存的总页数,并将所述系统空闲内存大页数的百分之三十设定为所述nr_hugepages的初始值,所述系统空闲内存大页数百分之七十设定为所述nr_overcommit_hugepages的初始值。
CN201810288018.4A 2018-04-03 2018-04-03 一种确定内存大页数目的方法及其装置 Pending CN108664419A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810288018.4A CN108664419A (zh) 2018-04-03 2018-04-03 一种确定内存大页数目的方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810288018.4A CN108664419A (zh) 2018-04-03 2018-04-03 一种确定内存大页数目的方法及其装置

Publications (1)

Publication Number Publication Date
CN108664419A true CN108664419A (zh) 2018-10-16

Family

ID=63782965

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810288018.4A Pending CN108664419A (zh) 2018-04-03 2018-04-03 一种确定内存大页数目的方法及其装置

Country Status (1)

Country Link
CN (1) CN108664419A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109508304A (zh) * 2018-11-14 2019-03-22 郑州云海信息技术有限公司 一种内存管理元数据的处理方法及装置
CN110046106A (zh) * 2019-03-29 2019-07-23 海光信息技术有限公司 一种地址转换方法、地址转换模块及系统
CN112905497A (zh) * 2021-02-20 2021-06-04 迈普通信技术股份有限公司 内存管理方法、装置、电子设备及存储介质
CN113687873A (zh) * 2021-07-30 2021-11-23 济南浪潮数据技术有限公司 一种云服务页表中的大页内存配置方法、系统及相关装置
CN113934635A (zh) * 2021-10-21 2022-01-14 江苏安超云软件有限公司 基于异构处理器提供同等算力云服务的方法及应用

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101145129A (zh) * 2007-07-18 2008-03-19 中兴通讯股份有限公司 一种嵌入式系统内存写越界的检测方法及系统
CN103810109A (zh) * 2012-11-15 2014-05-21 华为技术有限公司 内存分配方法、装置及系统
CN103984599A (zh) * 2014-04-14 2014-08-13 北京大学 一种提高操作系统大页使用率的方法
CN105095099A (zh) * 2015-07-21 2015-11-25 浙江大学 一种基于内存页位图变更的大内存页整合方法
CN105577567A (zh) * 2016-01-29 2016-05-11 国家电网公司 基于Intel DPDK的网络数据包并行处理方法
CN105893269A (zh) * 2016-03-31 2016-08-24 武汉虹信技术服务有限责任公司 一种Linux系统下内存管理方法
US20170123949A1 (en) * 2015-11-02 2017-05-04 International Business Machines Corporation Operating a computer system in an operating system test mode
CN106970826A (zh) * 2017-03-10 2017-07-21 浙江大学 一种基于大页的缺页异常解决方法
CN106970882A (zh) * 2017-03-10 2017-07-21 浙江大学 一种基于Linux大页内存的易扩展页面架构
CN106980541A (zh) * 2017-03-10 2017-07-25 浙江大学 一种大页内存压缩回收系统及方法
CN107239410A (zh) * 2017-05-31 2017-10-10 上海交通大学 基于动态插桩的大块内存分配系统及方法
CN107562645A (zh) * 2017-08-24 2018-01-09 华为技术有限公司 一种内存页管理方法及计算设备
CN107766158A (zh) * 2017-11-03 2018-03-06 郑州云海信息技术有限公司 一种基于gperftools的内存管理方法

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101145129A (zh) * 2007-07-18 2008-03-19 中兴通讯股份有限公司 一种嵌入式系统内存写越界的检测方法及系统
CN103810109A (zh) * 2012-11-15 2014-05-21 华为技术有限公司 内存分配方法、装置及系统
CN103984599A (zh) * 2014-04-14 2014-08-13 北京大学 一种提高操作系统大页使用率的方法
CN105095099A (zh) * 2015-07-21 2015-11-25 浙江大学 一种基于内存页位图变更的大内存页整合方法
US20170123949A1 (en) * 2015-11-02 2017-05-04 International Business Machines Corporation Operating a computer system in an operating system test mode
CN105577567A (zh) * 2016-01-29 2016-05-11 国家电网公司 基于Intel DPDK的网络数据包并行处理方法
CN105893269A (zh) * 2016-03-31 2016-08-24 武汉虹信技术服务有限责任公司 一种Linux系统下内存管理方法
CN106970826A (zh) * 2017-03-10 2017-07-21 浙江大学 一种基于大页的缺页异常解决方法
CN106970882A (zh) * 2017-03-10 2017-07-21 浙江大学 一种基于Linux大页内存的易扩展页面架构
CN106980541A (zh) * 2017-03-10 2017-07-25 浙江大学 一种大页内存压缩回收系统及方法
CN107239410A (zh) * 2017-05-31 2017-10-10 上海交通大学 基于动态插桩的大块内存分配系统及方法
CN107562645A (zh) * 2017-08-24 2018-01-09 华为技术有限公司 一种内存页管理方法及计算设备
CN107766158A (zh) * 2017-11-03 2018-03-06 郑州云海信息技术有限公司 一种基于gperftools的内存管理方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
张春胜: "hugepages大叶内存", 《HTTPS://BLOG.51CTO.COM/7280185/1675815》 *
李爱武: "《融会贯通 从Oracle 12c到SQL Server 2016》", 31 December 2016 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109508304A (zh) * 2018-11-14 2019-03-22 郑州云海信息技术有限公司 一种内存管理元数据的处理方法及装置
CN109508304B (zh) * 2018-11-14 2021-10-29 郑州云海信息技术有限公司 一种内存管理元数据的处理方法及装置
CN110046106A (zh) * 2019-03-29 2019-07-23 海光信息技术有限公司 一种地址转换方法、地址转换模块及系统
CN110046106B (zh) * 2019-03-29 2021-06-29 海光信息技术股份有限公司 一种地址转换方法、地址转换模块及系统
CN112905497A (zh) * 2021-02-20 2021-06-04 迈普通信技术股份有限公司 内存管理方法、装置、电子设备及存储介质
CN112905497B (zh) * 2021-02-20 2022-04-22 迈普通信技术股份有限公司 内存管理方法、装置、电子设备及存储介质
CN113687873A (zh) * 2021-07-30 2021-11-23 济南浪潮数据技术有限公司 一种云服务页表中的大页内存配置方法、系统及相关装置
CN113687873B (zh) * 2021-07-30 2024-02-23 济南浪潮数据技术有限公司 一种云服务页表中的大页内存配置方法、系统及相关装置
CN113934635A (zh) * 2021-10-21 2022-01-14 江苏安超云软件有限公司 基于异构处理器提供同等算力云服务的方法及应用

Similar Documents

Publication Publication Date Title
CN108664419A (zh) 一种确定内存大页数目的方法及其装置
CN113810312B (zh) 用于管理存储器资源的系统和方法
US11029848B2 (en) File management method, distributed storage system, and management node
US10303618B2 (en) Power savings via dynamic page type selection
US7590816B2 (en) Computer system, management computer and storage system, and storage area allocation amount controlling method
CA2894623C (en) Partition extension method and apparatus
US10447273B1 (en) Dynamic virtualized field-programmable gate array resource control for performance and reliability
US10216414B2 (en) Frame choosing during storage constraint condition
US10691481B2 (en) System and method for detection of underprovisioning of memory in virtual machines
US6925546B2 (en) Memory pool configuration system
CN114860329B (zh) 动态一致性偏置配置引擎及方法
JP2010517142A (ja) 複数の装置に電力を割り当てるためのデータ構造
US9940275B2 (en) System and method to avoid SMBus address conflicts via a baseboard management controller
KR20090057006A (ko) 프로세서 성능을 제한하기 위한 시스템 및 방법
CN110955512B (zh) 缓存处理方法、装置、存储介质、处理器及计算设备
CN111078410A (zh) 内存分配方法、装置、存储介质及电子设备
US20190042454A1 (en) Techniques to manage cache resource allocations for a processor cache
US8055876B2 (en) Selectively mark free frames as unused for cooperative memory over-commitment
US20150100663A1 (en) Computer system, cache management method, and computer
US20160004465A1 (en) Caching systems and methods with simulated nvdram
CN107766259A (zh) 页表缓存的访问方法、页表缓存、处理器芯片和存储单元
CN116107509A (zh) 一种数据处理方法、装置和电子设备
US10216524B2 (en) System and method for providing fine-grained memory cacheability during a pre-OS operating environment
JPH04288638A (ja) コンピュータシステム
JP2008310610A (ja) システム構成管理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181016

RJ01 Rejection of invention patent application after publication