CN105988876B - 内存分配方法及装置 - Google Patents

内存分配方法及装置 Download PDF

Info

Publication number
CN105988876B
CN105988876B CN201510140098.5A CN201510140098A CN105988876B CN 105988876 B CN105988876 B CN 105988876B CN 201510140098 A CN201510140098 A CN 201510140098A CN 105988876 B CN105988876 B CN 105988876B
Authority
CN
China
Prior art keywords
memory
cpu
page
memory node
node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510140098.5A
Other languages
English (en)
Other versions
CN105988876A (zh
Inventor
张津才
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou DPTech Technologies Co Ltd
Original Assignee
Hangzhou DPTech Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou DPTech Technologies Co Ltd filed Critical Hangzhou DPTech Technologies Co Ltd
Priority to CN201510140098.5A priority Critical patent/CN105988876B/zh
Publication of CN105988876A publication Critical patent/CN105988876A/zh
Application granted granted Critical
Publication of CN105988876B publication Critical patent/CN105988876B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Memory System (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种内存分配方法及装置,其中,上述方法包括:为每个CPU建立一条内存节点链表,将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素存储于所述每CPU变量中;CPU运行应用程序时,利用每CPU变量机制直接从对应的内存节点链表中申请内存节点;CPU结束运行所述应用程序时,释放所述内存节点,将所述内存节点归还给对应的内存节点链表。本发明提供的内存分配方法采用每CPU变量机制,每个CPU只操作对应内存节点链表中的内存节点,使得在需要高频申请和释放内存的程序运行过程中,在不对占有的内存资源加锁的情况下实现临界资源的同步管理,提高了设备的内存分配效率和并发处理性能。

Description

内存分配方法及装置
技术领域
本发明涉及网络通信技术领域,特别地,涉及一种内存分配方法及装置。
背景技术
内存是CPU能直接寻址的存储空间,数据处理设备内各种软件程序的运行,都要被加载到内存的适当位置。因此,如何使用有效的方法分配内存资源是提高数据处理设备性能的关键因素。
现有技术一般采用需要时申请不需要时释放的内存分配策略分配内存,具体为:启动一个应用程序时,CPU从系统内存块中申请一块所需大小的内存,并将该块内存上锁,即在此程序运行期间不允许其他软件程序使用该块内存,也就是内存操作中涉及的同步锁操作和临界资源的操作。所谓同步锁操作,是指当一个程序进程要使用某块内存资源时,就将该内存块上锁,等该进程运行完毕后再把锁给另一个要用上述内存块的进程。所谓临界资源,是指多个程序进程采用互斥方式实现共享的资源。所谓临界资源的操作,是指一次仅允许一个程序进程使用共享资源。
对于需要高频申请和释放内存的应用程序,采用现有的内存分配方法,在内存操作过程中因为涉及到较多的同步锁和临界资源的操作,影响数据处理设备的并发处理性能。
发明内容
有鉴于此,本发明提供一种内存分配方法,应用于数据处理设备中,上述方法包括:为每个CPU建立一条内存节点链表,将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素存储于上述每CPU变量中;CPU运行应用程序时,利用每CPU变量机制直接从对应的内存节点链表中申请内存节点;CPU结束运行上述应用程序时,释放上述内存节点,将上述内存节点归还给对应的内存节点链表。
可选的,上述为每个CPU建立一条内存节点链表,具体包括:确定CPU运行应用程序所需内存节点的大小,上述内存节点包括:管理区头部和数据区;上述内存节点的数据区的大小为满足上述应用程序运行所需的最小内存空间的大小;从系统内存中为每个CPU分配内存页;依据上述内存节点的大小对上述内存页进行节点切分,获取切分后的内存节点;为上述切分后的内存节点的上述管理区头部的预置参数赋值,构建每个CPU对应的内存节点链表。
可选的,上述管理区头部的预置参数至少包括:内存节点的指针、状态标记、CPU身份标识,其中,上述内存节点的指针用于指向下一个内存节点;上述内存节点的状态标记用于表示内存节点处于空闲状态或已使用状态;上述内存节点的CPU身份标识用于表示内存节点挂载在哪个CPU的内存节点链表中。
可选的,上述内存分配方法,还包括:在系统内存为每个CPU成功分配内存页后,启动内存页计数器记录系统内存为每个CPU分配的内存页的页数。
可选的,上述从系统内存中为每个CPU分配内存页,具体包括:向系统内存申请内存页;判断上述内存页计数器记录的内存页计数是否达到预置最大内存页数;如果上述内存页计数小于上述最大内存页数,则继续从系统内存中分配新的内存页,同时触发上述内存页计数器将上述内存页计数加1;如果上述内存页计数已达到上述最大内存页数,则不再从系统内存分配新的内存页。
对应的,本发明实施例还提供了一种内存分配装置,包括:每CPU变量创建模块,用于为每个CPU建立一条内存节点链表,将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素存储于上述每CPU变量中;内存申请模块,用于在CPU运行应用程序时,利用每CPU变量机制直接从对应的内存节点链表中申请内存节点;内存释放模块,用于在CPU结束运行上述应用程序时,释放上述内存节点,将上述内存节点归还给对应的内存节点链表。
可选的,上述每CPU变量创建模块具体包括:节点大小确定单元,用于确定CPU运行应用程序所需内存节点的大小,上述内存节点包括:管理区头部和数据区;上述内存节点的数据区的大小为满足上述应用程序运行所需的最小内存空间的大小;内存页分配单元,用于从系统内存中为每个CPU分配内存页;节点切分单元,用于依据上述内存节点的大小对上述内存页进行节点切分,获取切分后的内存节点;赋值单元,用于为上述切分后的内存节点的上述管理区头部的预置参数赋值,构建每个CPU对应的内存节点链表;存储单元,用于将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素存储于上述每CPU变量中。
可选的,上述赋值单元赋值的预置参数至少包括:内存节点的指针、状态标记、CPU身份标识,其中,上述内存节点的指针用于指向下一个内存节点;上述内存节点的状态标记用于表示内存节点处于空闲状态或已使用状态;上述内存节点的CPU身份标识用于表示内存节点挂载在哪个CPU的内存节点链表中。
可选的,上述每CPU变量创建模块还包括:内存页计数单元,用于在系统内存为每个CPU成功分配内存页后,启动内存页计数器记录系统内存为每个CPU分配的内存页的页数。
可选的,上述内存页分配单元具体包括:内存申请子单元,用于向系统内存申请内存页;判断子单元,用于判断上述内存页计数单元记录的内存页计数是否达到预置最大内存页数;分配执行子单元,用于在上述内存页计数小于上述最大内存页数的情况下,从系统内存中分配新的内存页,同时触发上述计数单元中的内存页计数器将上述内存页计数加1;分配终止子单元,用于在上述内存页计数达到上述最大内存页数的情况下,不再通知上述分配执行单元从系统内存分配新的内存页。
具体地,本发明是通过如下技术方案实现的:本发明提供的内存分配方法在应用程序运行于单核或多核数据处理器时,预先为每个CPU分配一个内存节点链表,采用每CPU变量机制,每个CPU只操作对应内存节点链表中的内存节点,使得在需要高频申请和释放内存的程序运行过程中,每个CPU操作自己内存节点链表中的内存节点,相互不干涉。因而,当CPU修改自己变量时无需担心出现竞争条件,即在不对占有的内存资源加锁的情况下实现临界资源的同步管理,提高了设备的内存分配效率和并发处理性能。
附图说明
图1是本发明内存分配方法实施例的流程图;
图2是本发明实施例中每CPU变量的结构示意图;
图3是本发明为每个CPU建立内存节点链表的流程图;
图3-1是本发明实施例中一个内存节点的结构示意图;
图3-2是本发明实施例中分配内存页和切分节点的示意图;
图4是本发明实施例从系统内存中分配内存页的流程示意图;
图5是本发明内存分配装置实施例的结构框图;
图6是本发明每CPU变量创建模块实施例一的结构框图;
图7是本发明每CPU变量创建模块实施例二的结构框图;
图8是本发明实施例中内存页分配单元的结构框图;
图9是本发明内存分配装置所在设备的一种硬件结构图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
本发明实施例的一个应用场景为网络设备对网络协议的识别过程。在网络协议识别过程中,有一部分网络协议是通过pcre(Perl Compatible Regular Expressions,Perl兼容正则表达式)特征识别的。在pcre特征的识别过程中,要进行正则表达式的匹配,需要不断的进行内存的申请和释放,如果内存操作采用现有技术中使用的需要时申请不需要时释放的处理方案,因为内存操作过程中涉及到较多的同步锁和临界资源的操作,会影响设备的并发处理性能,鉴于此,本发明提供了一种优化的适用于高频申请和释放内存的内存分配方法。
参照图1,示出了本发明内存分配方法实施例的流程图,该方法实施例应用于数据处理设备中,包括:
步骤11、为每个CPU建立一条内存节点链表,将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素存储于上述每CPU变量中;
其中,图2示出了本发明实施例中每CPU变量的结构示意图,假设网络设备有3个内核,分别为CPU1、CPU2、CPU3,在利用pcre特征匹配实现网络协议识别的过程中,3个CPU可以同时运行,并行处理pcre特征识别。
在系统运行之前,预先为每个CPU分配一个空闲的内存节点链表,系统刚启动时,内存节点链表是空的,之后向系统内存申请内存页,把内存页划分成节点,同时把这些划分出来的节点挂载到上述内存节点链表中。具体地,将每个CPU对应的内存节点链表的头节点存储于上述每CPU变量中,得到如图2所示的由每CPU变量管理的内存节点链表。在图2中,每个CPU对应一条空闲内存节点链表,每条空闲内存节点链表设置有一个头指针,指向本空闲内存节点链表的头节点Node1-1、Node2-1或Node3-1。由于每个节点包含有指向下一节点的指针,所以每个CPU对应的头指针可以通过操作每CPU变量的头节点来操作对应内存节点链表中的内存节点。
从数据结构的组成来讲,每CPU变量为一个数组,包含N个数组元素,其中,N代表CPU的数量,系统为每个CPU分配的内存节点链表即为上述数组中的一个数组元素。根据每CPU变量的定义,每个CPU仅可操作自己的数组元素,也就是说,在图2所示的每CPU变量的结构中,CPU1在运行pcre特征识别的过程中,只能操作CPU1对应的内存节点链表中的内存节点,用于存储待匹配的pcre特征。
步骤12、CPU运行应用程序时,利用每CPU变量机制直接从对应的内存节点链表中申请内存节点;
CPU在运行程序时,根据需要的内存大小,利用每CPU变量机制,直接从对应的内存节点链表中摘取所需数量的内存节点。具体地,CPU运行应用程序时,首先判断当前内存节点链表中是否所需数量的空闲内存节点,如果有,从上述内存节点链表中摘取,摘取成功后,将摘取的内存节点的管理区头部的状态标识由空闲状态修改为已分配状态。如果当前内存节点链表中剩余空闲内存节点的数量不足,则向系统内存申请新的内存页,以便节点切分后挂摘入上述内存节点链表中供CPU申请使用。
采用每CPU变量机制,因为每个CPU都对应自己的数组元素,并且只能操作自己的数组元素,也就是说,每条内存节点链表就是一个临界资源,这样在当前CPU修改自己变量的时候不需要担心出现竞争条件,这样就在“无锁”的情况下实现了临界资源的同步管理。
步骤13、CPU结束运行上述应用程序时,释放上述内存节点,将上述内存节点归还给对应的内存节点链表。
由于每个内存节点的管理区头部都存储有CPU标识,所以CPU在释放内存节点后,可以根据其管理区头部的CPU标识,将释放后的内存节点归还至对应的内存节点链表中。具体地,将上述内存节点链表的头指针指向被释放内存节点,修改被释放内存节点的指针,使其指向内存节点链表中其他空闲节点,同时将被释放内存节点的状态标识由已分配修改为空闲。
图3示出了步骤11中,为每个CPU建立内存节点链表的过程,具体包括:
步骤111、确定CPU运行应用程序所需内存节点的大小,上述内存节点包括:管理区头部和数据区;上述内存节点的数据区的大小为满足上述应用程序运行所需的最小内存空间的大小;
具体地,每个内存节点包括两部分:管理区头部和数据区,如图3-1上述的内存节点的结构示意图。其中,管理区头部用于存储该节点的指针类型、状态标识、CPU身份标识;其中,指针类型用于指向下一节点和/或上一节点;状态标识用于表示当前节点处于空闲状态或已分配状态;CPU身份标识用于表示当前节点属于哪个CPU对应的内存节点链表。
数据区为CPU运行程序时实际可使用的内存区,即用于存储程序运行过程中的中间数据。在pcre特征识别过程中,节点的数据区具体为用于存储一个待匹配特征的内存区。
根据实际需要来定,不同的应用场景所需要的每个节点大小是不一样的,比如上述pcre特征匹配过程中,CPU运行程序时所需的每个节点的数据区的大小就是一个待匹配的特征的大小。
一个内存节点链表中节点的数目,可以通过系统运行的实际情况统计得出。一个链表中节点的最大数目不大于根据系统的实际运行情况统计出的所需节点数的最大值。如,可以将内存节点链表中的节点数目设置为根据系统的实际运行情况统计出的所需节点数的平均值。
步骤112、从系统内存中为每个CPU分配内存页;
参见图3-2所示的分配内存页和切分节点的示意图,在系统初始化时,从系统内存中为每个CPU分配一个内存页P1,准备进行节点划分。可选的,可以同时启动一个内存页计数器,一个内存节点链表对应一个内存页计数器,在系统初始化时,为每个CPU分配第一个内存页时,启动上述内存页计数器,赋值为1。
在CPU运行应用程序的过程中,若发现当前内存节点链表中可操作的空闲内存节点数量不足或者没有可操作的空闲内存节点,从系统内存中为CPU分配新的内存页,准备进行节点划分,即在CPU运行应用程序的过程中,若存在内存节点链表中的空闲节点不足,仍然可以从系统内存中继续为该CPU分配新的内存页,准备进行节点划分。可选的,在后续内存页分配过程中,从系统内存中为一个CPU每增加一个内存页,对应的内存页计数器的数值增加1。
步骤113、依据上述内存节点的大小对上述内存页进行节点切分,获取切分后的内存节点;
如图3-2所示,以系统初始化时分配的一个大小为4K的内存页为例,假设步骤111确定的每个节点的大小为32字节,则可以将一个内存页划分为128个节点,计算方法为:4096÷32=128,其中,4K×1024字节/K=4096字节。即从内存页P1中切分出a1、a2、a3……an节点,n=128。
步骤114、为切分后的内存节点的管理区头部的预置参数赋值,构建每个CPU对应的内存节点链表。
如上上述,每个内存节点的管理区头部的预置参数至少包括:内存节点的指针、状态标记、CPU身份标识,其中,内存节点的指针用于指向下一个内存节点;内存节点的状态标记用于表示内存节点处于空闲状态或已使用状态,在初始状态下,所有节点的状态均标记为空闲;内存节点的CPU身份标识用于表示内存节点挂载在哪个CPU的内存节点链表中。对上述三个参数赋值完成后,将内存节点挂载到内存节点链表中。
进一步可选的,本发明实施例在建立内存节点链表过程中,在从系统中分配内存页时,尤其是在实施步骤112从系统内存中为每个CPU分配内存页时,若CPU在运行应用程序时发现当前内存节点链表中处于空闲状态的内存节点的数量不足,需要向系统内存后续申请新的内存页时,可以增加判断已分配内存页的页数的步骤。具体参照图4所示的从系统内存分配内存页的流程示意图,具体包括:
步骤41、向系统内存申请内存页;
该步骤可以是系统初始化时向系统内存申请内存页,也可以是在CPU运行应用程序时发现内存节点链表中的空闲内存节点不足后,向系统内存申请增加新的内存页,本实施例尤其适用于后者。
步骤42、判断内存页计数器记录的内存页计数P是否已达到预置最大内存页数Pmax
其中,上述预置最大内存页数Pmax是根据系统实际运行情况,统计CPU在运行应用程序时所需的最大内存空间而设置的。
步骤43、如果上述内存页计数小于上述最大内存页数,即:P<Pmax,则继续从系统内存中分配新的内存页,同时触发上述内存页计数器将内存页计数加1;
步骤44、如果上述内存页计数已达到上述最大内存页数,即:P=Pmax,则不再从系统内存分配新的内存页。
本实施例,在向系统内存申请内存页的情况下,首先判断分配给每CPU变量的内存页是否已达到预置最大内存页数,若已达到,则拒绝响应分配新的内存页。增加上述步骤,可以保证预分配内存量可控,有效避免CPU运行一个应用程序时预分配给每个CPU的内存资源过多,以免影响系统中其他应用程序的运行。
综上,本发明提供的内存分配方法,采用预分配的方式,预先为每个CPU分配好一部分内存即内存节点链表,存储在每CPU变量中。在CPU运行应用程序时,根据应用程序的需要,采用每CPU变量机制,直接从预分配好的内存节点链表中申请内存节点,然后在内存节点包含的内存空间中运行该应用程序。与现有技术通过伙伴系统申请内存空间相比,提高了内存管理效率。
由于采用了每CPU变量机制,每个CPU只能操作自己的内存节点链表中的内存节点,也就是说,每条内存节点链表就是一个临界资源,这样在当前CPU修改自己变量的时候不需要担心出现竞争条件,实现了在“无锁”的情况下对临界资源的同步管理,避免系统高频运行应用程序时,频繁进行同步锁操作和临界资源操作,提高了数据处理设备的并发处理性能。
对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员用该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。
其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本发明所必须的。
对应上述本发明提供的内存分配方法实施例,本发明还提供了一种内存分配装置,本发明提供的内存分配装置可以应用在如网络设备的任何数据处理设备上。
参照图5,示出了本发明一种内存分配装置实施例的结构框图,包括:
每CPU变量创建模块51,用于为每个CPU建立一条内存节点链表,将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素,存储于上述每CPU变量中;
内存申请模块52,用于在CPU运行应用程序时,利用每CPU变量机制直接从对应的内存节点链表中申请内存节点;
内存释放模块53,用于在CPU结束运行上述应用程序时,释放上述内存节点,将上述内存节点归还给对应的内存节点链表。
参见图6所示的每CPU变量创建模块实施例一的结构框图,在本发明另一内存分配装置实施例中,每CPU变量创建模块51可以具体包括:
节点大小确定单元511,用于确定CPU运行应用程序所需内存节点的大小,上述内存节点包括:管理区头部和数据区;上述内存节点的数据区的大小为满足上述应用程序运行所需的最小内存空间的大小;
内存页分配单元513,用于从系统内存中为每个CPU分配内存页;
内存页分配单元513可以具体用于:在系统初始化时,从系统内存中为每个CPU分配一个内存页;在CPU运行应用程序的过程中,若当前内存节点链表中的空闲内存节点不足,从系统内存中为每个CPU分配新的内存页。
节点切分单元515,用于依据上述内存节点的大小对内存页进行节点切分,获取切分后的内存节点;
赋值单元517,用于为切分后的内存节点的管理区头部的预置参数赋值,构建每个CPU对应的内存节点链表;
存储单元519,用于将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素存储于每CPU变量中。
可选的,参见图7所示的每CPU变量创建模块实施例二的结构框图,每CPU变量创建模块51还可以进一步包括:
内存页计数单元514,用于在系统内存为每个CPU成功分配内存页后,启动内存页计数器记录系统内存为每个CPU分配的内存页的页数。具体为:在系统初始化时,内存页分配执行单元513从系统内存中为每个CPU分配一个内存页后,启动内存页计数器,赋值为1;在CPU运行应用程序的过程中,在当前内存节点链表中空闲内存节点不足的情况下,内存页分配执行单元513从系统内存成功分配新的内存页后,增加上述内存页计数器的内存页计数。
可选的,参见图8所示的内存页分配单元的结构框图,内存页分配单元513可以具体包括:
内存申请子单元5131,用于向系统内存申请内存页;
该内存申请子单元5131可以在系统初始化时,默认向系统内存申请一个内存页;在CPU运行应用程序的过程中,若发现CPU对应的内存节点链表中剩余的空闲内存节点不足,则向系统内存申请新的内存页。
判断子单元5132,用于系统内存分配内存页之前,首先判断内存页计数单元514记录的内存页计数是否达到预置最大内存页数;
分配执行子单元5133,用于在上述内存页计数小于上述最大内存页数的情况下,执行从系统内存中分配新的内存页,同时触发计数单元514中的内存页计数器将内存页计数加1;
分配终止子单元5134,用于在上述内存页计数达到上述最大内存页数的情况下,不再通知分配执行子单元5133从系统内存分配新的内存页。
此处需要说明的是,本发明提供的内存分配装置实施例可以通过软件实现,也可以通过硬件或者软硬件结合的方式实现。以软件实现为例,作为一个逻辑意义上的装置,是通过其所在设备的处理器将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言,如图9所示,为本发明内存分配装置所在设备的一种硬件结构图,上述设备可以是网络设备,除了图9所示的处理器、网络接口、内存以及非易失性存储器之外,实施例中装置所在的网络设备通常还可以包括其他硬件,如负责处理报文的转发芯片等等,对此图9中不再详细示出。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于系统实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (8)

1.一种内存分配方法,应用于数据处理设备中,其特征在于,所述方法包括:
确定CPU运行应用程序所需内存节点的大小,所述内存节点包括:管理区头部和数据区;所述内存节点的数据区的大小为满足所述应用程序运行所需的最小内存空间的大小;
从系统内存中为每个CPU分配内存页;
依据所述内存节点的大小对所述内存页进行节点切分,获取切分后的内存节点;
为所述切分后的内存节点的所述管理区头部的预置参数赋值,构建每个CPU对应的内存节点链表,其中把所划分出来的内存节点挂载到所述内存节点链表中;
将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素存储于所述每CPU变量中;
CPU运行应用程序时,利用每CPU变量机制直接从对应的内存节点链表中申请内存节点;
CPU结束运行所述应用程序时,释放所述内存节点,将所述内存节点归还给对应的内存节点链表。
2.根据权利要求1所述的内存分配方法,其特征在于,所述管理区头部的预置参数至少包括:内存节点的指针、状态标记、CPU身份标识,其中,所述内存节点的指针用于指向下一个内存节点;所述内存节点的状态标记用于表示内存节点处于空闲状态或已使用状态;所述内存节点的CPU身份标识用于表示内存节点挂载在哪个CPU的内存节点链表中。
3.根据权利要求2所述的内存分配方法,其特征在于,还包括:
在系统内存为每个CPU成功分配内存页后,启动内存页计数器记录系统内存为每个CPU分配的内存页的页数。
4.根据权利要求3所述的内存分配方法,其特征在于,所述从系统内存中为每个CPU分配内存页,具体包括:
向系统内存申请内存页;
判断所述内存页计数器记录的内存页计数是否达到预置最大内存页数;
如果所述内存页计数小于所述最大内存页数,则继续从系统内存中分配新的内存页,同时触发所述内存页计数器将所述内存页计数加1;
如果所述内存页计数已达到所述最大内存页数,则不再从系统内存分配新的内存页。
5.一种内存分配装置,其特征在于,包括:
每CPU变量创建模块包括:节点大小确定单元,用于确定CPU运行应用程序所需内存节点的大小,所述内存节点包括:管理区头部和数据区;所述内存节点的数据区的大小为满足所述应用程序运行所需的最小内存空间的大小;
内存页分配单元,用于从系统内存中为每个CPU分配内存页;
节点切分单元,用于依据所述内存节点的大小对所述内存页进行节点切分,获取切分后的内存节点;
赋值单元,用于为所述切分后的内存节点的所述管理区头部的预置参数赋值,构建每个CPU对应的内存节点链表,其中把所划分出来的内存节点挂载到所述内存节点链表中;
将每个CPU对应的内存节点链表的头节点作为每CPU变量的一个数组元素存储于所述每CPU变量中;
内存申请模块,用于在CPU运行应用程序时,利用每CPU变量机制直接从对应的内存节点链表中申请内存节点;
内存释放模块,用于在CPU结束运行所述应用程序时,释放所述内存节点,将所述内存节点归还给对应的内存节点链表。
6.根据权利要求5所述的内存分配装置,其特征在于,所述赋值单元赋值的预置参数至少包括:内存节点的指针、状态标记、CPU身份标识,其中,所述内存节点的指针用于指向下一个内存节点;所述内存节点的状态标记用于表示内存节点处于空闲状态或已使用状态;所述内存节点的CPU身份标识用于表示内存节点挂载在哪个CPU的内存节点链表中。
7.根据权利要求6所述的内存分配装置,其特征在于,所述每CPU变量创建模块还包括:
内存页计数单元,用于在系统内存为每个CPU成功分配内存页后,启动内存页计数器记录系统内存为每个CPU分配的内存页的页数。
8.根据权利要求7所述的内存分配装置,其特征在于,所述内存页分配单元具体包括:
内存申请子单元,用于向系统内存申请内存页;
判断子单元,用于判断所述内存页计数单元记录的内存页计数是否达到预置最大内存页数;
分配执行子单元,用于在所述内存页计数小于所述最大内存页数的情况下,从系统内存中分配新的内存页,同时触发所述计数单元中的内存页计数器将所述内存页计数加1;
分配终止子单元,用于在所述内存页计数达到所述最大内存页数的情况下,不再通知所述分配执行子单元从系统内存分配新的内存页。
CN201510140098.5A 2015-03-27 2015-03-27 内存分配方法及装置 Active CN105988876B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510140098.5A CN105988876B (zh) 2015-03-27 2015-03-27 内存分配方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510140098.5A CN105988876B (zh) 2015-03-27 2015-03-27 内存分配方法及装置

Publications (2)

Publication Number Publication Date
CN105988876A CN105988876A (zh) 2016-10-05
CN105988876B true CN105988876B (zh) 2019-09-17

Family

ID=57040184

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510140098.5A Active CN105988876B (zh) 2015-03-27 2015-03-27 内存分配方法及装置

Country Status (1)

Country Link
CN (1) CN105988876B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106649148B (zh) * 2016-10-11 2020-04-17 东软集团股份有限公司 用于大页分配的方法和装置
CN107168800A (zh) * 2017-05-16 2017-09-15 郑州云海信息技术有限公司 一种内存分配方法及装置
CN109388490B (zh) 2017-08-07 2020-11-17 华为技术有限公司 一种内存分配方法和服务器
CN107515788A (zh) * 2017-08-31 2017-12-26 郑州云海信息技术有限公司 一种内存分配的方法及装置
CN108762919A (zh) * 2018-05-17 2018-11-06 桂林长海发展有限责任公司 一种程序内存处理系统及方法
CN108920708B (zh) * 2018-07-20 2021-04-27 新华三技术有限公司 一种数据处理方法及装置
CN109388497B (zh) * 2018-11-05 2021-08-31 郑州云海信息技术有限公司 一种内存池的管理方法、装置、设备及可读存储介质
CN111367461B (zh) * 2018-12-25 2024-02-20 兆易创新科技集团股份有限公司 一种存储空间管理方法及装置
CN111523004B (zh) * 2020-07-03 2020-10-02 南京智能制造研究院有限公司 一种边缘计算网关数据的存储方法及系统
CN111984374B (zh) * 2020-08-20 2021-07-23 海光信息技术股份有限公司 用于管理安全内存的方法及其系统、装置和存储介质
CN114327868B (zh) * 2021-12-08 2023-12-26 中汽创智科技有限公司 一种内存动态调控方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002163136A (ja) * 2000-11-24 2002-06-07 Matsushita Electric Ind Co Ltd ファイルシステム
CN1859325A (zh) * 2006-02-14 2006-11-08 华为技术有限公司 基于链表的进程间消息传递方法
CN101470632A (zh) * 2007-12-24 2009-07-01 华为软件技术有限公司 共享内存管理方法及装置
JP2012178054A (ja) * 2011-02-25 2012-09-13 Nippon Sharyo Seizo Kaisha Ltd 走行データ生成装置
CN102760080A (zh) * 2011-04-26 2012-10-31 腾讯科技(深圳)有限公司 一种内存管理的方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002163136A (ja) * 2000-11-24 2002-06-07 Matsushita Electric Ind Co Ltd ファイルシステム
CN1859325A (zh) * 2006-02-14 2006-11-08 华为技术有限公司 基于链表的进程间消息传递方法
CN101470632A (zh) * 2007-12-24 2009-07-01 华为软件技术有限公司 共享内存管理方法及装置
JP2012178054A (ja) * 2011-02-25 2012-09-13 Nippon Sharyo Seizo Kaisha Ltd 走行データ生成装置
CN102760080A (zh) * 2011-04-26 2012-10-31 腾讯科技(深圳)有限公司 一种内存管理的方法和装置

Also Published As

Publication number Publication date
CN105988876A (zh) 2016-10-05

Similar Documents

Publication Publication Date Title
CN105988876B (zh) 内存分配方法及装置
CN106537863B (zh) 用于并发地处理网络分组的方法和设备
WO2018177012A1 (zh) 一种控制带宽的方法、装置和设备
JP6297980B2 (ja) クラスタに依頼されたタスクを実行するために前記クラスタのコンピュータ資源を割り当てるための方法、コンピュータプログラム、およびデバイス
JP5510556B2 (ja) 仮想マシンのストレージスペースおよび物理ホストを管理するための方法およびシステム
JP4569846B2 (ja) I/oノード制御方式及び方法
CN104254839B (zh) 用于分割单链表以供分配存储器元素的系统和方法
US20110161540A1 (en) Hardware supported high performance lock schema
CN106547612A (zh) 一种多任务处理方法及装置
DE102006019839A1 (de) Zeitbewusste Systeme
US9361224B2 (en) Non-intrusive storage of garbage collector-specific management data
CN110018892A (zh) 基于线程资源的任务处理方法及相关装置
CN110532067A (zh) 事件处理方法、装置、设备及存储介质
CN106407244A (zh) 基于多数据库的数据查询方法、系统和装置
CN110727517A (zh) 一种基于分区设计的内存分配方法和装置
CN106385377B (zh) 一种信息处理方法和系统
CN105373434A (zh) 资源管理系统及方法
US20220300323A1 (en) Job Scheduling Method and Job Scheduling Apparatus
WO2018157768A1 (zh) 调度运行设备的方法、设备和运行设备
CN109150759B (zh) 一种渐进式非阻塞机会资源预留方法及系统
CN109831394A (zh) 数据处理方法、终端以及计算机存储介质
CN110502474A (zh) 基于分布式存储系统的订单分配方法、装置及存储介质
CN101299758B (zh) 一种大规模事件处理的规则群组系统及处理方法
CN104468701B (zh) 一种用于异构存储集群系统的i/o服务质量维护方法
CN104767738B (zh) 一种数据访问的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Binjiang District and Hangzhou city in Zhejiang Province Road 310051 No. 68 in the 6 storey building

Applicant after: Hangzhou Dipu Polytron Technologies Inc

Address before: Binjiang District and Hangzhou city in Zhejiang Province Road 310051 No. 68 in the 6 storey building

Applicant before: Hangzhou Dipu Technology Co., Ltd.

GR01 Patent grant
GR01 Patent grant