CN103927305A - 一种对内存溢出进行控制的方法和设备 - Google Patents

Abstract

本发明公开了一种对内存溢出进行控制的方法和设备，其内容包括：在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息，并在从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中之后，执行判断本地内存的剩余空间容量值是否小于设定的阈值，并在判断结果为小于时停止读取下一个数据对象标识对应的数据对象，与现有技术相比，限制了写入内存中数据对象的数量，既避免了内存申请过程中出现溢出的情况，又可以对内存溢出进行快速定位，提高了Java应用服务器的工作效率，提升了Java应用服务器系统的稳定性和可靠性。

Description

一种对内存溢出进行控制的方法和设备

技术领域

本发明涉及计算机控制领域，尤其涉及一种对内存溢出进行控制的方法和设备。

背景技术

随着Java EE平台在企业级应用中占有的份额越来越多，作为平台基础组件的Java应用服务器的性能和可靠性已经成为日常运营、维护和管理工作的重点。常见的影响Java应用服务器正常运行的问题主要有以下3类：1）线程池问题；2）连接池问题；3）内存溢出问题。在这些问题中，线程池和连接池问题一般是因为配置不当引起的，容易处理，即使是不常见的连接泄漏和线程挂起问题，通过跟踪分析也能定位出问题发生的根源。

然而，内存溢出（Out Of Memory）是一类对Java应用服务器的运行性能造成重大影响又难以诊断的问题。由于在Java应用服务器启动时，通常会预先分配一块Java堆作为运行期间产生数据对象的存储空间，数据对象被创建出来后就需要在Java堆中分配一块地址空间，当Java堆中没有连续的地址空间可以满足数据对象的内存申请时，系统将触发垃圾回收线程进行垃圾回收操作，释放内存中的数据对象，但是如果连续几次垃圾回收线程操作完成后Java堆中仍然不能满足数据对象的内存申请时就会导致内存溢出问题的发生，但是当Java应用服务器一旦发生内存溢出，将会对Java应用服务器系统的运行带来极大的挑战。

由于当Java应用服务器中出现内存溢出时，从垃圾回收日志中可以看到Java应用服务器中垃圾回收线程的操作频率呈增加趋势，单个垃圾回收线程的操作周期增长，Java堆被频繁的执行标记、清除、回收与压缩等垃圾回收操作，这样使得Java应用服务器中的CPU主要应用于垃圾回收工作，并且Java堆中的空闲空间又相对较少，导致内存溢出的线程锁持续工作，使得其他线程申请内存的操作只能处于等待状态，严重影响了Java应用服务器的工作的性能，对客户端的请求响应速度变的异常慢，使得客户端长时间得不到Java应用服务器的正常响应，在情况严重时，Java应用服务器将陷入内存溢出问题的死循环，只能通过关闭Java堆进程，并重启Java应用服务器才能结束这种现象。

由于Java应用服务器采用线程模式工作，一个进程内运行着许多线程，这些线程间共享内存、连接池等各种资源，在现有技术中，通过配置参数设置工作线程数的范围，但是在对每一个线程申请内存方面没有约束，容易出现内存申请量大的情况，在这种情况下极容易触发内存溢出，进而导致Java应用服务器不可用，降低Java应用服务器的工作效率。

综上所述，在现有技术中，存在内存溢出导致的Java应用服务器的工作效率低的问题。

发明内容

本发明实施例提供了一种对内存溢出进行控制的方法和设备，用于解决现有技术中存在内存溢出导致的Java应用服务器的工作效率低的问题。

一种对内存溢出进行控制的方法，包括：

在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息；

针对每一个待读取数据对象标识对应的数据对象，执行以下操作：

从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中；

判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则停止读取下一个数据对象标识对应的数据对象；否则，继续读取下一个数据对象标识对应的数据对象。

一种对内存溢出进行控制的设备，包括：

发送模块，用于在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息；

控制模块，用于针对每一个待读取数据对象标识对应的数据对象，执行以下操作：

从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中；

判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则停止读取下一个数据对象标识对应的数据对象；否则，继续读取下一个数据对象标识对应的数据对象。

本发明有益效果如下：

本发明实施例在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息，并在从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中之后，执行判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则停止读取下一个数据对象标识对应的数据对象；否则，继续读取下一个数据对象标识对应的数据对象，与现有技术相比，限制了写入内存中数据对象的数量，既避免了内存申请过程中出现溢出的情况，又可以对内存溢出进行快速定位，提高了Java应用服务器的工作效率，提升了Java应用服务器系统的稳定性和可靠性。

附图说明

图1为本发明实施例一的一种对内存溢出进行控制的方法的流程图；

图2为本发明实施例二的一种对内存溢出进行控制的设备的结构示意图。

具体实施方式

为了实现本发明的目的，本发明实施例提供了一种对内存溢出进行控制的方法和设备，在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息，并在从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中之后，执行判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则停止读取下一个数据对象标识对应的数据对象；否则，继续读取下一个数据对象标识对应的数据对象，与现有技术相比，限制了写入内存中数据对象的数量，既避免了内存申请过程中出现溢出的情况，又可以对内存溢出进行快速定位，提高了Java应用服务器的工作效率，提升了Java应用服务器系统的稳定性和可靠性。

下面结合说明书附图对本发明各个实施例进行详细描述。

实施例一：

如图1所示，为本发明实施例一的一种对内存溢出进行控制的方法的流程图，所述方法包括：

步骤101：在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息。

具体地，在步骤101中，由于在业务支撑运营系统中，当客户端向服务器侧发送业务执行消息时，Java应用服务器将给待执行的业务分配内存空间，一般通过将待执行的业务所使用的数据对象写入内存中，因此，在Java应用服务器接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息，该数据查询消息用于从数据库服务器中获取与待执行的业务相关的数据对象。

步骤102：针对每一个待读取数据对象标识对应的数据对象，执行以下操作：

步骤1021：从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中。

具体地，在步骤1021中，由于Java应用服务器中数据对象保存的方式采用数组方式，在数组长度较长时，将导致用户无法获取该数据对象，出现内存溢出，因此在确定需要从数据库服务器中读取一个所述数据对象标识对应的数据对象时，执行以下操作：

首先，确定该所述数据对象标识对应的数据对象占用内存空间的大小值。

其次，将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行比较。

具体地，所述将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行比较，具体包括：

将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行作差运算，得到差的数值，并判断所述得到的差的数值是否大于设定的数值；

当所述得到的差的数值大于设定的数值，则确定的大小值大于本地内存能够存放数据对象的空间容量值；当所述得到的差的数值不大于设定的数值，则确定的大小值不大于本地内存能够存放数据对象的空间容量值。

第三，根据比较结果，选择执行操作。

具体地，当所述确定的大小值大于本地内存能够存放数据对象的空间容量值时，执行将读取到的数据对象写入内存中的操作；

当所述确定的大小值不大于本地内存能够存放数据对象的空间容量值时，发出异常告警消息并停止操作。

具体地，所述将读取到的数据对象写入内存中，具体包括：

首先，按照读取数据对象的顺序，将得到的数据对象存储在数组类型的队列中。

例如：从数据库服务器中逐条读取数据对象标识对应的数据对象，并将读取到的数据对象依次写入Map类型数组中。

其次，将得到的数据类型的队列写入内存中。

例如：依次将Map类型数组中包含的数据对象添加至内存的List类型数组中。

步骤1022：判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则执行步骤1023；否则，执行步骤1024。

其中，所述设定的阈值是为了防止内存中剩余的空间容量较小导致出现内存溢出，这里设定的阈值可以根据经验确定，也可以根据需要确定，不做具体限定。

在实际应用中，为了避免内存溢出，将确定的阈值通过以下方式写入内存中，在对内存执行写入操作时使用：

第一步：根据JAVA_HOME变量找到JDK目录；

第二步：在确定的JDK的bin目录下执行java–fullversion语句，并获取版本信息。

例如：java full version"J2RE1.5.0IBM AIX buildpap64devifx-20110211c(SR12FP3+IZ94331)"

第三步：执行第二步之后，从lib目录得到core.jar文件。

第四步：根据得到的core.jar文件，查找到对应的src.jar文件，进一步得到List类型源程序。

第五步：在得到List类型源程序之后，通过编辑器中对应的版本，修改并编译List类型的容量扩展方法，根据经验对内部数组大小设置阈值。

例如：if(newcount>1048576){

throw new Runtime Exception("字符串对象太大["+newcount+"]″);}

第六步：把修改后的List类打包到core.jar文件。

第七步：将打包后的core.jar文件覆盖JDK中原来的core.jar文件，并重启应用服务器，完成对确定的阈值的写入。

这样实现了使用自定义的List类型替换JDK原有类型，在新的List类型中是此案对数组长度阈值的限定，避免了数组长度无限增长导致内存溢出的问题。

步骤1023：停止读取下一个数据对象标识对应的数据对象，执行步骤103。

步骤1024：继续读取下一个数据对象标识对应的数据对象，返回执行步骤1021。

步骤103：在将得到的数据类型的队列写入内存中之后，对写入内存中的数据对象进行渲染处理，并发送给客户端。

通过本发明实施例一的方案，在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息，并在从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中之后，执行判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则停止读取下一个数据对象标识对应的数据对象；否则，继续读取下一个数据对象标识对应的数据对象，与现有技术相比，限制了写入内存中数据对象的数量，既避免了内存申请过程中出现溢出的情况，又可以对内存溢出进行快速定位，提高了Java应用服务器的工作效率，提升了Java应用服务器系统的稳定性和可靠性。

实施例二：

如图2所示，为本发明实施例二的一种对内存溢出进行控制的设备的结构示意图，所述设备包括：发送模块11和控制模块12，其中：

发送模块11，用于在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息；

控制模块12，用于针对每一个待读取数据对象标识对应的数据对象，执行以下操作：

从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中；

判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则停止读取下一个数据对象标识对应的数据对象；否则，继续读取下一个数据对象标识对应的数据对象。

较优地，所述设备还包括：比较模块13，其中：

比较模块13，用于从数据库服务器中读取一个所述数据对象标识对应的数据对象之后，将读取到的数据对象写入内存中之前，确定该所述数据对象标识对应的数据对象占用内存空间的大小值，并将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行比较；

当所述确定的大小值大于本地内存能够存放数据对象的空间容量值时，触发控制模块；

当所述确定的大小值不大于本地内存能够存放数据对象的空间容量值时，发出异常告警消息并停止操作。

具体地，所述比较模块13，具体用于将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行作差运算，得到差的数值，并判断所述得到的差的数值是否大于设定的数值；

当所述得到的差的数值大于设定的数值，则确定的大小值大于本地内存能够存放数据对象的空间容量值；当所述得到的差的数值不大于设定的数值，则确定的大小值不大于本地内存能够存放数据对象的空间容量值。

所述控制模块12，具体用于按照读取数据对象的顺序，将得到的数据对象存储在数组类型的队列中，并将得到的数据类型的队列写入内存中。

较优地，所述设备还包括：处理模块14，其中：

处理模块14，用于在将得到的数据类型的队列写入内存中之后，对写入内存中的数据对象进行渲染处理，并发送给客户端。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种对内存溢出进行控制的方法，其特征在于，包括：

在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息；

针对每一个待读取数据对象标识对应的数据对象，执行以下操作：

从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中；

判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则停止读取下一个数据对象标识对应的数据对象；否则，继续读取下一个数据对象标识对应的数据对象。

2.如权利要求1所述的方法，其特征在于，所述从数据库服务器中读取一个所述数据对象标识对应的数据对象之后，将读取到的数据对象写入内存中之前，所述方法还包括：

确定该所述数据对象标识对应的数据对象占用内存空间的大小值；

将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行比较；

当所述确定的大小值大于本地内存能够存放数据对象的空间容量值时，执行将读取到的数据对象写入内存中的操作；

当所述确定的大小值不大于本地内存能够存放数据对象的空间容量值时，发出异常告警消息并停止操作。

3.如权利要求2所述的方法，其特征在于，所述将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行比较，具体包括：

将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行作差运算，得到差的数值；

判断所述得到的差的数值是否大于设定的数值；

当所述得到的差的数值大于设定的数值，则确定的大小值大于本地内存能够存放数据对象的空间容量值；当所述得到的差的数值不大于设定的数值，则确定的大小值不大于本地内存能够存放数据对象的空间容量值。

4.如权利要求1所述的方法，其特征在于，所述将读取到的数据对象写入内存中，具体包括：

按照读取数据对象的顺序，将得到的数据对象存储在数组类型的队列中；

将得到的数据类型的队列写入内存中。

5.如权利要求4所述的方法，其特征在于，在将得到的数据类型的队列写入内存中之后，所述方法还包括：

对写入内存中的数据对象进行渲染处理，并发送给客户端。

6.一种对内存溢出进行控制的设备，其特征在于，包括：

发送模块，用于在接收到携带了至少一个数据对象标识的写入内存消息时，根据所述数据对象标识向数据库服务器发送数据查询消息；

控制模块，用于针对每一个待读取数据对象标识对应的数据对象，执行以下操作：

从数据库服务器中读取一个所述数据对象标识对应的数据对象，并将读取到的数据对象写入内存中；

判断本地内存的剩余空间容量值是否小于设定的阈值，若小于，则停止读取下一个数据对象标识对应的数据对象；否则，继续读取下一个数据对象标识对应的数据对象。

7.如权利要求6所述的设备，其特征在于，所述设备还包括：

比较模块，用于从数据库服务器中读取一个所述数据对象标识对应的数据对象之后，将读取到的数据对象写入内存中之前，确定该所述数据对象标识对应的数据对象占用内存空间的大小值，并将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行比较；

当所述确定的大小值大于本地内存能够存放数据对象的空间容量值时，触发控制模块；

当所述确定的大小值不大于本地内存能够存放数据对象的空间容量值时，发出异常告警消息并停止操作。

8.如权利要求7所述的设备，其特征在于，

所述比较模块，具体用于将所述确定的大小值与本地内存能够存放数据对象的空间容量值进行作差运算，得到差的数值，并判断所述得到的差的数值是否大于设定的数值；

当所述得到的差的数值大于设定的数值，则确定的大小值大于本地内存能够存放数据对象的空间容量值；当所述得到的差的数值不大于设定的数值，则确定的大小值不大于本地内存能够存放数据对象的空间容量值。

9.如权利要求6所述的设备，其特征在于，

所述控制模块，具体用于按照读取数据对象的顺序，将得到的数据对象存储在数组类型的队列中，并将得到的数据类型的队列写入内存中。

10.如权利要求9所述的设备，其特征在于，所述设备还包括：

处理模块，用于在将得到的数据类型的队列写入内存中之后，对写入内存中的数据对象进行渲染处理，并发送给客户端。