CN102436443A - 一种提升基于数据库业务系统处理性能的方法 - Google Patents
一种提升基于数据库业务系统处理性能的方法 Download PDFInfo
- Publication number
- CN102436443A CN102436443A CN2010102964889A CN201010296488A CN102436443A CN 102436443 A CN102436443 A CN 102436443A CN 2010102964889 A CN2010102964889 A CN 2010102964889A CN 201010296488 A CN201010296488 A CN 201010296488A CN 102436443 A CN102436443 A CN 102436443A
- Authority
- CN
- China
- Prior art keywords
- buffer memory
- operation layer
- database
- replacement algorithm
- page replacement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种提升基于数据库业务系统处理性能的方法，所述业务系统包括业务SQL、业务层缓存、页面替换算法和数据库，业务系统从数据库中查询到需要的业务数据后，在本地开辟业务层缓存进行存放，当二次查询时，直接从业务层缓存读取；所述业务层缓存的信息通过页面替换算法进行处理，页面替换算法用于业务层缓存存放数据的有效性判断并清除无效数据。本发明能够进一步提升业务系统的处理性能，避免传统方法的局限性、资源利用率低和依赖性，采用现有成熟的缓存技术，页面替换算法来实现，完全从业务系统本身进行改善，不再局限于SQL优化，也完全脱离了数据库的优化，充分利用了业务服务器的资源。
Description
技术领域
本发明涉及一种提升基于数据库业务系统处理性能的方法，具体地说，是一种当基于数据库业务系统采用该方法后，其业务处理性能将得到很大提升，从而增加其吞吐量的方法。
背景技术
一般基于数据库的业务系统包含两部分，一是业务服务器，二是数据库服务器。目前通用做法是在业务层上优化业务处理过程使用的SQL(结构化查询语言)语句和数据库上进行优化其参数配置，从而达到业务系统提升性能的目的。
优化SQL：充分利用主键，索引；仅返回必须数据。
优化数据库参数配置：修改其使用的内存，线程数，页面大小，数据存储方式等。
上述方法虽然对系统的性能有所改善，但是改善存在一定的局限性，仅改善了SQL；业务流程中几乎没有涉及优化，业务服务器资源并没有被充分的利用；仍然是依赖数据库本身的特点来进行优化。
局限性主要体现在业务流程中，仅改善了SQL的执行速度，其他方面并没有进行改善。
资源利用率低主要体现在业务流程几乎没有优化，不能充分利用业务服务器的资源。
依赖性主要体现在所有优化仍然基本数据库进行，仅仅调整了数据库本身的一些参数。
现有技术的诸多缺点，限制了业务系统的处理性能。
发明内容
本发明的目的在于克服现有技术的缺陷而提供一种提升基于数据库业务系统处理性能的方法，它能够进一步提升业务系统的处理性能，避免传统方法的局限性、资源利用率低和依赖性，采用现有成熟的缓存技术，页面替换算法来实现，完全从业务系统本身进行改善，不再局限于SQL优化，也完全脱离了数据库优化，充分利用了业务服务器的资源。
实现上述目的的技术方案是：一种提升基于数据库业务系统处理性能的方法，所述业务系统包括业务SQL、业务层缓存、页面替换算法和数据库，其中，
业务系统从数据库中查询到需要的业务数据后，在本地开辟业务层缓存进行存放，当二次查询时，直接从业务层缓存读取；
所述业务层缓存的信息通过页面替换算法进行处理，页面替换算法用于业务层缓存存放数据的有效性判断并清除无效数据，从而保证有限的业务层缓存能够得到充分的利用。
上述的提升基于数据库业务系统处理性能的方法，其中，
业务查询SQL执行过程如下：
1.若业务层缓存查询到结果直接返回，否则执行下一步；
2.在数据库上进行查询，对结果进行缓存，然后返回结果；
业务非查询SQL执行过程如下：
1.直接对数据库操作；
2.若执行成功，清除对应的缓存结果；
页面替换算法如下：
定时把业务层缓存中过期的结果进行清除，以防止业务层缓存溢出。
上述的提升基于数据库业务系统处理性能的方法，其中，所述业务层缓存使用缓存技术，页面替换算法采用LRU算法。
本发明的有益效果是：本发明同传统的方法相比有如下优点：
现有成熟技术的充分利用：本方法中采用的缓存技术和页面替换算法在一些专用硬件和软件上都有使用，并且在业务层得到充分的使用。
提高资源利用率：业务服务器的资源也得到充分的利用；
无依赖性：性能提升不在仅仅依赖于数据库的性能优化，而是从业务层进行了改善。
附图说明
图1是本发明的提升基于数据库业务系统处理性能的方法的原理图。
具体实施方式
下面将结合附图对本发明作进一步说明。
请参阅图1，图中示出了本发明的一种提升基于数据库业务系统处理性能的方法，业务系统包括业务SQL、业务层缓存、页面替换算法和数据库，
业务系统从数据库中查询到需要的业务数据后，在本地开辟业务层缓存进行存放，当二次查询时，直接从业务层缓存读取；
业务层缓存的信息通过页面替换算法进行处理，页面替换算法用于业务层缓存存放数据的有效性判断并清除无效数据，从而保证有限的业务层缓存能够得到充分的利用。
业务查询SQL执行过程如下：
1.若业务层缓存查询到结果直接返回，否则执行下一步；
2.在数据库上进行查询，对结果进行缓存，然后返回结果；
业务非查询SQL执行过程如下：
1.直接对数据库操作；
2.若执行成功，清除对应的缓存结果；
页面替换算法如下：
定时把业务层缓存中过期的结果进行清除，以防止业务层缓存溢出。
页面替换算法采用LRU(最近最久未使用)算法。
资源利用率高主要是所有的优化都在业务层进行改善，充分利用了业务服务器的资源。
从以上可以看出，本方法完全在业务层上优化，在传统方法之上又进行了进一步的改善，从而达到提升性能的目的。
综上所述，为了避免传统方法的局限性和依赖性，本发明采用现有成熟的缓存技术，页面替换算法来实现，完全从业务系统本身进行改善，不再局限于SQL优化，也完全脱离了数据库，充分利用了业务服务器的资源，从而达到提升业务系统处理性能。
缓存技术在业务层的使用，页面替换算法在业务层的使用，实现完全从业务层上进行优化。
完全从业务层上进行优化：缓存技术和页面替换算法完全使用在业务层，充分利用了业务服务器的资源；
缓存技术在业务层的使用：缓存技术不仅用在专用硬件和软件中，完全可以在实际的业务层得到充分的使用；
页面替换算法在业务层的使用：页面替换算法不仅用在专用硬件和软件中，完全可以在实际的业务层得到充分的使用。
以上实施例仅供说明本发明之用，而非对本发明的限制，有关技术领域的技术人员，在不脱离本发明的精神和范围的情况下，还可以作出各种变换或变型，因此所有等同的技术方案也应该属于本发明的范畴，应由各权利要求所限定。
Claims (3)
1.一种提升基于数据库业务系统处理性能的方法，所述业务系统包括业务SQL、业务层缓存、页面替换算法和数据库，其特征在于，
业务系统从数据库中查询到需要的业务数据后，在本地开辟业务层缓存进行存放，当二次查询时，直接从业务层缓存读取；
所述业务层缓存的信息通过页面替换算法进行处理，页面替换算法用于业务层缓存存放数据的有效性判断并清除无效数据，从而保证有限的业务层缓存能够得到充分的利用。
2.根据权利要求1所述的提升基于数据库业务系统处理性能的方法，其特征在于，
业务查询SQL执行过程如下：
1.若业务层缓存查询到结果直接返回，否则执行下一步；
2.在数据库上进行查询，对结果进行缓存，然后返回结果；业务非查询SQL执行过程如下：
1.直接对数据库操作；
2.若执行成功，清除对应的缓存结果；
页面替换算法如下：
定时把业务层缓存中过期的结果进行清除，以防止业务层缓存溢出。
3.根据权利要求1或2所述的提升基于数据库业务系统处理性能的方法，其特征在于，所述业务层缓存使用缓存技术，页面替换算法采用LRU算法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2010102964889A CN102436443A (zh) | 2010-09-29 | 2010-09-29 | 一种提升基于数据库业务系统处理性能的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2010102964889A CN102436443A (zh) | 2010-09-29 | 2010-09-29 | 一种提升基于数据库业务系统处理性能的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102436443A true CN102436443A (zh) | 2012-05-02 |
Family
ID=45984510
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2010102964889A Pending CN102436443A (zh) | 2010-09-29 | 2010-09-29 | 一种提升基于数据库业务系统处理性能的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102436443A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103064960A (zh) * | 2012-12-31 | 2013-04-24 | 华为技术有限公司 | 数据库查询方法及设备 |
| CN103678621B (zh) * | 2013-12-18 | 2016-08-17 | 上海达梦数据库有限公司 | 基于常量替换的sql语句优化方法 |
| CN106815250A (zh) * | 2015-12-01 | 2017-06-09 | 招商局国际信息技术有限公司 | 一种发送数据的方法、数据服务器以及服务器 |
| CN108536617A (zh) * | 2018-03-30 | 2018-09-14 | 网易宝有限公司 | 缓存管理方法、介质、系统和电子设备 |
-
2010
- 2010-09-29 CN CN2010102964889A patent/CN102436443A/zh active Pending
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103064960A (zh) * | 2012-12-31 | 2013-04-24 | 华为技术有限公司 | 数据库查询方法及设备 |
| CN103064960B (zh) * | 2012-12-31 | 2016-09-07 | 华为技术有限公司 | 数据库查询方法及设备 |
| CN103678621B (zh) * | 2013-12-18 | 2016-08-17 | 上海达梦数据库有限公司 | 基于常量替换的sql语句优化方法 |
| CN106815250A (zh) * | 2015-12-01 | 2017-06-09 | 招商局国际信息技术有限公司 | 一种发送数据的方法、数据服务器以及服务器 |
| CN108536617A (zh) * | 2018-03-30 | 2018-09-14 | 网易宝有限公司 | 缓存管理方法、介质、系统和电子设备 |
| CN108536617B (zh) * | 2018-03-30 | 2021-03-05 | 网易宝有限公司 | 缓存管理方法、介质、系统和电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102163195B (zh) | 一种基于分布式、异构数据库统一视图的查询优化方法 | |
| US10061808B2 (en) | Cached views | |
| CN102521406B (zh) | 海量结构化数据复杂查询任务的分布式查询方法和系统 | |
| CN103617131B (zh) | 一种实现数据缓存的方法 | |
| CN102521405B (zh) | 支持高速加载的海量结构化数据存储、查询方法和系统 | |
| CN101916302B (zh) | 基于哈希表的三维空间数据自适应缓存管理方法及系统 | |
| CN102722582B (zh) | 基于逆向清理的数据整合系统及方法 | |
| CN110389942B (zh) | 一种无垃圾回收的键值分离存储方法和系统 | |
| CN105740445A (zh) | 一种数据库查询方法及装置 | |
| CN104834675A (zh) | 一种基于用户行为分析的查询性能优化方法 | |
| CN104933160B (zh) | 一种面向安全监测业务分析的etl框架设计方法 | |
| CN110309233A (zh) | 数据存储的方法、装置、服务器和存储介质 | |
| CN107577436A (zh) | 一种数据存储方法及装置 | |
| CN102929900A (zh) | 一种字符串匹配的方法及装置 | |
| US11645281B1 (en) | Caching query plans in database systems | |
| CN102436443A (zh) | 一种提升基于数据库业务系统处理性能的方法 | |
| CN103198361B (zh) | 基于多种优化机制的xacml策略评估引擎系统 | |
| CN103631972B (zh) | 一种列访问感知的数据缓存方法及系统 | |
| CN104598394A (zh) | 一种可动态分配的数据缓存方法及系统 | |
| CN105069117A (zh) | 一种基于存储过程的数据流效率提升方法 | |
| CN109508144A (zh) | 一种日志处理方法及相关装置 | |
| CN106959928A (zh) | 一种基于多级缓存结构的流式数据实时处理方法及系统 | |
| CN112069207B (zh) | 一种多表联合查询效率提升方法 | |
| CN1896972A (zh) | 用于虚实地址变换及读写高速缓冲存储器的方法及装置 | |
| CN104391923A (zh) | 一种查询数据集的方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20120502 |