CN101859298A - 一项高效的数据库存储数据技术 - Google Patents

一项高效的数据库存储数据技术 Download PDF

Info

Publication number
CN101859298A
CN101859298A CN200910081724A CN200910081724A CN101859298A CN 101859298 A CN101859298 A CN 101859298A CN 200910081724 A CN200910081724 A CN 200910081724A CN 200910081724 A CN200910081724 A CN 200910081724A CN 101859298 A CN101859298 A CN 101859298A
Authority
CN
China
Prior art keywords
data
database
warehouse
month
storing technology
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200910081724A
Other languages
English (en)
Inventor
汤海京
苏红泼
孙涛
陈杉杉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING BOYUESHIJI TECHNOLOGY Co Ltd
Original Assignee
BEIJING BOYUESHIJI TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING BOYUESHIJI TECHNOLOGY Co Ltd filed Critical BEIJING BOYUESHIJI TECHNOLOGY Co Ltd
Priority to CN200910081724A priority Critical patent/CN101859298A/zh
Publication of CN101859298A publication Critical patent/CN101859298A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一项高效的数据库存储数据技术，首先设置数据库服务器，以便在数据库中存储数据；然后数据采取的入库机制；数据在数据库中的存储方式；数据库中数据的缓存策略，本发明使得数据能更快速和准确的存取。

Description

一项高效的数据库存储数据技术
技术领域
本发明涉及一项高效的数据库存储数据技术，特别涉及一种采用orcle技术和多级缓存技术方式来实现高效存储数据的技术的方法。
背景技术
数据的存取是软件应用的重要组成部分，数据的快速和准确的存取决定着软件服务的性能。当前还没有一项高效的数据库存储数据技术。
发明内容
本发明所要解决的技术问题是提供一种采用采用orcle技术和多级缓存技术方式来实现高效存储数据的技术的方法。
本发明所述的一项高效的数据库存储数据技术，该方法至少包括如下的步骤：
步骤1：设置数据库服务器，以便在数据库中存储数据。
步骤2：数据采取的入库机制。
步骤3：数据在数据库中的存储方式。
步骤4：数据库中数据的缓存策略。
本发明所述的一项高效的数据库存储数据技术，设置数据库服务器，以便在数据库中存储数据其步骤为：
步骤11：安装数据库到服务器上。
步骤12：对数据库进行配置。
本发明所述的一项高效的数据库存储数据技术，数据采取的入库机制其步骤为：
步骤21：批量入库机制。
步骤22：逐条入库机制。
步骤23：更新的机制为事务处理方式，如成功，提交，否则回滚。
本发明所述的本发明所述的一项高效的数据库存储数据技术，数据在数据库中的存储方式，其步骤为：
步骤31：按照时间月作为分区，主题做二级分区，则每个二级分区上的数据量在10.8万到27万条之间。
步骤32：新闻类在每月的下旬删除掉上个月的二级分区，同时建立下个月的一级分区和二级分区。
步骤33：生活类在本月下旬删除掉前两个月的一级分区。
步骤34：这样就实现了新闻类最多保留两个月的数据和生活类最多保留3个月的数据量的要求。
本发明所述的本发明所述的一项高效的数据库存储数据技术，数据库中数据的缓存策略，其步骤为：
步骤41：设置缓存策略表，根据缓存策略表生成不同主题栏目的需要缓存的列表。
步骤42：每5分钟或30分钟将缓存列表装载进内存。
步骤43：系统根据缓存列表把内容放到数据库和应用服务器的内存中。
步骤44：查询内容时通过缓存列表首先查内容是否在内存中如果不在则从数据库中查询。
本发明涉及的一项高效的数据库存储数据的技术，利用orcle技术和多级缓存技术，来实现高效存储数据，使得数据能更快速和准确的存取。
具体实施方式
本发明的主要步骤如下：
步骤1：设置数据库服务器，以便在数据库中存储数据。
步骤2：数据采取的入库机制。
步骤3：数据在数据库中的存储方式。
步骤4：数据库中数据的缓存策略。
上述步骤1设置数据库服务器，以便在数据库中存储数据的具体步骤如下：
步骤11：安装数据库到服务器上。
步骤12：对数据库进行配置。
上述步骤2数据采取的入库机制的具体步骤如下：
步骤21：批量入库机制。
步骤22：逐条入库机制。
步骤23：更新的机制为事务处理方式，如成功，提交，否则回滚。
上述步骤3数据在数据库中的存储方式的具体步骤如下：
步骤31：按照时间月作为分区，主题做二级分区，则每个二级分区上的数据量在10.8万到27万条之间。
步骤32：新闻类在每月的下旬删除掉上个月的二级分区，同时建立下个月的一级分区和二级分区。
步骤33：生活类在本月下旬删除掉前两个月的一级分区。
步骤34：这样就实现了新闻类最多保留两个月的数据和生活类最多保留3个月的数据量的要求。
上述步骤4数据库中数据的缓存策略的具体步骤如下：
步骤41：设置缓存策略表，根据缓存策略表生成不同主题栏目的需要缓存的列表。
步骤42：每5分钟或30分钟将缓存列表装载进内存。
步骤43：系统根据缓存列表把内容放到数据库和应用服务器的内存中。
步骤44：查询内容时通过缓存列表首先查内容是否在内存中如果不在则从数据库中查询。
上述的技术方案实施时利用orcle技术和多级缓存技术，来实现高效存储数据，使得数据能更快速和准确的存取。
最后所应说明的是，以上实施例仅用以说明而并非限制本发明所描述的技术方案；因此，尽管本说明书参照上述的实施例对本发明已进行了详细的说明，但是，本领域的普通技术人员应当理解，仍然可以对本发明进行修改或者等同地替换；而一切不脱离本发明的精神和范围的技术方案及其改进，其均应涵盖在本发明的权利要求范围当中。

Claims (5)

1.一项高效的数据库存储数据技术，其特征在于：该方法至少包括如下的步骤：
步骤1：设置数据库服务器，以便在数据库中存储数据。
步骤2：数据采取的入库机制。
步骤3：数据在数据库中的存储方式。
步骤4：数据库中数据的缓存策略。
2.根据权利要求1所述的一项高效的数据库存储数据技术，其特征在于：设置数据库服务器，以便在数据库中存储数据，其步骤为：
步骤11：安装数据库到服务器上。
步骤12：对数据库进行配置。
3.根据权利要求1所述的一项高效的数据库存储数据技术，其特征在于：数据采取的入库机制，其步骤为：
步骤21：批量入库机制。
步骤22：逐条入库机制。
步骤23：更新的机制为事务处理方式，如成功，提交，否则回滚。
4.根据权利要求1所述的一项高效的数据库存储数据技术，其特征在于：数据在数据库中的存储方式，其步骤为：
步骤31：按照时间月作为分区，主题做二级分区，则每个二级分区上的数据量在10.8万到27万条之间。
步骤32：新闻类在每月的下旬删除掉上个月的二级分区，同时建立下个月的一级分区和二级分区。
步骤33：生活类在本月下旬删除掉前两个月的一级分区。
步骤34：这样就实现了新闻类最多保留两个月的数据和生活类最多保留3个月的数据量的要求。
5.根据权利要求1所述的一项高效的数据库存储数据技术，其特征在于：数据库中数据的缓存策略，其步骤为：
步骤41：设置缓存策略表，根据缓存策略表生成不同主题栏目的需要缓存的列表。
步骤42：每5分钟或30分钟将缓存列表装载进内存。
步骤43：系统根据缓存列表把内容放到数据库和应用服务器的内存中。
步骤44：查询内容时通过缓存列表首先查内容是否在内存中如果不在则从数据库中查询。
CN200910081724A 2009-04-08 2009-04-08 一项高效的数据库存储数据技术 Pending CN101859298A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200910081724A CN101859298A (zh) 2009-04-08 2009-04-08 一项高效的数据库存储数据技术

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200910081724A CN101859298A (zh) 2009-04-08 2009-04-08 一项高效的数据库存储数据技术

Publications (1)

Publication Number Publication Date
CN101859298A true CN101859298A (zh) 2010-10-13

Family

ID=42945214

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910081724A Pending CN101859298A (zh) 2009-04-08 2009-04-08 一项高效的数据库存储数据技术

Country Status (1)

Country Link
CN (1) CN101859298A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102340537A (zh) * 2011-06-30 2012-02-01 北京新媒传信科技有限公司 一种分布式事务处理方法和装置
CN104504103A (zh) * 2014-12-04 2015-04-08 中移全通系统集成有限公司 一种车辆轨迹点插入性能优化方法及系统、信息采集器、数据库模型
CN112529360A (zh) * 2020-11-12 2021-03-19 贝壳技术有限公司 数据指标统计扩展计算方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102340537A (zh) * 2011-06-30 2012-02-01 北京新媒传信科技有限公司 一种分布式事务处理方法和装置
CN104504103A (zh) * 2014-12-04 2015-04-08 中移全通系统集成有限公司 一种车辆轨迹点插入性能优化方法及系统、信息采集器、数据库模型
CN104504103B (zh) * 2014-12-04 2018-05-15 中移全通系统集成有限公司 一种车辆轨迹点插入性能优化方法及系统、信息采集器、数据库模型
CN112529360A (zh) * 2020-11-12 2021-03-19 贝壳技术有限公司 数据指标统计扩展计算方法及装置

Similar Documents

Publication Publication Date Title
US9645844B2 (en) Systems and methods to optimize multi-version support in indexes
CN106021594A (zh) 数据库表和xml报文的映射处理方法及其系统
WO2016172195A1 (en) System and method for providing access to a sharded database using a cache and a shard topology
CN103617131A (zh) 一种实现数据缓存的方法
CN102455976B (zh) 一种中间件内存管理的方法
US8560584B2 (en) Database partition management
CN107766258B (zh) 内存存储方法与装置、内存查询方法与装置
CN103595776A (zh) 分布式缓存方法及系统
CN102945251A (zh) 一种利用内存数据库技术优化磁盘数据库性能的方法
CN101207799A (zh) 一种节目存储方法、系统及节目点播系统
CN101859298A (zh) 一项高效的数据库存储数据技术
CN101859279A (zh) 一种内存分配、释放方法及装置
US20170212840A1 (en) Providing scalable dynamic random access memory (dram) cache management using tag directory caches
CN102281332A (zh) 分布式缓存阵列及其数据更新方法
US10936500B1 (en) Conditional cache persistence in database systems
CN102902630B (zh) 一种访问本地文件的方法和装置
CN101127041A (zh) 一种业务规则基础数据的缓冲方法
CN101556594A (zh) 一种自动生成城市ip数据的方法
CN102917036A (zh) 一种基于Memcached的分布式缓存数据同步实现方法
CN102298527A (zh) 一种cpe并行升级版本的方法及实现系统
CN110471914B (zh) 一种实时数据处理中维度关联的方法及系统
CN104112024A (zh) 数据库的高性能查询方法和装置
Lee et al. Efficient data broadcast schemes for mobile computing environments with data missing
CN101526959A (zh) 一种数据存储方法和装置
WO2004102390A3 (en) Method and apparatus for mapping memory addresses to corresponding cache entries

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20101013