CN103440325B - 高效、多并发、自适用数据库的运行方法 - Google Patents

高效、多并发、自适用数据库的运行方法 Download PDF

Info

Publication number
CN103440325B
CN103440325B CN201310391415.1A CN201310391415A CN103440325B CN 103440325 B CN103440325 B CN 103440325B CN 201310391415 A CN201310391415 A CN 201310391415A CN 103440325 B CN103440325 B CN 103440325B
Authority
CN
China
Prior art keywords
database
buffer pool
user
private
connector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201310391415.1A
Other languages
English (en)
Other versions
CN103440325A (zh
Inventor
熊仕勇
周敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Kang Shitai Technology Co. Ltd.
Original Assignee
Chongqing Kang Shitai Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Kang Shitai Technology Co Ltd filed Critical Chongqing Kang Shitai Technology Co Ltd
Priority to CN201310391415.1A priority Critical patent/CN103440325B/zh
Publication of CN103440325A publication Critical patent/CN103440325A/zh
Application granted granted Critical
Publication of CN103440325B publication Critical patent/CN103440325B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开一种高效、多并发、自适用数据库的运行方法，其特征在于：包括搭建数据库和至少一个用户终端，连接器获取用户终端发来的登录账号，适配器，确定用户常用数据库类型；连接器调取相应的数据库内容到专用缓冲池；用户查找其习惯查找的习惯信息时，缓冲池从专用缓冲池调取相应的内容，存入专用缓冲池中该用户的专用数据库，用户直接从专用数据库获取习惯信息；当用户查找的非习惯信息未被送入专用缓冲池，缓冲池从共享缓冲池调取相应的非习惯内容，用户直接从缓冲池获取非习惯信息。本发明的显著效果是：能降低数据库的负荷，提高系统稳定性和运行效率。

Description

高效、多并发、自适用数据库的运行方法
技术领域
本发明属于一种数据库信息采集及处理技术，具体地说，是一种高效、多并发、自适用数据库的运行方法。
背景技术
随着计算机信息技术的发展，各种应用系统都将数据存储在数据库中，因此，系统将非常频繁的读和写数据库，系统每次对数据库的读写都必须经历首先根据数据库用户名和密码与数据库建立连接、再在此连接上创建可操作对象、然后才能操作数据，操作完成后还必须手动关闭可操作对象和关闭数据库连接等步骤，下一次对数据库的读写操作同样要周而复始的经历此过程。在此过程中，与数据库建立连接是一件既消耗资源又费时的工作，而随着系统的运行，数据库的用户名和密码随时可能修改，导致系统运行缓慢及维护不易。其次用户在与数据库连接成功后必须写程序创建可操作对象，在数据库操作完后必须手动关闭可操作对象和数据库连接，周而复始，会产生大量重复代码从而占用了系统资源，导致系统运行缓慢，如果一旦没有关闭可操作对象和数据库连接，则会产生数据库连接泄漏，极大的占用了数据库的连接资源，导致数据库连接数急剧上升，造成后续操作连接不上数据库甚至导致系统崩溃。另外，用户每次操作数据库则申请使用一个连接，这个过程是一对一的操作，例如现在有10个并发需要操作数据库，则必须建立10个连接，当系统的并发量大的时候，则系统的连接数很快用完，同样导致后续操作不能访问数据库。因此，减少重复代码量，提高系统稳定性和运行效率，特别是提高系统并发操作数据库的能力是一个目前待解决的问题。
发明内容
本发明的目的是提供一种高效、多并发、自适用数据库的运行方法，能减少重复代码量，降低数据库的负荷，提高系统稳定性和运行效率。
为达到上述目的，本发明提供了一种高效、多并发、自适用数据库，包括数据库和至少一个用户终端，其关键在于：所述数据库连接有连接器(3)，该连接器还连接有适配器；
用户终端只需登录连接器，不需要直接登录数据库，就可以访问数据库中的数据，大幅降低了数据库的工作量。
所述连接器中设置有缓冲池、专用缓冲池和共享缓冲池，其中缓冲池与所有所述用户终端相连接，该缓冲池分别于所述专用缓冲池和共享缓冲池连接，专用缓冲池和共享缓冲池与所述数据库相连接。
专用缓冲池和共享缓冲池的总容量不变，但连接器可根据专用缓冲池和共享缓冲池的占用率调节二者的容量大小关系。
所述适配器中存储有用户登录账号及登录的历史记录。
所述高效、多并发、自适用数据库的运行方法，其关键在于：是按以下工作流程进行的：
步骤a：连接器获取用户终端发来的登录账号，并发送给适配器，连接器还在专用缓冲池中建立该用户的专用数据库；
步骤b：适配器根据登录账号查询用户历史查询记录，确定用户常用数据库类型；
步骤c：连接器根据数据库类型从数据库调取相应的数据库内容到专用缓冲池；
步骤d：当用户查找其习惯查找的习惯信息时，缓冲池从专用缓冲池调取相应的内容，存入专用缓冲池中该用户的专用数据库，用户直接从专用数据库获取习惯信息；当用户查找的非习惯信息未被送入专用缓冲池，缓冲池从共享缓冲池调取相应的非习惯内容，用户直接从缓冲池获取非习惯信息。
连接器还可以将最新最热的数据库信息放入共享缓冲池，供众多用户直接同时登录该共享缓冲池。
当用户终端发出退出登录信息后，连接器删除该用户在专用缓冲池的专用数据库。
本发明的显著效果是：提供了一种高效、多并发、自适用数据库的运行方法，通过连接器和适配器读取用户配置文件中指定的数据库用户名和密码与指定的数据库建立多个连接，将获得的空闲连接放入连接缓冲池备用，节省了用户与数据库的连接时间，并且用户可随时更改数据库类型以及数据库的用户名和密码；其次系统根据用户操作数据库的类型和频率，建立专用操作池和共享操作池，在池内建立待操作指令队列，将用户所有的操作指令放入各自的待操作指令队列中，有多个指令执行器从操作指令队列中取出执行，在保证了所有指令都能执行的同时又提高了操作效率；对每个连接，采用一对多的操作方式，即一个连接上可同时创建多个可操作对象，如10个，20个甚至多达100个，如有10个连接，则同时进行的操作有10×100＝1000个，极大的减少了与数据库的连接数同时又提高了系统的并发量；另外，系统只对外提供一个命令接口和返回操作结果接口，数据库的连接操作以及资源回收等问题用户不用关心，这样简化了用户的操作，减少了重复代码量又提高了系统的运行效率。
附图说明
图1是本发明的结构框图。
具体实施方式
下面结合附图和具体对本发明作进一步详细说明。
如图1所示，一种高效、多并发、自适用数据库的运行方法，
步骤a：搭建高效、多并发、自适用数据库，包括传统意义的数据库1和至少一个用户终端2，所述数据库1连接有连接器3，该连接器3还连接有适配器4；适配器4中存储有用户登录账号及登录的历史记录。
所述连接器3中设置有缓冲池31、专用缓冲池32和共享缓冲池33，其中缓冲池31与所有所述用户终端2相连接，该缓冲池31分别于所述专用缓冲池32和共享缓冲池33连接，专用缓冲池32和共享缓冲池33与所述数据库1相连接。
高效、多并发、自适用的数据库是按以下工作流程进行的：
步骤b：连接器3获取用户终端2发来的登录账号，并发送给适配器4，连接器3还在专用缓冲池32中建立该用户的专用数据库；
步骤c：适配器4根据登录账号查询用户历史查询记录，确定用户常用数据库类型；
步骤d：连接器3根据数据库类型从数据库1调取相应的数据库内容到专用缓冲池32；
步骤e：当用户查找其习惯查找的习惯信息时，缓冲池31从专用缓冲池32调取相应的内容，存入专用缓冲池32中该用户的专用数据库，用户直接从专用数据库获取习惯信息；当用户查找的非习惯信息未被送入专用缓冲池32，缓冲池31从共享缓冲池32调取相应的非习惯内容，用户直接从缓冲池31获取非习惯信息。
当用户终端2发出退出登录信息后，连接器3删除该用户在专用缓冲池32的专用数据库。

Claims (2)

1.一种高效、多并发、自适用数据库的运行方法，其特征在于：是按以下工作流程进行的：
步骤a：搭建高效、多并发、自适用的数据库，包括数据库(1)和至少一个用户终端(2)，所述数据库(1)连接有连接器(3)，该连接器(3)还连接有适配器(4)，所述适配器(4)中存储有用户登录账号及登录的历史记录；
所述连接器(3)中设置有缓冲池(31)、专用缓冲池(32)和共享缓冲池(33)，其中缓冲池(31)与所有所述用户终端(2)相连接，该缓冲池(31)分别于所述专用缓冲池(32)和共享缓冲池(33)连接，专用缓冲池(32)和共享缓冲池(33)与所述数据库(1)相连接；
步骤b：连接器(3)获取用户终端(2)发来的登录账号，并发送给适配器(4)，连接器(3)还在专用缓冲池(32)中建立该用户的专用数据库；
步骤c：适配器(4)根据登录账号查询用户历史查询记录，确定用户常用数据库类型；
步骤d：连接器(3)根据数据库类型从数据库(1)调取相应的数据库内容到专用缓冲池(32)；
步骤e：当用户查找其习惯查找的习惯信息时，缓冲池(31)从专用缓冲池(32)调取相应的内容，存入专用缓冲池(32)中该用户的专用数据库，用户直接从专用数据库获取习惯信息；当用户查找的非习惯信息未被送入专用缓冲池(32)，缓冲池(31)从共享缓冲池(32)调取相应的非习惯内容，用户直接从缓冲池(31)获取非习惯信息。
2.根据权利要求1所述高效、多并发、自适用数据库的运行方法，其特征在于：当用户终端(2)发出退出登录信息后，连接器(3)删除该用户在专用缓冲池(32)的专用数据库。
CN201310391415.1A 2013-09-02 2013-09-02 高效、多并发、自适用数据库的运行方法 Expired - Fee Related CN103440325B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310391415.1A CN103440325B (zh) 2013-09-02 2013-09-02 高效、多并发、自适用数据库的运行方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310391415.1A CN103440325B (zh) 2013-09-02 2013-09-02 高效、多并发、自适用数据库的运行方法

Publications (2)

Publication Number Publication Date
CN103440325A CN103440325A (zh) 2013-12-11
CN103440325B true CN103440325B (zh) 2017-05-24

Family

ID=49694018

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310391415.1A Expired - Fee Related CN103440325B (zh) 2013-09-02 2013-09-02 高效、多并发、自适用数据库的运行方法

Country Status (1)

Country Link
CN (1) CN103440325B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105224613A (zh) * 2015-09-17 2016-01-06 西安未来国际信息股份有限公司 基于数据联邦技术的异构数据源整合系统及其整合方法
CN109308293B (zh) * 2018-12-07 2021-09-24 广东中鹏热能科技有限公司 大并发数据库的分库分表方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1584878A (zh) * 2004-06-04 2005-02-23 谢成火 移动终端浏览网络资源的方法
CN101008952A (zh) * 2007-01-30 2007-08-01 华为技术有限公司 一种持久层生成方法及装置
CN101499095A (zh) * 2009-03-11 2009-08-05 南京联创科技股份有限公司 用于数据共享平台的构建缓冲的方法
CN202101699U (zh) * 2011-06-22 2012-01-04 上海思博源冷链科技有限公司 一种车载冷链监管系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1584878A (zh) * 2004-06-04 2005-02-23 谢成火 移动终端浏览网络资源的方法
CN101008952A (zh) * 2007-01-30 2007-08-01 华为技术有限公司 一种持久层生成方法及装置
CN101499095A (zh) * 2009-03-11 2009-08-05 南京联创科技股份有限公司 用于数据共享平台的构建缓冲的方法
CN202101699U (zh) * 2011-06-22 2012-01-04 上海思博源冷链科技有限公司 一种车载冷链监管系统

Also Published As

Publication number Publication date
CN103440325A (zh) 2013-12-11

Similar Documents

Publication Publication Date Title
US10810208B2 (en) Efficient evaluation of queries with multiple predicate expressions
US9143562B2 (en) Managing transfer of data from a source to a destination machine cluster
US9075629B2 (en) Multi-phase resume from hibernate
US10474658B2 (en) User-defined loading of data onto a database
US9298774B2 (en) Changing the compression level of query plans
US20090234795A1 (en) Limiting deduplcation based on predetermined criteria
CN105183852A (zh) 一种数据库迁移方法和装置
US9009175B2 (en) System and method for database migration and validation
CN103268252A (zh) 基于分布式存储的虚拟化平台系统及其实现方法
CN106528898A (zh) 将非关系型数据库数据转换到关系型数据库的方法及装置
US20170083419A1 (en) Data management method, node, and system for database cluster
CN107301214A (zh) 在hive中数据迁移方法、装置及终端设备
CN112015716B (zh) 数据库数据迁移方法、装置、介质和电子设备
Bronson et al. Open data challenges at Facebook
CN103226603A (zh) 一种基于移动存储设备的文件同步更新方法及其系统
US20170322960A1 (en) Storing mid-sized large objects for use with an in-memory database system
CN103440325B (zh) 高效、多并发、自适用数据库的运行方法
US10324933B2 (en) Technique for processing query in database management system
US20190391847A1 (en) Resource Scheduling Method and Related Apparatus
KR102518772B1 (ko) 수집 데이터 자동 처리를 위한 데이터 적재 프로파일링 장치 및 방법
CN104361000A (zh) 基于自建数据库连接池的关系型数据库的访问方法和系统
CN106202239B (zh) 一种cad数据生成shape数据文件方法及系统
Fuzong et al. Dynamic data compression algorithm selection for big data processing on local file system
JP5598319B2 (ja) アプリケーションプログラムの動作管理方法、動作管理装置及び動作管理プログラム
WO2015058628A1 (zh) 文件的访问方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Xiong Shiyong

Inventor after: Zhou Min

Inventor before: Zhang Banglu

Inventor before: Chen Yun

Inventor before: Xiong Shiyong

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20170323

Address after: 400065 Chongqing Nan'an District Huang Jueya Town Fort Park No. 47 unit 5 No. 2-2

Applicant after: Chongqing Kang Shitai Technology Co. Ltd.

Address before: 408400 Chongqing Nanyuan Nanchuan District Wansheng District Road No. 12 5 floor

Applicant before: Chongqing Jiudingshan Science & Technology Co., Ltd.

GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170524

Termination date: 20180902