CN112241418B - 分布式数据库预处理方法及代理层、系统、存储介质 - Google Patents
分布式数据库预处理方法及代理层、系统、存储介质 Download PDFInfo
- Publication number
- CN112241418B CN112241418B CN201910647652.7A CN201910647652A CN112241418B CN 112241418 B CN112241418 B CN 112241418B CN 201910647652 A CN201910647652 A CN 201910647652A CN 112241418 B CN112241418 B CN 112241418B
- Authority
- CN
- China
- Prior art keywords
- request
- database
- session
- statement
- client
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007781 pre-processing Methods 0.000 title claims abstract description 118
- 238000000034 method Methods 0.000 title claims abstract description 57
- 230000004044 response Effects 0.000 claims description 51
- 230000008569 process Effects 0.000 claims description 24
- 238000002360 preparation method Methods 0.000 claims description 22
- 239000003795 chemical substances by application Substances 0.000 description 12
- 230000002452 interceptive effect Effects 0.000 description 8
- 230000008901 benefit Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000000243 solution Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2453—Query optimisation
- G06F16/24534—Query rewriting; Transformation
- G06F16/24539—Query rewriting; Transformation using cached or materialised query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
- G06F16/2443—Stored procedures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/146—Markers for unambiguous identification of a particular session, e.g. session cookie or URL-encoding
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Computing Systems (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Mathematical Physics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种分布式数据库预处理方法、数据库代理层、系统及存储介质，通过接收预处理语句对应请求，进而根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，其中，预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；解决了现有技术中分布式数据库预处理的性能和效率均较低的问题，在一定程度上降低了数据库的负荷，提高了分布式数据库预处理的性能和效率，节省了资源。
Description
技术领域
本发明涉及数据库技术领域，更具体地说，涉及一种分布式数据库预处理方法、数据库代理层、系统及存储介质。
背景技术
预处理语句是对准备prepare、执行execute、释放deallocate语句的统称，很像存储过程，是一种运行在后台的SQL语句集合。其与及时SQL语句相比，预处理语句将SQL语句分为2个部分，第一部分为前面相同的命令和结构部分，第二部分为后面的可变数据的部分。在执行SQL语句的时候，首先将前面相同的命令和结构部分(SQL语句中的值用占位符替代，可以视为将SQL语句模板化或者说参数化)发送给数据库，让数据库事先进行一次预处理(主要进行词法语义解析、语句优化、制定执行计划等)，然后执行预处理语句时仅需发送参数的数据。预处理语句的优势在于归纳为：一次预处理、多次运行，省去了解析优化等过程，此外预处理语句能防止SQL注入。
分布式数据库目前已支持预处理，但是对于每次的预处理语句都会下发给底层数据库，并保持当前会话，直到预处理结束才会释放会话，对此会耗费大量的资源，并且在高并发的场景下频繁的下发预处理语句给数据库也会增加数据库的负荷，可见，现有技术中分布式数据库预处理的性能和效率均较低。
发明内容
本发明实施例提供的分布式数据库预处理方法、数据库代理层、系统及存储介质，主要解决的技术问题是现有技术中分布式数据库预处理的性能和效率均较低。
为解决上述技术问题，本发明实施例提供了一种分布式数据库预处理方法，应用于数据库代理层，所述分布式数据库预处理方法包括：
接收预处理语句对应请求；
根据所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识标识进行处理，所述预处理语句缓存库里缓存的会话标识标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话。
本发明实施例还提供了一种数据库代理层，所述数据库代理层包括接收模块以及处理模块；
所述接收模块用于接收预处理语句对应请求；
所述处理模块用于根据所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，所述预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话。
本发明实施例还提供了一种系统，所述系统包括客户端、数据库以及如上述所述的数据库代理层；
所述客户端发送所述预处理语句对应请求至所述数据库代理层；
所述数据库代理层根据接收到的所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，所述预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；
所述数据库保持与所述数据库代理层中的预处理语句缓存库里缓存的会话的连接。
本发明实施例还提供了一种存储介质，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如上述所述的分布式数据库预处理方法的步骤。
本发明的有益效果是：
本发明实施例提供的分布式数据库预处理方法、数据库代理层、系统及存储介质，通过接收预处理语句对应请求，进而根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，其中，预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；解决了现有技术中分布式数据库预处理的性能和效率均较低的问题。也即本发明实施例提供的分布式数据库预处理方法、数据库代理层、系统及存储介质，通过缓存客户端与数据库成功建立过一次连接的预处理语句会话至数据库代理层的预处理语句缓存库内，当数据库代理层接收到预处理语句对应请求时，便可通过预处理语句缓存库内的会话标识进行处理，避免了客户端每次需将预处理语句下发至数据库的现象发生，在极大程度上节省了客户端与数据库的交互操作，降低了数据库的负荷；同时还大大提高了分布式数据库预处理的性能和效率，节省了资源。
本发明其他特征和相应的有益效果在说明书的后面部分进行阐述说明，且应当理解，至少部分有益效果从本发明说明书中的记载变的显而易见。
附图说明
下面将结合附图及实施例对本发明作进一步说明，附图中：
图1为本发明实施例一提供的一种分布式数据库预处理方法的基本流程示意图；
图2为本发明实施例二提供的一种具体的分布式数据库预处理方法的基本流程示意图；
图3为本发明实施例三提供的第一种数据库代理层的结构示意图；
图4为本发明实施例三提供的第二种数据库代理层的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，下面通过具体实施方式结合附图对本发明实施例作进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
实施例一：
为了解决现有技术中分布式数据库预处理的性能和效率均较低的问题，在本发明实施例中，接收预处理语句对应请求，进而根据所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，其中，预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；请参见图1所示，如图1为本实施例提供的分布式数据库预处理方法的基本流程示意图。
S101：接收预处理语句对应请求。
在本实施例中，预处理语句包括但不限于prepare、execute、deallocate语句，事实上，只要属于预处理语句均在本发明的保护的范畴内，对此本发明不做具体限定。
为了更好的理解本发明，本实施例以预处理语句包括prepare、execute、deallocate语句进行示例说明。
S102：根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话。
需要说明的是，本实施例中的会话标识用于唯一标识会话，例如包括但不限于会话号，在实际应用中，需根据具体应用场景做灵活调整。
在本实施例中，当数据库代理层接收到预处理语句对应请求为prepare请求时，根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，包括至少以下两种情况：
情况一，当在预处理语句缓存库里查询到当前的prepare请求会话对应的会话标识时，发送prepare请求的响应消息至客户端。
可以理解的是，当接收到prepare请求，且数据库代理层的预处理语句缓存库里缓存了该prepare请求会话对应的会话标识时，即在预处理语句缓存库里查询到该prepare请求会话对应的会话标识，表示当前的prepare请求已处理过，此时直接发送prepare请求的响应消息至客户端，无需再将prepare请求下发至数据库，节省了客户端与数据库的交互操作，在一定程度上降低了数据库的负荷。应当明确的是，本实施例提及的prepare请求已处理过即表示该prepare请求由客户端已向数据库发送过一次且成功建立过会话；同时还应当明确的是，数据库代理层的预处理语句缓存库里缓存的会话标识所对应的会话始终保持与数据库的连接。
情况二，当在预处理语句缓存库里未查询到当前的prepare请求会话对应的会话标识时，将prepare请求发送至数据库，由数据库处理并发送prepare请求的响应消息至客户端。
可以理解的是，当接收到prepare请求，但数据库代理层的预处理语句缓存库里未缓存该prepare请求会话对应的会话标识时，即在预处理语句缓存库里无法查询到该prepare请求会话对应的会话标识，表示当前的prepare请求未处理过，此时仍需将该prepare请求下发至数据库，由数据库做进一步处理。
在本实施例中，当数据库代理层将prepare请求发送至数据库，由数据库处理并发送prepare请求的响应消息至客户端之时，还包括：缓存当前的prepare请求会话至预处理语句缓存库。
可以理解的是，数据库代理层的预处理语句缓存库里的会话标识通常是在客户端第一次向数据库发送且成功建立会话之时缓存的，这样当客户端再次发起预处理语句对应请求时，便可在数据库代理层的预处理语句缓存库里查询到，无需再将预处理语句对应请求下发至数据库，从而节省客户端与数据库的交互操作。值得注意的是，预处理语句缓存库里的会话标识也可以是在客户端第N次向数据库发送且成功建立会话之时缓存的，其中N大于1，在实际应用中，由开发人员根据实际应用场景做灵活调整。
可选的，当将prepare请求发送至数据库，由数据库处理并发送prepare请求的响应消息至客户端之时，缓存当前的prepare请求会话至预处理语句缓存库，使得下次客户端再发起该prepare请求时，只需与数据库代理层进行交互操作即可。
在本实施例中，当数据库代理层接收到预处理语句对应请求为execute请求时，根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，包括至少以下两种情况：
情况一，当在预处理语句缓存库里查询到空闲的prepare请求会话对应的会话标识时，将execute请求发送至数据库，由数据库处理并发送execute请求的响应消息至客户端。
可以理解的是，当接收到execute请求，且数据库代理层的预处理语句缓存库里存在空闲的prepare请求会话对应的会话标识时，即在预处理语句缓存库里查询到空闲的prepare请求会话对应的会话标识，此时将execute请求发送至数据库，由数据库处理并发送execute请求的响应消息至客户端。
情况二，当在预处理语句缓存库里未查询到空闲的prepare请求会话对应的会话标识时，等待直到有空闲的prepare请求会话，并将execute请求发送至数据库，由数据库处理并发送execute请求的响应消息至客户端。
可以理解的是，当接收到execute请求，但数据库代理层的预处理语句缓存库里不存在空闲的prepare请求会话对应的会话标识时，即在预处理语句缓存库里无法查询到空闲的prepare请求会话对应的会话标识；还可以理解的是，execute请求是基于已处理过的prepare请求的基础上，因此此时需等待直到在预处理语句缓存库里查询到空闲的prepare请求会话对应的会话标识，进一步的，将execute请求发送至数据库，由数据库处理并发送execute请求的响应消息至客户端。
在本实施例中，由数据库处理并发送execute请求的响应消息至客户端，包括：接收由数据库执行execute请求后生成的结果集或失败消息，发送结果集或失败消息至客户端。
可以理解的是，由数据库执行execute请求，并生成的结果集或失败消息发送至数据库代理层，当数据库代理层接收到发送结果集或失败消息时，将该结果集或失败消息再发送至客户端。
在本实施例中，将结果集或失败消息发送至客户端之后，还包括：当接收到预处理语句对应请求为deallocate请求时，处理并发送deallocate请求的响应消息至客户端。
可以理解的是，客户端可根据需求断开与数据库代理层的连接，因此当数据库代理层接收到deallocate请求时，处理并发送deallocate请求的响应消息至客户端。
在本实施例中，处理并发送deallocate请求的响应消息至客户端，包括：释放当前与客户端成功建立的预处理语句对应会话，并发送deallocate请求的响应消息至客户端。可选的，释放当前与客户端成功建立的prepare请求会话，并发送deallocate请求的响应消息至客户端，以进一步节省资源。
本发明实施例提供的分布式数据库预处理方法，通过接收预处理语句对应请求，进而根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，其中，预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；解决了现有技术中分布式数据库预处理的性能和效率均较低的问题。也即本发明实施例提供的分布式数据库预处理方法，通过缓存客户端与数据库成功建立过一次连接的预处理语句会话至数据库代理层的预处理语句缓存库内，当数据库代理层接收到预处理语句对应请求时，便可通过预处理语句缓存库内的会话标识进行处理，避免了客户端每次需将预处理语句下发至数据库的现象发生，在极大程度上降低了数据库的负荷，同时，还大大提高了分布式数据库预处理的性能和效率，节省了资源。
实施例二:
本发明实施例在第一实施例的基础上，以一种具体的分布式数据库预处理方法为例对本发明实施例作进一步的示例说明，请参见图2所示：
S201：客户端发送prepare请求至数据库代理层。
S202：数据库代理层在预处理语句缓存库里缓存的prepare会话中查询是否存在该prepare请求会话。
S203：在查询到时发送prepare请求的响应消息至客户端。
S204：在未查询到时获取链路发送prepare请求至数据库。
S205：数据库发送prepare请求的响应消息至数据库代理层。
S206：数据库代理层发送prepare请求的响应消息至客户端。
S207：客户端发送execute请求至数据库代理层。
S208：数据库代理层在预处理语句缓存库里缓存的prepare会话中查询是否存在空闲的prepare会话。
S209：在查询到时发送execute请求至数据库。
S2010：数据库发送execute请求的响应消息至数据库代理层。
S2011：数据库代理层发送execute请求的响应消息至客户端。
S2012：在未查询到时获取新链路上发送prepare请求至数据库。
S2013：数据库发送prepare请求的响应消息至数据库代理层。
S2014：数据库代理层发送execute请求至数据库。
S2015：数据库发送execute请求的响应消息至数据库代理层。
S2016：数据库代理层发送execute响应消息至客户端。
S2017：客户端发送deallocate请求至数据库代理层。
S2018：数据库代理层发送deallocate请求的响应消息至客户端。
本发明实施例提供的分布式数据库预处理方法，在数据库代理层将prepare请求和execute执行会话对应的会话标识都缓存在预处理语句缓存库里，这样在prepare请求命中时直接返回响应消息，节省了客户端与数据库的交互的操作；在execute请求时命中时获取会话，处理结束时便释放会话，无需一直占用当前会话，提高了会话的利用率，从而在极大程度上提升了分布式数据库预处理的性能。
实施例三：
为了解决现有技术中帧间预测模式下需要同时对运动矢量以及预测残差进行编码，编码性能较低的问题，在本发明实施例中提供了一种数据库代理层，请参见图3所示：
数据库代理层包括接收模块301以及处理模块302，其中：
接收模块301用于接收预处理语句对应请求；
处理模块302用于根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话。
在本实施例中，预处理语句包括但不限于prepare、execute、deallocate语句，事实上，只要属于预处理语句均在本发明的保护的范畴内，对此本发明不做具体限定。
为了更好的理解本发明，本实施例以预处理语句包括prepare、execute、deallocate语句进行示例说明。
需要说明的是，本实施例中的会话标识用于唯一标识会话，例如包括但不限于会话号，在实际应用中，需根据具体应用场景做灵活调整。
在本实施例中，当接收模块301接收到预处理语句对应请求为prepare请求时，处理模块302根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，包括至少以下两种情况：
情况一，当处理模块302在预处理语句缓存库里查询到当前的prepare请求会话对应的会话标识时，发送prepare请求的响应消息至客户端。
可以理解的是，当接收到prepare请求，且数据库代理层的预处理语句缓存库里缓存了该prepare请求会话对应的会话标识时，即处理模块302在预处理语句缓存库里查询到该prepare请求会话对应的会话标识，表示当前的prepare请求已处理过，此时直接发送prepare请求的响应消息至客户端，无需再将prepare请求下发至数据库，节省了客户端与数据库的交互操作，在一定程度上降低了数据库的负荷。应当明确的是，本实施例提及的prepare请求已处理过即表示该prepare请求由客户端已向数据库发送过一次且成功建立过会话；同时还应当明确的是，数据库代理层的预处理语句缓存库里缓存的会话标识所对应的会话始终保持与数据库的连接。
情况二，当处理模块302在预处理语句缓存库里未查询到当前的prepare请求会话对应的会话标识时，将prepare请求发送至数据库，由数据库处理并发送prepare请求的响应消息至客户端。
可以理解的是，当接收到prepare请求，但数据库代理层的预处理语句缓存库里未缓存该prepare请求会话对应的会话标识时，即处理模块302在预处理语句缓存库里无法查询到该prepare请求会话对应的会话标识，表示当前的prepare请求未处理过，此时仍需将该prepare请求下发至数据库，由数据库做进一步处理。
在本实施例中，可选的，请参见图4所示，数据库代理层还包括缓存模块303，当处理模块302将prepare请求发送至数据库，由数据库处理并发送prepare请求的响应消息至客户端之时，缓存模块303缓存当前的prepare请求会话至预处理语句缓存库。
可以理解的是，数据库代理层的预处理语句缓存库里的会话通常是在客户端第一次向数据库发送且成功建立会话之时缓存的，这样当客户端再次发起预处理语句对应请求时，便可在数据库代理层的预处理语句缓存库里查询到，无需再将预处理语句对应请求下发至数据库，从而节省客户端与数据库的交互操作。值得注意的是，预处理语句缓存库里的会话也可以是在客户端第N次向数据库发送且成功建立会话之时缓存的，其中N大于1，在实际应用中，由开发人员根据实际应用场景做灵活调整。
可选的，当处理模块302将prepare请求发送至数据库，由数据库处理并发送prepare请求的响应消息至客户端之时，缓存模块303缓存当前的prepare请求会话至预处理语句缓存库，使得下次客户端再发起该prepare请求时，只需与数据库代理层进行交互操作即可。
在本实施例中，当接收模块301接收到预处理语句对应请求为execute请求时，根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，包括至少以下两种情况：
情况一，当处理模块302在预处理语句缓存库里查询到空闲的prepare请求会话对应的会话标识时，将execute请求发送至数据库，由数据库处理并发送execute请求的响应消息至客户端。
可以理解的是，当接收到execute请求，且数据库代理层的预处理语句缓存库里存在空闲的prepare请求会话对应的会话标识时，即处理模块302在预处理语句缓存库里查询到空闲的prepare请求会话对应的会话标识，此时将execute请求发送至数据库，由数据库处理并发送execute请求的响应消息至客户端。
情况二，当处理模块302在预处理语句缓存库里未查询到空闲的prepare请求会话对应的会话标识时，等待直到有空闲的prepare请求会话，并将execute请求发送至数据库，由数据库处理并发送execute请求的响应消息至客户端。
可以理解的是，当接收到execute请求，但数据库代理层的预处理语句缓存库里不存在空闲的prepare请求会话对应的会话标识时，即处理模块302在预处理语句缓存库里无法查询到空闲的prepare请求会话对应的会话标识；还可以理解的是，execute请求是基于已处理过的prepare请求的基础上，因此此时需等待直到在预处理语句缓存库里查询到空闲的prepare请求会话对应的会话标识，进一步的，将execute请求发送至数据库，由数据库处理并发送execute请求的响应消息至客户端。
在本实施例中，接收模块301还用于接收由数据库执行execute请求后生成的结果集或失败消息，进而处理模块302发送结果集或失败消息至客户端。可以理解的是，由数据库执行execute请求，并生成的结果集或失败消息发送至接收模块301，当接收模块301接收到发送结果集或失败消息时，由处理模块302将该结果集或失败消息再发送至客户端。
在本实施例中，当接收模块301接收到预处理语句对应请求为deallocate请求时，处理模块302处理并发送deallocate请求的响应消息至客户端。可以理解的是，客户端可根据需求断开与数据库代理层的连接，因此当接收模块301接收到deallocate请求时，处理模块302处理并发送deallocate请求的响应消息至客户端。
在本实施例中，处理模块302释放当前与客户端成功建立的预处理语句对应会话，并发送deallocate请求的响应消息至客户端。可选的，处理模块302释放当前与客户端成功建立的prepare请求会话，并发送deallocate请求的响应消息至客户端，以进一步节省资源。
本发明实施例提供的数据库代理层，通过接收模块接收预处理语句对应请求，进而处理模块根据预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，其中，预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；解决了现有技术中分布式数据库预处理的性能和效率均较低的问题。也即本发明实施例提供的数据库代理层，通过缓存客户端与数据库成功建立过一次连接的预处理语句会话至预处理语句缓存库内，当数据库代理层接收到预处理语句对应请求时，便可通过预处理语句缓存库内的会话标识进行处理，避免了客户端每次需将预处理语句下发至数据库的现象发生，所以和现有技术相比，本发明实施例提供的数据库代理层在极大程度上降低了数据库的负荷，提高了分布式数据库预处理的性能和效率，节省了资源。
实施例四：
本发明实施例在第四实施例的基础上，提供了一种系统，该系统包括客户端、数据库以及数据库代理层，其中：
客户端发送预处理语句对应请求至数据库代理层；
数据库代理层根据接收到的预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；
数据库保持与数据库代理层中的预处理语句缓存库里缓存的会话标识所对应的会话的连接。
值得注意的是，为了不累赘说明，在本实施例中并未完全阐述实施例三中的所有示例，应当明确的是，实施例三中的所有示例均适用于本实施例。
本发明实施例提供的系统，解决了现有技术中分布式数据库预处理的性能和效率均较低的问题，所以和现有技术相比，本发明实施例提供的系统在一定程度上降低了数据库的负荷，提高了分布式数据库预处理的性能和效率，节省了资源。
本发明实施例还提供一种存储介质，存储介质存储有一个或者多个程序，一个或者多个程序可被一个或者多个处理器执行，以实现如上述实施例一、二分布式数据库预处理方法的步骤。
该存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、计算机程序模块或其他数据)的任何方法或技术中实施的易失性或非易失性、可移除或不可移除的介质。存储介质包括但不限于RAM(Random Access Memory，随机存取存储器)，ROM(Read-OnlyMemory，只读存储器)，EEPROM(Electrically Erasable Programmable read onlymemory，带电可擦可编程只读存储器)、闪存或其他存储器技术、CD-ROM(Compact DiscRead-Only Memory，光盘只读存储器)，数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。
显然，本领域的技术人员应该明白，上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件(可以用计算装置可执行的程序代码来实现)、固件、硬件及其适当的组合。在硬件实施方式中，在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分；例如，一个物理组件可以具有多个功能，或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器，如中央处理器、数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。这样的软件可以分布在计算机可读介质上，由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的，术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。此外，本领域普通技术人员公知的是，通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据，并且可包括任何信息递送介质。所以，本发明不限制于任何特定的硬件和软件结合。
以上内容是结合具体的实施方式对本发明实施例所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。
Claims (11)
1.一种分布式数据库预处理方法，其特征在于，应用于数据库代理层，所述分布式数据库预处理方法包括：
接收预处理语句对应请求；
根据所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，所述预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；
当接收到预处理语句对应请求为准备prepare请求时，所述根据所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识所对应的会话进行处理，包括：
当在所述预处理语句缓存库里查询到当前的prepare请求会话对应的会话标识时，发送所述prepare请求的响应消息至所述客户端；
当在所述预处理语句缓存库里未查询到当前的prepare请求会话对应的会话标识时，将所述prepare请求发送至所述数据库，由所述数据库处理并发送所述prepare请求的响应消息至所述客户端。
2.如权利要求1所述的分布式数据库预处理方法，其特征在于，所述将所述prepare请求发送至数据库，由所述数据库处理并发送所述prepare请求的响应消息至所述客户端之时，还包括：
缓存所述当前的prepare请求会话对应的会话标识至所述预处理语句缓存库。
3.如权利要求1-2任一项所述的分布式数据库预处理方法，其特征在于，当接收到预处理语句对应请求为执行execute请求时，所述根据所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，包括：
当在所述预处理语句缓存库里查询到空闲的prepare请求会话对应的会话标识时，将所述execute请求发送至所述数据库，由所述数据库处理并发送所述execute请求的响应消息至所述客户端；
当在所述预处理语句缓存库里未查询到空闲的prepare请求会话对应的会话标识时，等待直到有空闲的prepare请求会话，并将所述execute请求发送至所述数据库，由所述数据库处理并发送所述execute请求的响应消息至所述客户端。
4.如权利要求3所述的分布式数据库预处理方法，其特征在于，所述由所述数据库处理并发送所述execute请求的响应消息至所述客户端，包括：
接收由所述数据库执行所述execute请求后生成的结果集或失败消息，发送所述结果集或失败消息至所述客户端。
5.如权利要求4所述的分布式数据库预处理方法，其特征在于，所述将所述结果集或失败消息发送至所述客户端之后，还包括：
当接收到预处理语句对应请求为释放deallocate请求时，处理并发送所述deallocate请求的响应消息至所述客户端。
6.如权利要求5所述的分布式数据库预处理方法，其特征在于，所述处理并发送所述deallocate请求的响应消息至所述客户端，包括：
释放当前与所述客户端建立的预处理语句对应会话，并发送所述deallocate请求的响应消息至客户端。
7.一种数据库代理节点，其特征在于，所述数据库代理节点包括接收模块以及处理模块；
所述接收模块用于接收预处理语句对应请求；
所述处理模块用于根据所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，所述预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；
其中，所述处理模块还用于当在所述预处理语句缓存库里查询到当前的prepare请求会话对应的会话标识时，发送所述prepare请求的响应消息至所述客户端；
所述处理模块还用于当在所述预处理语句缓存库里未查询到当前的prepare请求会话对应的会话标识时，将prepare请求发送至数据库，由数据库处理并发送prepare请求的响应消息至客户端。
8.如权利要求7所述的数据库代理节点，其特征在于，所述数据库代理节点还包括缓存模块，所述缓存模块用于在所述处理模块将所述prepare请求发送至数据库，由所述数据库处理并发送所述prepare请求的响应消息至所述客户端之时，缓存所述当前的prepare请求会话对应的会话标识至所述预处理语句缓存库。
9.如权利要求8所述的数据库代理节点，其特征在于，所述处理模块用于当在所述预处理语句缓存库里查询到空闲的prepare请求会话对应的会话标识时，将execute请求发送至所述数据库，由所述数据库处理并发送所述execute请求的响应消息至所述客户端。
10.一种分布式数据库预处理系统，其特征在于，所述系统包括客户端、数据库以及如权利要求7-9任一项所述的数据库代理节点；
所述客户端发送所述预处理语句对应请求至所述数据库代理节点；
所述数据库代理节点根据接收到的所述预处理语句对应请求以及预处理语句缓存库里缓存的会话标识进行处理，所述预处理语句缓存库里缓存的会话标识所对应的会话为客户端与数据库成功建立过连接的预处理语句会话；
所述数据库保持与所述数据库代理节点中的预处理语句缓存库里缓存的会话标识所对应的会话的连接。
11.一种存储介质，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如权利要求1-6任一项所述的分布式数据库预处理方法的步骤。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910647652.7A CN112241418B (zh) | 2019-07-17 | 2019-07-17 | 分布式数据库预处理方法及代理层、系统、存储介质 |
| JP2022500741A JP2022540128A (ja) | 2019-07-17 | 2020-07-13 | 分散型データベース前処理方法及びプロキシ層、システム、記憶媒体 |
| US17/625,567 US11847116B2 (en) | 2019-07-17 | 2020-07-13 | Distributed database preprocessing method, agent layer, system and storage medium |
| PCT/CN2020/101571 WO2021008475A1 (zh) | 2019-07-17 | 2020-07-13 | 分布式数据库预处理方法及代理层、系统、存储介质 |
| EP20839782.8A EP3989064A4 (en) | 2019-07-17 | 2020-07-13 | DISTRIBUTED DATABASE PREPROCESSING METHOD, AGENT LAYER, SYSTEM AND RECORDING MEDIA |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910647652.7A CN112241418B (zh) | 2019-07-17 | 2019-07-17 | 分布式数据库预处理方法及代理层、系统、存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112241418A CN112241418A (zh) | 2021-01-19 |
| CN112241418B true CN112241418B (zh) | 2023-04-18 |
Family
ID=74167727
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910647652.7A Active CN112241418B (zh) | 2019-07-17 | 2019-07-17 | 分布式数据库预处理方法及代理层、系统、存储介质 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US11847116B2 (zh) |
| EP (1) | EP3989064A4 (zh) |
| JP (1) | JP2022540128A (zh) |
| CN (1) | CN112241418B (zh) |
| WO (1) | WO2021008475A1 (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114880662B (zh) * | 2022-07-12 | 2022-09-23 | 北京安华金和科技有限公司 | 一种基于进程的数据库审计处理方法和装置 |
| US11943316B1 (en) * | 2022-12-02 | 2024-03-26 | Amazon Technologies, Inc. | Database connection multiplexing for prepared statements |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101309514A (zh) * | 2008-06-10 | 2008-11-19 | 中兴通讯股份有限公司 | 会话接入方法及系统 |
| CN105740244A (zh) * | 2014-12-08 | 2016-07-06 | 阿里巴巴集团控股有限公司 | 一种提供会话快捷消息的方法及设备 |
| CN107980128A (zh) * | 2016-11-07 | 2018-05-01 | 深圳中兴力维技术有限公司 | 数据对接动态管理方法及装置 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7024406B1 (en) * | 2001-06-01 | 2006-04-04 | Oracle International Corporation | Driver and method for processing a database statement |
| US7356523B2 (en) | 2002-05-23 | 2008-04-08 | International Business Machines Corporation | Dynamic optimization of prepared statements in a statement pool |
| US8346761B2 (en) * | 2004-08-05 | 2013-01-01 | International Business Machines Corporation | Method and system for data mining for automatic query optimization |
| US8943181B2 (en) * | 2005-11-29 | 2015-01-27 | Ebay Inc. | Method and system for reducing connections to a database |
| US8260761B2 (en) * | 2006-10-20 | 2012-09-04 | Ianywhere Solutions, Inc. | Detecting performance degrading design and algorithm issues in database applications |
| US8996503B2 (en) * | 2010-10-04 | 2015-03-31 | Sybase, Inc. | Query plan optimization for prepared SQL statements |
| US9846724B2 (en) * | 2014-11-13 | 2017-12-19 | Sap Se | Integration of calculation models into SQL layer |
| CN104636131B (zh) * | 2014-12-12 | 2018-07-27 | 北京奇虎科技有限公司 | 一种特殊指令的执行方法及装置 |
| CN104811488B (zh) * | 2015-04-13 | 2018-09-25 | 深信服网络科技（深圳）有限公司 | 基于负载均衡设备的会话保持方法及系统和负载均衡设备 |
| CN105141676A (zh) * | 2015-08-11 | 2015-12-09 | 北京思特奇信息技术股份有限公司 | 一种多服务器下的会话保持共享方法及系统 |
| CN105912949B (zh) * | 2016-04-13 | 2019-11-05 | 北京京东尚科信息技术有限公司 | 数据权限管理方法、数据权限管理系统以及业务管理系统 |
| CN107766378A (zh) * | 2016-08-22 | 2018-03-06 | 南京中兴新软件有限责任公司 | 请求信息的发送方法及装置、分布式数据库系统 |
| US10664473B2 (en) * | 2017-01-30 | 2020-05-26 | International Business Machines Corporation | Database optimization based on forecasting hardware statistics using data mining techniques |
| CN107370818A (zh) * | 2017-07-31 | 2017-11-21 | 郑州云海信息技术有限公司 | 一种分布式会话对象管理方法及系统 |
| US11012429B2 (en) * | 2018-12-05 | 2021-05-18 | Citrix Systems, Inc. | Method to save computational resources by detecting encrypted payload |
| US11216482B2 (en) * | 2019-04-11 | 2022-01-04 | Citrix Systems, Inc. | Systems and methods for access to multi-tenant heterogeneous databases |
-
2019
- 2019-07-17 CN CN201910647652.7A patent/CN112241418B/zh active Active
-
2020
- 2020-07-13 WO PCT/CN2020/101571 patent/WO2021008475A1/zh unknown
- 2020-07-13 EP EP20839782.8A patent/EP3989064A4/en active Pending
- 2020-07-13 JP JP2022500741A patent/JP2022540128A/ja active Pending
- 2020-07-13 US US17/625,567 patent/US11847116B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101309514A (zh) * | 2008-06-10 | 2008-11-19 | 中兴通讯股份有限公司 | 会话接入方法及系统 |
| CN105740244A (zh) * | 2014-12-08 | 2016-07-06 | 阿里巴巴集团控股有限公司 | 一种提供会话快捷消息的方法及设备 |
| CN107980128A (zh) * | 2016-11-07 | 2018-05-01 | 深圳中兴力维技术有限公司 | 数据对接动态管理方法及装置 |
Non-Patent Citations (2)
| Title |
|---|
| Scalable information system using event oriented programming and NoSQL;Vagner José Santana 等;《2015 10th Iberian Conference on Information Systems and Technologies (CISTI)》;20150730;1-6 * |
| 基于Angular和SSH的后勤管理系统的设计与实现;王新江;《中国优秀硕士学位论文全文数据库 信息科技辑》;20170315(第3期);I138-3241 * |
Also Published As
| Publication number | Publication date |
|---|---|
| US20220292096A1 (en) | 2022-09-15 |
| US11847116B2 (en) | 2023-12-19 |
| CN112241418A (zh) | 2021-01-19 |
| JP2022540128A (ja) | 2022-09-14 |
| EP3989064A4 (en) | 2022-08-10 |
| WO2021008475A1 (zh) | 2021-01-21 |
| EP3989064A1 (en) | 2022-04-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107395665B (zh) | 一种区块链业务受理及业务共识方法及装置 | |
| CN112241418B (zh) | 分布式数据库预处理方法及代理层、系统、存储介质 | |
| CN110737388A (zh) | 数据预读方法、客户端、服务器以及文件系统 | |
| US9836516B2 (en) | Parallel scanners for log based replication | |
| CN109471843B (zh) | 一种元数据缓存方法、系统及相关装置 | |
| CN113360577A (zh) | 一种mpp数据库数据处理方法、装置、设备及存储介质 | |
| CN109361778A (zh) | 一种管理会话的方法及终端 | |
| CN109005465B (zh) | 弹幕消息分发方法、装置、设备及存储介质 | |
| CN111221642B (zh) | 一种数据处理方法、装置、存储介质及终端 | |
| CN110753006A (zh) | 一种数据处理方法、装置及电子设备 | |
| CN109582460B (zh) | 一种Redis内存数据的淘汰方法和装置 | |
| CN110413427B (zh) | 订阅数据拉取方法、装置、设备及存储介质 | |
| CN110543349B (zh) | 一种应用启动加速方法、装置及计算机可读存储介质 | |
| CN112784139A (zh) | 查询方法、装置、电子设备和计算机可读介质 | |
| CN111459819A (zh) | 软件测试方法及装置、电子设备、计算机可读介质 | |
| CN111881085B (zh) | 一种读写带宽性能的优化方法及系统 | |
| CN107402852B (zh) | 一种带自适应变更卷的远程复制方法 | |
| CN113032118A (zh) | 用于计算机应用程序的异步操作处理方法和相应的系统 | |
| CN111913815A (zh) | 调用请求的处理方法、装置、电子设备及可读存储介质 | |
| CN111159236A (zh) | 数据处理方法、装置、电子设备及存储介质 | |
| WO2023103752A1 (zh) | 网元版本下载方法、网元、电子设备和存储介质 | |
| CN114553806B (zh) | 一种即时通讯的优化方法、装置、设备及存储介质 | |
| US20100217941A1 (en) | Improving the efficiency of files sever requests in a computing device | |
| CN108958926B (zh) | 一种基于达尔文流媒体服务器的虚拟内存池设计方法 | |
| US20210406067A1 (en) | Distributed storage method, electronic apparatus and non-transitory computer-readable storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20220113 Address after: 100744 602, floor 6, building 6, courtyard 10, KEGU 1st Street, Beijing Economic and Technological Development Zone, Daxing District, Beijing (Yizhuang group, high-end industrial area of Beijing Pilot Free Trade Zone) Applicant after: Jinzhuan Xinke Co.,Ltd. Address before: 518057 Zhongxing building, science and technology south road, Nanshan District hi tech Industrial Park, Guangdong, Shenzhen Applicant before: ZTE Corp. |
|
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |