CN111339170A - 数据处理方法、装置、计算机设备及存储介质 - Google Patents
数据处理方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN111339170A CN111339170A CN201811559135.6A CN201811559135A CN111339170A CN 111339170 A CN111339170 A CN 111339170A CN 201811559135 A CN201811559135 A CN 201811559135A CN 111339170 A CN111339170 A CN 111339170A
- Authority
- CN
- China
- Prior art keywords
- data processing
- micro
- service
- database
- target database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种数据处理方法、装置、计算机设备及存储介质，包括：获取数据处理请求，所述数据处理请求包括数据库标识；根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。通过上述方式，能够提高数据处理效率。
Description
技术领域
本发明涉及数据库技术领域，尤其涉及一种数据处理方法、装置、计算机设备及存储介质。
背景技术
数据库是指数据的集合，现有的数据库包括关系型数据库和非关系型数据库，比如，mysql和Oracle就是比较常见的关系型数据库，但随着互联网的高速发展，传统的关系型数据库在应付超大规模、超大流量以及高并发的动态网站的时候显得力不从心，在这个时候，非关系型数据库得到高速的发展。
但是，不同的非关系型数据库，其增、删、改、查等操作并不相同，开发人员需要花费大量的时间了解不同非关系型数据库的操作方法，即使用不同的语言执行增、删、改、查等操作，降低数据处理效率。
发明内容
基于此，有必要针对上述问题，提出一种数据处理效率高的数据处理方法、装置、计算机设备及存储介质。
一种数据处理方法，所述方法包括：
获取数据处理请求，所述数据处理请求包括数据库标识；
根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
在其中一个实施例中，所述数据处理请求还包括功能标识，所述将所述数据处理请求发送至所述目标数据库微服务，包括：将所述功能标识发送至所述目标数据库微服务，以使所述目标数据库微服务通过根据所述功能标识确定的功能接口执行与所述功能标识对应的数据处理操作。
在其中一个实施例中，所述将所述数据处理请求发送至所述目标数据库微服务，包括：通过微服务注册中心查找所述目标数据库微服务的地址信息；根据所述地址信息，将所述数据处理请求发送至所述目标数据库微服务。
在其中一个实施例中，在所述获取数据处理请求之前，还包括：通过所述微服务注册中心接收微服务注册请求，所述微服务注册请求中包括待注册微服务的微服务标识和所述待注册微服务的地址信息；将所述待注册微服务标识和所述待注册微服务的地址信息进行对应存储，完成所述待注册微服务的注册。
在其中一个实施例中，所述获取数据处理请求，包括：获取所述数据处理请求的发送时间；根据所述发送时间，确定所述数据处理请求的处理序号；当轮询到所述处理序号时，获取所述数据处理请求，进入根据所述数据库标识，确定目标数据库微服务的步骤。
在其中一个实施例中，在所述将所述数据处理请求发送至所述目标数据库微服务之后，还包括：当接收到数据处理异常信息时，根据所述数据处理异常信息生成异常数据存储请求；将所述异常数据存储请求发送至异常数据库，以在所述异常数据库中存储所述数据处理异常信息。
一种数据处理装置，所述装置包括：
获取模块，用于获取数据处理请求，所述数据处理请求包括数据库标识；
确定模块，用于根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
发送模块，用于将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
在其中一个实施例中，所述数据处理请求还包括功能标识，所述发送模块606，包括：功能发送模块，用于将所述功能标识发送至所述目标数据库微服务，以使所述目标数据库微服务通过根据所述功能标识确定的功能接口执行与所述功能标识对应的数据处理操作。
在其中一个实施例中，所述发送模块606，包括：查找模块，用于通过微服务注册中心查找所述目标数据库微服务的地址信息；查找发送模块，用于根据所述地址信息，将所述数据处理请求发送至所述目标数据库微服务。
在其中一个实施例中，所述装置600，还包括：接收模块，用于通过所述微服务注册中心接收微服务注册请求，所述微服务注册请求中包括待注册微服务的微服务标识和所述待注册微服务的地址信息；存储模块，用于将所述待注册微服务标识和所述待注册微服务的地址信息进行对应存储，完成所述待注册微服务的注册。
在其中一个实施例中，所述获取模块602，包括：时间获取模块，用于获取所述数据处理请求的发送时间；序号确定模块，用于根据所述发送时间，确定所述数据处理请求的处理序号；轮训模块，用于当轮询到所述处理序号时，获取所述数据处理请求，进入根据所述数据库标识，确定目标数据库微服务的步骤。
在其中一个实施例中，所述装置600，还包括：异常请求生成模块，用于当接收到数据处理异常信息时，根据所述数据处理异常信息生成异常数据存储请求；异常请求发送模块，用于将所述异常数据存储请求发送至异常数据库，以在所述异常数据库中存储所述数据处理异常信息。
一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行以下步骤：
获取数据处理请求，所述数据处理请求包括数据库标识；
根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行以下步骤：
获取数据处理请求，所述数据处理请求包括数据库标识；
根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
本发明提出了一种数据处理方法、装置、计算机设备及存储介质，首先获取数据处理请求，所述数据处理请求包括数据库标识；然后根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；最后将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。可见，通过上述方式，由于不同的数据库对应不同的数据库微服务，数据库微服务提供了与数据库对应的数据处理接口，使得在对数据库执行相关操作的时候，不用再了解该数据库的操作语言，而直接根据数据处理请求确认对应的数据库微服务，将请求发送至该微服务既可，提高了数据处理的效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
其中：
图1为一个实施例中数据处理方法的实现流程示意图；
图2为一个实施例中数据处理方法的部分实现流程示意图；
图3为一个实施例中数据库微服务在微服务注册中心注册的示意图；
图4为一个实施例中数据处理方法的应用环境示意图；
图5为一个实施例中数据处理方法的实现流程示意图；
图6为一个实施例中数据处理装置的结构框图；
图7为一个实施例中计算机设备的结构框图；
图8为一个实施例中数据处理方法的应用环境图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图1所示，在一个实施例中，提供了一种数据处理方法。该方法应用于服务器。所述服务器为高性能计算机或高性能计算机集群。该数据处理方法具体包括如下步骤：
步骤102，获取数据处理请求，所述数据处理请求包括数据库标识。
所述数据处理请求，用于指示要执行操作的数据库和要该数据库执行的数据处理操作，其中，所述数据处理操作指对数据库进行的操作，所述数据处理操作可以包括但不限于增加数据操作、删除数据操作、查找数据操作和修改数据操作。在本发明实施例中，在数据处理请求中设置数据库标识，用于指示数据库。
所述数据库标识，用于唯一标记一个数据库，或者，唯一标识数据库微服务。例如，某一数据库为Redis数据库，该数据库的数据库标识可以是Redis-SJCC，用于指示Redis数据库；若某一数据库标识为RedisWservice-SJCC，则该数据库标识用于指示数据库微服务。
所述数据库标识，可以由数字和/或字母和/或字符组成，例如，所述数据库标识为01-Redis-SJK，用于指示Redis数据库，或者，数据库标识为01-RedisWservice-SJKWFF，用于指示数据库微服务。
所述数据处理请求，可以由用户通过客户端发送至服务器，即用户在客户端远程操作服务器。例如，用户在客户端进行某一数据库的数据查询操作，于是提交了一个用于查询数据的数据处理请求。
所述数据处理请求，也可以是用户直接操作服务器，即用户在服务器端提交数据处理请求，例如，用户通过服务器端的数据库操作界面(通过该数据操作界面，能够方便用户对多个数据库执行数据处理操作，对多个数据库进行统一管理)输入了查询信息，并点击了查询按钮，通过点击该查询按钮，生成了数据处理请求，以使服务器获取到该数据处理请求。
步骤S104，根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口。
在本发明实施例中，数据库与数据库微服务建立一一对应的关系，即一个数据库唯一对应一个数据库微服务。所以不管数据库标识是用于指示数据库还是数据库微服务，都能对对应的数据库执行对应的数据处理操作。
在本发明实施例中，根据数据库标识，可以唯一确目标数据库微服务。具体的，若数据库标识为用于指示数据库的库标识，则首先根据库标识查找到数据库，然后再根据数据库与数据库微服务的一一对应关系，确定目标数据库微服务，如表1所示；若数据库标识为用于指示数据库微服务的微服务标识，则能够直接查找到与该微服务标识对应的目标数据库微服务，然后再根据数据库微服务与数据库的一一对应关系，确定执行数据处理操作的目标数据库，如表2所示。
表1
表2
在本发明实施例中，所述数据库，包括关系型数据库和非关系型数据库。其中，关系型数据库可以包括但不限于：MySQL、Oracle和Microsoft Access；非关系型数据库可以包括但不限于：Redis、HBbase和MongoDb。
所述数据库微服务，为与数据库对应的，能够实现数据库的数据处理操作的微服务，具体的，该数据库微服务能够提供数据库的数据处理接口，例如，数据库增操作、删操作、查操作和改操作的数据处理接口，以实现增删查改的数据处理功能。所述目标数据库微服务，用于指示根据所述数据库标识确定的数据库微服务。
所述数据处理接口，可以采用restful服务接口。REST原则：网络上的所有事物都被抽象为资源；每个资源都有一个唯一的资源标识符；同一个资源具有多种表现形式(XML，JSON等)(xml,json等)；对资源的各种操作不会改变资源标识符；所有的操作都是无状态的。通过将数据库微服务的数据处理接口采用restful服务接口，能够屏蔽不同语言调用的问题，实现客户端不同语言的调用。
步骤S106，将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
在这里，将数据处理请求发送至目标数据库微服务，目标数据库微服务在接收到该数据处理请求后，通过解析该数据数据处理请求知晓要执行的数据处理操作，然后通过数据处理接口执行该数据处理操作。
在本发明实施例中，所述数据处理请求还包括功能标识，所述将所述数据处理请求发送至所述目标数据库微服务，包括：
将所述功能标识发送至所述目标数据库微服务，以使所述目标数据库微服务通过根据所述功能标识确定的功能接口执行与所述功能标识对应的数据处理操作。
所述功能标识，用于指示需要数据库微服务完成的数据处理操作。
所述功能标识，可以只包括功能任务标识，用于指示数据库微服务完成的数据处理操作，例如，功能标识为01-cha-zeng，其中，01-cha-zeng为功能任务标识，指示数据库微服务完成增加数据的数据处理操作，数据库微服务在识别该功能任务标识之后，首先根据标识信息cha从服务器指示数据区域处获取到新增的资源数据，然后根据标识信息zeng将获取到的资源数据加入数据库，相应的，在该资源数据被加入数据库之后，服务器指示数据区域处删除该资源数据；再如，功能标识为02-cha-shan，指示数据库微服务完成删除数据的数据处理操作，数据库微服务在识别该功能任务标识之后，首先根据标识信息cha从服务器指示数据区域处查询到需要删除的资源数据，然后根据标识信息shan将查询到的资源数据在数据库中删除。其中，指示数据区域，为服务器中的一个存储区域，该指示数据区域用于指示需要增加、删除、修改的数据。
所述功能标识，可以包括功能任务标识和处理数据标识，用于指示数据库微服务对指定数据完成指定的数据处理操作。例如，功能标识为01-zeng-yonghu1，指示数据库微服务将用户1的数据添加至数据库；再如，功能标识为01-shan-yonghu1，指示数据库微服务将用户1的数据在数据库中删除。所述功能标识，还可以更为具体的指示数据位置，例如，功能标识为01-shan-biao1-yonghu1，用户指示数据库删除表1中的用户1的数据。
所述功能标识，可以由数字和/或字母和/或字符组成，例如，所述功能标识为01-zeng-yonghu1。
在本发明实施例中，如图2和图3所示，在步骤102所述获取数据处理请求之前，还包括：
步骤100，通过所述微服务注册中心接收微服务注册请求，所述微服务注册请求中包括待注册微服务的微服务标识和所述待注册微服务的地址信息。
步骤101，将所述待注册微服务标识和所述待注册微服务的地址信息进行对应存储，完成所述待注册微服务的注册。
所述微服务注册中心，用于实现不同数据库微服务的注册，通过数据库微服务的注册，微服务注册中心能够获取到不同数据库微服务的微服务标识和地址信息。
在执行步骤102之前，不同数据库对应的数据库微服务在注册中心进行注册，具体的，数据库微服务在上线的时候(即有新增的数据库的时候)，向微服务注册中心发送微服务注册请求，该微服务注册请求中包括待注册微服务的微服务标识和所述待注册微服务的地址信息，微服务注册中心在接收到该微服务注册请求之后，解析出微服务标识和地址信息，并将其进行存储，这样，后续在有数据处理请求的时候，能够提供已完成注册的数据库微服务的地址信息。
在数据库微服务下线的时候，即与该数据库微服务对应的数据库停止使用的时候，微服务注册中心需要删除该数据库微服务的微服务标识信息和地址信息。具体的，在数据库微服务下线时，向微服务注册中心发送下线请求，所述下线请求包括用于指示所述数据库微服务下线的下线标识，微服务注册中心在解析出该下线标识之后，将该数据库微服务的微服务标识和地址信息进行删除。
可选的，表1和表2内置于微服务管理模块和微服务注册中心。
可选的，表1和表2内置于微服务注册中心，某一数据库微服务在微服务注册中心完成注册之后，微服务注册中心将已完成注册的数据库微服务的库标识、微服务标识和地址信息发送至微服务管理模块，同时，微服务管理模块对接收到的数据库微服务的库标识、微服务标识和地址信息进行存储，这样，当微服务管理模块在接收到数据处理请求的时候，能够直接根据数据处理请求中的数据库标识获取到目标数据库微服务的地址信息，而不用再通过微服务注册中心查找目标数据库微服务的地址信息。
在本发明实施例中，所述将所述数据处理请求发送至所述目标数据库微服务，包括：
通过微服务注册中心查找所述目标数据库微服务的地址信息；
根据所述地址信息，将所述数据处理请求发送至所述目标数据库微服务。
当微服务管理模块中没有存储地址信息时，即微服务注册中心没有将数据库微服务的地址信息发送给微服务管理模块，微服务管理模块在接收到数据处理请求的时候，通过对该数据处理请求进行解析，得到数据库标识，然后将该数据库标识发送至微服务注册中心，微服务注册中心根据该数据库标识查找除目标数据库微服务的地址信息，并将查找到的数据库微服务的地址信息发送给微服务管理模块模块，微服务管理模块模块在获取到目标数据库微服务的地址信息之后，根据该地址信息，将数据处理请求发送至目标数据库微服务。
具体的，所述的数据处理方法可应用于如图4所示的系统，微服务管理模块获取数据处理请求，所述数据处理请求包括数据库标识，然后根据所述数据库标识，通过微服务注册中心查找所述目标数据库微服务的地址信息，在查找到地址信息之后，根据所述地址信息，将所述数据处理请求发送至所述目标数据库微服务。
上述数据处理方法，首先获取数据处理请求，所述数据处理请求包括数据库标识；然后根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；最后将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。可见，通过上述方式，由于不同的数据库对应不同的数据库微服务，数据库微服务提供了与数据库对应的数据处理接口，使得在对数据库执行相关操作的时候，不用再了解该数据库的操作语言，而直接根据数据处理请求确认对应的数据库微服务，将请求发送至该微服务既可，提高了数据处理的效率。
需要说明的是，数据库在完成数据处理请求中要求的数据处理操作的时候，向客户端或微服务管理模块返回结果信息。
在本发明实施例中，在步骤106所述将所述数据处理请求发送至所述目标数据库微服务之后，还包括：
当接收到数据处理异常信息时，根据所述数据处理异常信息生成异常数据存储请求；
将所述异常数据存储请求发送至异常数据库，以在所述异常数据库中存储所述数据处理异常信息。
所述数据处理异常信息，用于指示数据处理操作未能成功完成，由数据库发送给微服务管理模块，所述数据处理异常信息可以包括但不限于：客户端地址信息、数据处理请求的发起时间、数据处理请求的耗时和错误原因描述信息。
在这里，当数据库没有完成数据库处理请求中要求的数据处理操作的时候，根据数据处理异常信息生成异常数据存储请求，并向异常数据库发送异常数据存储请求，以使异常数据库存记录数据处理异常信息，作为异常信息排查使用。
在一个实施例中，如图5所述，提供一种数据处理方法，该方法包括：
步骤502，获取所述数据处理请求的发送时间。
所述发送时间，为服务器(即服务器中的微服务管理模块)接收到数据处理请求的时间。
步骤504，根据所述发送时间，确定所述数据处理请求的处理序号。
根据所述发送时间，确定所述数据处理请求的处理序号，例如，10:00:00接收到的数据处理请求的处理序号为1，10:00:05接收到的数据处理请求的处理序号为2，10:00:20接收到的数据处理请求的处理序号为3。
步骤506，当轮询到所述处理序号时，获取所述数据处理请求，所述数据处理请求包括数据库标识，进入根据所述数据库标识，确定目标数据库微服务的步骤。
若某一数据处理请求的处理序号为N，则需要在轮训到处理序号N的时候才获取该数据处理请求，然后进入步骤508。
需要说明的时候，服务器可以同时处理多条数据处理请求，也可以每次只处理一条数据处理请求。
步骤508，根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口。
步骤510，将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
上述数据处理方法，首先获取所述数据处理请求的发送时间，然后根据所述发送时间，确定所述数据处理请求的处理序号，最后当轮询到所述处理序号时，获取所述数据处理请求，所述数据处理请求包括数据库标识，进入根据所述数据库标识，确定目标数据库微服务的步骤。可见，通过上述方式，当在某一较小的时间段获取到大量数据请求的时候，由于根据处理序号来进行数据请求的处理，所以在一定程度上解决了高并发造成的请求失败的问题，提高了请求成功率。
在一个实施例中，如图6所示，提供一种数据处理装置600，该装置600包括：
获取模块602，用于获取数据处理请求，所述数据处理请求包括数据库标识；
确定模块604，用于根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
发送模块606，用于将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
上述数据处理装置，首先获取数据处理请求，所述数据处理请求包括数据库标识；然后根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；最后将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。可见，通过上述方式，由于不同的数据库对应不同的数据库微服务，数据库微服务提供了与数据库对应的数据处理接口，使得在对数据库执行相关操作的时候，不用再了解该数据库的操作语言，而直接根据数据处理请求确认对应的数据库微服务，将请求发送至该微服务既可，提高了数据处理的效率。
在一个实施例中，所述数据处理请求还包括功能标识，所述发送模块606，包括：
功能发送模块，用于将所述功能标识发送至所述目标数据库微服务，以使所述目标数据库微服务通过根据所述功能标识确定的功能接口执行与所述功能标识对应的数据处理操作。
在一个实施例中，所述发送模块606，包括：
查找模块，用于通过微服务注册中心查找所述目标数据库微服务的地址信息；
查找发送模块，用于根据所述地址信息，将所述数据处理请求发送至所述目标数据库微服务。
在一个实施例中，所述装置600，还包括：
接收模块，用于通过所述微服务注册中心接收微服务注册请求，所述微服务注册请求中包括待注册微服务的微服务标识和所述待注册微服务的地址信息；
存储模块，用于将所述待注册微服务标识和所述待注册微服务的地址信息进行对应存储，完成所述待注册微服务的注册。
在一个实施例中，所述获取模块602，包括：
时间获取模块，用于获取所述数据处理请求的发送时间；
序号确定模块，用于根据所述发送时间，确定所述数据处理请求的处理序号；
轮训模块，用于当轮询到所述处理序号时，获取所述数据处理请求，进入根据所述数据库标识，确定目标数据库微服务的步骤。
在一个实施例中，所述装置600，还包括：
异常请求生成模块，用于当接收到数据处理异常信息时，根据所述数据处理异常信息生成异常数据存储请求；
异常请求发送模块，用于将所述异常数据存储请求发送至异常数据库，以在所述异常数据库中存储所述数据处理异常信息。
图7示出了一个实施例中计算机设备的内部结构图。该计算机设备具体可以是服务器。如图7所示，该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中，存储器包括非易失性存储介质和内存储器。该计算机设备的非易失性存储介质存储有操作系统，还可存储有计算机程序，该计算机程序被处理器执行时，可使得处理器实现数据处理方法。该内存储器中也可储存有计算机程序，该计算机程序被处理器执行时，可使得处理器执行数据处理方法。网络接口用于与外部进行通信。本领域技术人员可以理解，图7中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，本申请提供的数据处理方法可以实现为一种计算机程序的形式，计算机程序可在如图7所示的计算机设备上运行。计算机设备的存储器中可存储组成数据处理装置的各个程序模板。比如，获取模块602、确定模块604以及发送模块606。
一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如下步骤：
获取数据处理请求，所述数据处理请求包括数据库标识；
根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
上述计算机设备，首先获取数据处理请求，所述数据处理请求包括数据库标识；然后根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；最后将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。可见，通过上述方式，由于不同的数据库对应不同的数据库微服务，数据库微服务提供了与数据库对应的数据处理接口，使得在对数据库执行相关操作的时候，不用再了解该数据库的操作语言，而直接根据数据处理请求确认对应的数据库微服务，将请求发送至该微服务既可，提高了数据处理的效率。
在一个实施例中，所述数据处理请求还包括功能标识，所述将所述数据处理请求发送至所述目标数据库微服务，包括：
将所述功能标识发送至所述目标数据库微服务，以使所述目标数据库微服务通过根据所述功能标识确定的功能接口执行与所述功能标识对应的数据处理操作。
在一个实施例中，所述将所述数据处理请求发送至所述目标数据库微服务，包括：
通过微服务注册中心查找所述目标数据库微服务的地址信息；
根据所述地址信息，将所述数据处理请求发送至所述目标数据库微服务。
在一个实施例中，上述计算机程序被所述处理器执行时，还用于执行以下步骤：
通过所述微服务注册中心接收微服务注册请求，所述微服务注册请求中包括待注册微服务的微服务标识和所述待注册微服务的地址信息；
将所述待注册微服务标识和所述待注册微服务的地址信息进行对应存储，完成所述待注册微服务的注册。
在一个实施例中，所述获取数据处理请求，包括：
获取所述数据处理请求的发送时间；
根据所述发送时间，确定所述数据处理请求的处理序号；
当轮询到所述处理序号时，获取所述数据处理请求，进入根据所述数据库标识，确定目标数据库微服务的步骤。
在一个实施例中，上述计算机程序被所述处理器执行时，还用于执行以下步骤：
当接收到数据处理异常信息时，根据所述数据处理异常信息生成异常数据存储请求；
将所述异常数据存储请求发送至异常数据库，以在所述异常数据库中存储所述数据处理异常信息。
一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行如下步骤：
获取数据处理请求，所述数据处理请求包括数据库标识；
根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
上述计算机可读存储介质，首先获取数据处理请求，所述数据处理请求包括数据库标识；然后根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；最后将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。可见，通过上述方式，由于不同的数据库对应不同的数据库微服务，数据库微服务提供了与数据库对应的数据处理接口，使得在对数据库执行相关操作的时候，不用再了解该数据库的操作语言，而直接根据数据处理请求确认对应的数据库微服务，将请求发送至该微服务既可，提高了数据处理的效率。
在一个实施例中，所述数据处理请求还包括功能标识，所述将所述数据处理请求发送至所述目标数据库微服务，包括：
将所述功能标识发送至所述目标数据库微服务，以使所述目标数据库微服务通过根据所述功能标识确定的功能接口执行与所述功能标识对应的数据处理操作。
在一个实施例中，所述将所述数据处理请求发送至所述目标数据库微服务，包括：
通过微服务注册中心查找所述目标数据库微服务的地址信息；
根据所述地址信息，将所述数据处理请求发送至所述目标数据库微服务。
在一个实施例中，上述计算机程序被所述处理器执行时，还用于执行以下步骤：
通过所述微服务注册中心接收微服务注册请求，所述微服务注册请求中包括待注册微服务的微服务标识和所述待注册微服务的地址信息；
将所述待注册微服务标识和所述待注册微服务的地址信息进行对应存储，完成所述待注册微服务的注册。
在一个实施例中，所述获取数据处理请求，包括：
获取所述数据处理请求的发送时间；
根据所述发送时间，确定所述数据处理请求的处理序号；
当轮询到所述处理序号时，获取所述数据处理请求，进入根据所述数据库标识，确定目标数据库微服务的步骤。
在一个实施例中，上述计算机程序被所述处理器执行时，还用于执行以下步骤：
当接收到数据处理异常信息时，根据所述数据处理异常信息生成异常数据存储请求；
将所述异常数据存储请求发送至异常数据库，以在所述异常数据库中存储所述数据处理异常信息。
图8为一个实施例中数据处理方法的应用环境图。参照图8，该数据处理方法应用于数据处理系统。该数据处理系统包括终端802和服务器804。终端802和服务器804通过网络连接，终端802具体可以是台式终端或移动终端，台式终端具体可以是台式电脑，移动终端具体可以是手机、平板电脑、笔记本电脑等中的至少一种。服务器904可以用独立的服务器或者是多个服务器组成的服务器集群来实现。终端802用于将数据处理请求发送至服务器804，服务器804用于获取数据处理请求，所述数据处理请求包括数据库标识；根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
需要说明的是，各个实施例中所述的数据处理方法、数据处理装置、计算机设备和计算机可读存储介质都属于同一发明构思，数据处理方法、数据处理装置、计算机设备和计算机可读存储介质实施例中涉及的内容可相互适用。
上述本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种数据处理方法，其特征在于，所述方法包括：
获取数据处理请求，所述数据处理请求包括数据库标识；
根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
2.如权利要求1所述的方法，其特征在于，所述数据处理请求还包括功能标识，所述将所述数据处理请求发送至所述目标数据库微服务，包括：
将所述功能标识发送至所述目标数据库微服务，以使所述目标数据库微服务通过根据所述功能标识确定的功能接口执行与所述功能标识对应的数据处理操作。
3.如权利要求1所述的方法，其特征在于，所述将所述数据处理请求发送至所述目标数据库微服务，包括：
通过微服务注册中心查找所述目标数据库微服务的地址信息；
根据所述地址信息，将所述数据处理请求发送至所述目标数据库微服务。
4.如权利要求3所述的方法，其特征在于，在所述获取数据处理请求之前，还包括：
通过所述微服务注册中心接收微服务注册请求，所述微服务注册请求中包括待注册微服务的微服务标识和所述待注册微服务的地址信息；
将所述待注册微服务标识和所述待注册微服务的地址信息进行对应存储，完成所述待注册微服务的注册。
5.如权利要求1所述的方法，其特征在于，所述获取数据处理请求，包括：
获取所述数据处理请求的发送时间；
根据所述发送时间，确定所述数据处理请求的处理序号；
当轮询到所述处理序号时，获取所述数据处理请求，进入根据所述数据库标识，确定目标数据库微服务的步骤。
6.如权利要求1至5任一项所述的方法，其特征在于，在所述将所述数据处理请求发送至所述目标数据库微服务之后，还包括：
当接收到数据处理异常信息时，根据所述数据处理异常信息生成异常数据存储请求；
将所述异常数据存储请求发送至异常数据库，以在所述异常数据库中存储所述数据处理异常信息。
7.一种数据处理装置，其特征在于，所述装置包括：
获取模块，用于获取数据处理请求，所述数据处理请求包括数据库标识；
确定模块，用于根据所述数据库标识，确定目标数据库微服务，所述目标数据库微服务提供与所述数据处理请求对应的目标数据库的数据处理接口；
发送模块，用于将所述数据处理请求发送至所述目标数据库微服务，以通过所述目标数据库微服务提供的数据处理接口执行与所述数据处理请求对应的数据处理操作。
8.如权利要求7所述的装置，其特征在于，所述数据处理请求还包括功能标识，所述发送模块，包括：
功能发送模块，用于将所述功能标识发送至所述目标数据库微服务，以使所述目标数据库微服务通过根据所述功能标识确定的功能接口执行与所述功能标识对应的数据处理操作。
9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至6中任一项所述方法的步骤。
10.一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行如权利要求1至6中任一项所述方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811559135.6A CN111339170A (zh) | 2018-12-19 | 2018-12-19 | 数据处理方法、装置、计算机设备及存储介质 |
| PCT/CN2018/123263 WO2020124619A1 (zh) | 2018-12-19 | 2018-12-24 | 数据处理方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811559135.6A CN111339170A (zh) | 2018-12-19 | 2018-12-19 | 数据处理方法、装置、计算机设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111339170A true CN111339170A (zh) | 2020-06-26 |
Family
ID=71100066
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811559135.6A Pending CN111339170A (zh) | 2018-12-19 | 2018-12-19 | 数据处理方法、装置、计算机设备及存储介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN111339170A (zh) |
| WO (1) | WO2020124619A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112488538A (zh) * | 2020-12-04 | 2021-03-12 | 国泰新点软件股份有限公司 | 评价指标的上报处理方法、装置及存储介质 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113138999B (zh) * | 2021-05-12 | 2023-11-17 | 泰康保险集团股份有限公司 | 数据处理方法及装置、计算机存储介质、电子设备 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107665233A (zh) * | 2017-07-24 | 2018-02-06 | 上海壹账通金融科技有限公司 | 数据库数据处理方法、装置、计算机设备和存储介质 |
| CN107862084A (zh) * | 2017-11-28 | 2018-03-30 | 湖北三新文化传媒有限公司 | 基于web服务的数据管理方法、装置及存储介质 |
| CN108255614A (zh) * | 2016-12-28 | 2018-07-06 | 中国移动通信集团公司 | 一种基于微服务架构的接口调用系统及方法 |
| CN108733787A (zh) * | 2018-05-11 | 2018-11-02 | 中国平安人寿保险股份有限公司 | 数据库操作方法、装置、电子设备及存储介质 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060116138A1 (en) * | 2004-11-29 | 2006-06-01 | Argela Technologies | Value added services creation (vasc) platform |
| CN108011768B (zh) * | 2017-12-26 | 2020-09-18 | 杭州电子科技大学 | 一种aop拦截式HBase数据存储微服务架构构建方法 |
| CN108306955B (zh) * | 2018-01-24 | 2021-06-15 | 北京万得嘉瑞汽车技术有限公司 | 一种车载终端大规模互联集群方法 |
| CN108650262B (zh) * | 2018-05-09 | 2020-12-01 | 聚龙股份有限公司 | 一种基于微服务架构的云平台扩展方法及系统 |
-
2018
- 2018-12-19 CN CN201811559135.6A patent/CN111339170A/zh active Pending
- 2018-12-24 WO PCT/CN2018/123263 patent/WO2020124619A1/zh active Application Filing
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108255614A (zh) * | 2016-12-28 | 2018-07-06 | 中国移动通信集团公司 | 一种基于微服务架构的接口调用系统及方法 |
| CN107665233A (zh) * | 2017-07-24 | 2018-02-06 | 上海壹账通金融科技有限公司 | 数据库数据处理方法、装置、计算机设备和存储介质 |
| CN107862084A (zh) * | 2017-11-28 | 2018-03-30 | 湖北三新文化传媒有限公司 | 基于web服务的数据管理方法、装置及存储介质 |
| CN108733787A (zh) * | 2018-05-11 | 2018-11-02 | 中国平安人寿保险股份有限公司 | 数据库操作方法、装置、电子设备及存储介质 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112488538A (zh) * | 2020-12-04 | 2021-03-12 | 国泰新点软件股份有限公司 | 评价指标的上报处理方法、装置及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2020124619A1 (zh) | 2020-06-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11526799B2 (en) | Identification and application of hyperparameters for machine learning | |
| CN106933854B (zh) | 短链接处理方法、装置及服务器 | |
| CN109492019B (zh) | 业务请求响应方法、装置、计算机设备和存储介质 | |
| CN111339171B (zh) | 数据查询的方法、装置及设备 | |
| CN109669980B (zh) | 数据跨库访问方法及装置 | |
| CN111797134A (zh) | 分布式数据库的数据查询方法、装置和存储介质 | |
| CN107918673B (zh) | 订阅数据处理方法、装置、存储介质和计算机设备 | |
| CN107577590B (zh) | 基于数据库服务实时调用虚拟接口的方法及装置 | |
| CN112000903B (zh) | 数据查询方法、装置、计算机设备和存储介质 | |
| CN108415998B (zh) | 应用依赖关系更新方法、终端、设备及存储介质 | |
| CN112883030A (zh) | 数据收集方法、装置、计算机设备和存储介质 | |
| CN104618388A (zh) | 快速注册登录方法及对应的重置服务器、信息服务器 | |
| US10171606B2 (en) | System and method for providing data as a service (DaaS) in real-time | |
| CN111339170A (zh) | 数据处理方法、装置、计算机设备及存储介质 | |
| CN111177121A (zh) | 订单数据反馈方法、装置、计算机设备及存储介质 | |
| CN111400301A (zh) | 一种数据查询方法、装置及设备 | |
| US20180018385A1 (en) | System, data combining method, integration server, data combining program, database system ,database system cooperation method, and database system cooperation program | |
| CN113067853A (zh) | 一种数据推送方法、装置、电子设备及存储介质 | |
| CN111538672A (zh) | 测试案例分层测试方法、计算机设备及计算机可读存储介质 | |
| CN111008220A (zh) | 数据源的动态识别方法及装置、存储介质和电子装置 | |
| CN110765125B (zh) | 一种存储数据的方法及装置 | |
| CN110955460A (zh) | 一种服务进程启动方法、装置、电子设备和存储介质 | |
| CN116340424A (zh) | 报表数据的分存方法、装置、设备及存储介质 | |
| CN110727895A (zh) | 一种敏感词发送方法、装置、电子设备及存储介质 | |
| CN111752964A (zh) | 基于数据接口的数据处理方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |