CN111680313B - 一种数据处理方法、装置、设备及存储介质 - Google Patents
一种数据处理方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN111680313B CN111680313B CN202010511831.0A CN202010511831A CN111680313B CN 111680313 B CN111680313 B CN 111680313B CN 202010511831 A CN202010511831 A CN 202010511831A CN 111680313 B CN111680313 B CN 111680313B
- Authority
- CN
- China
- Prior art keywords
- data processing
- information
- data
- search engine
- authority
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/604—Tools and structures for managing or administering access control systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/40—Transformation of program code
- G06F8/41—Compilation
- G06F8/42—Syntactic analysis
- G06F8/427—Parsing
Abstract
本发明实施例公开了一种数据处理方法、装置、设备及存储介质。其中,方法包括:获取数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息;获取匹配的处理配置信息,确定数据处理请求是否具有数据处理权限;如果数据处理请求具有数据处理权限,则确定对应的目标语法解析器和目标搜索引擎服务器连接;通过目标语法解析器对数据处理信息进行解析,得到对应的数据解析信息;根据数据解析信息和目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取数据处理结果并发送至客户端。本发明实施例避免了几种搜索引擎共用时的差异性,统一了不同搜索引擎服务器的使用姿势和管控流程,对数据处理过程进行规范化。
Description
技术领域
本发明实施例涉及计算机技术领域,尤其涉及一种数据处理方法、装置、设备及存储介质。
背景技术
目前主流的搜索引擎服务器有分布式全文检索引擎Elasticsearch(ES)、企业级搜索引擎服务器Solr以及其它开源搜索引擎服务器。各种搜索引擎服务器各有优缺点。所以在企业内部使用中,依据不同的应用场景,会存在多种搜索引擎服务器共用的情况。
相关技术中,用户需要直接访问不同的搜索引擎服务器,进行数据查询和数据写入等数据处理过程。
但是,上述相关技术的问题在于:由于各种搜索引擎服务器在语法上差异较大,开发人员学习成本较大,对不同搜索引擎服务器的使用姿势也无法统一。如果用户直接访问搜索引擎服务器,需要提供给用户搜索引擎服务器的账号密码,安全性无法保证。不同的搜索引擎服务器在权限控制上无法做到统一管控,若所有数据都可见,这也违反信息安全的准则。此外,搜索引擎服务器在监控时,一般只能做到自身体系内的资源监控,无法从业务维度统一监控。
发明内容
本发明实施例提供一种数据处理方法、装置、设备及存储介质,以统一不同搜索引擎服务器的使用姿势,对数据处理过程进行规范化。
第一方面,本发明实施例提供了一种数据处理方法,包括:
获取客户端发送的数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息;
获取与所述权限验证信息匹配的处理配置信息,根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限;
如果确定所述数据处理请求具有数据处理权限,则根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接;
通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息;
根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端。
第二方面,本发明实施例还提供了一种数据处理装置,包括:
请求获取模块,用于获取客户端发送的数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息;
权限确定模块,用于获取与所述权限验证信息匹配的处理配置信息,根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限;
信息确定模块,用于如果确定所述数据处理请求具有数据处理权限,则根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接;
信息解析模块,用于通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息;
结果发送模块,用于根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端。
第三方面,本发明实施例还提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本发明实施例所述的数据处理方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如本发明实施例所述的数据处理方法。
本发明实施例的技术方案,通过语法解析器解析数据处理信息,将满足某种语法的数据处理信息转换成满足目标搜索引擎的语法的信息,屏蔽了几种搜索引擎共用时的语法差异性,统一了不同搜索引擎服务器的使用姿势;将搜索引擎服务器和账密信息推送到处理配置信息数据库中,无需再提供给客户端,保证了搜索引擎的安全性;将资源权限信息推送到处理配置信息数据库中,使不同客户端的不同请求之间的数据无法互相访问,做到了数据权限隔离,实现了权限统一管理,统一了不同搜索引擎服务器的使用姿势和管控流程,对数据处理过程进行规范化。
附图说明
图1为本发明实施例一提供的一种数据处理方法的流程图;
图2为本发明实施例一提供的又一种数据处理方法的流程图;
图3为本发明实施例二提供的一种数据处理方法的流程图;
图4为本发明实施例三提供的一种数据处理方法的流程图;
图5为本发明实施例四提供的一种数据处理装置的结构示意图;
图6为本发明实施例五提供的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。
另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
实施例一
图1为本发明实施例一提供的一种数据处理方法的流程图。本发明实施例可适用于实现数据处理请求需要几种搜索引擎共用时,统一使用姿势和管控流程的情况,该方法可以由本发明实施例提供的数据处理装置来执行,该装置可采用软件和/或硬件的方式实现,并一般可集成在计算机设备中。例如,服务器。如图1所示,本发明实施例的方法具体包括:
步骤101、获取客户端发送的数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息。
可选的,用户通过客户端发送数据处理请求至服务器。服务器获取客户端发送的数据处理请求。数据处理请求用于请求对搜索引擎服务器中的指定业务的数据资源进行数据查询或者数据写入。数据处理请求携带权限验证信息和数据处理信息。
权限验证信息是用于验证数据处理请求是否具有数据处理权限的信息。预先为每一项业务设置一个权限验证信息。不同业务的权限验证信息不同。用户在发送针对某一项指定业务的数据处理请求时,需要将与该指定业务对应的权限验证信息添加至数据处理请求中,以使服务器可以根据权限验证信息验证数据处理请求是否具有数据处理权限,即验证数据处理请求是否具有针对某一项指定业务的数据资源进行数据处理的权限。
可选的,权限验证信息可以为秘钥。预先为每一项业务设置一个秘钥。不同业务的秘钥不同。
可选的,所述数据处理请求可以是数据查询请求和/或数据写入请求。
数据查询请求用于请求在搜索引擎服务器中的指定业务的数据资源中进行数据查询,获取符合查询条件的数据。数据查询请求携带的数据处理信息包括查询资源名称和查询条件。查询资源名称是与数据查询请求对应的指定业务的数据资源的名称。查询条件是进行数据查询的条件。
数据写入请求用于请求将指定数据写入至搜索引擎服务器中的指定业务的数据资源中。数据写入请求携带的数据处理信息包括写入资源名称和写入数据。写入资源名称是与数据写入请求对应的指定业务的数据资源的名称。写入数据是需要写入至搜索引擎服务器中的指定业务的数据资源中的数据。
可选的,客户端通过远程过程调用(Remote Procedure Call,RPC)访问服务器,发送数据处理请求至服务器。
可选的,所述RPC的实现方式可以有多种,例如可以通过基于NIO的网络通信框架Netty实现,可以通过谷歌开源的跨语言RPC框架gRPC实现,也可以通过Facebook开发的跨语言的RPC框架Thrift实现,本实施例在此不做限定。
步骤102、获取与所述权限验证信息匹配的处理配置信息,根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限。
其中,处理配置信息是针对指定业务的数据资源的数据处理过程的配置信息。
可选的,预先为每一项业务设置一个权限验证信息,为每一项业务设置处理配置信息。建立每一项业务的权限验证信息和处理配置信息之间的匹配关系。根据各项业务的权限验证信息和处理配置信息之间的匹配关系,对各项业务的权限验证信息和处理配置信息进行存储。
可选的,所述处理配置信息包括:资源权限信息、搜索引擎服务器类型、搜索引擎服务器地址以及账密信息,所述资源权限信息包括资源名称和权限类型。
资源权限信息中的资源名称是所属业务的数据资源的名称。资源权限信息中的权限类型是所属业务的数据资源的数据处理权限。权限类型可以包括数据查询权限和/或数据写入权限。如果资源权限信息中的权限类型数据查询权限,则可以在所属业务的数据资源中进行数据查询。如果资源权限信息中的权限类型数据写入权限,则可以将数据写入所属业务的数据资源中。
搜索引擎服务器类型用于指明与所属业务的数据资源对应的搜索引擎服务器的类型,即所属业务的数据资源所在的搜索引擎服务器的类型。示例性的,搜索引擎服务器类型可以是分布式全文检索引擎ES、企业级搜索引擎服务器 Solr或基于Lucene的Web搜索引擎系统Compass等,本实施例在此不做限定。
搜索引擎服务器地址为所属业务的数据资源所在的搜索引擎服务器的服务端地址。
账密信息为用于与所属业务的数据资源所在的搜索引擎服务器进行认证的账号和密码。
步骤103、如果确定所述数据处理请求具有数据处理权限,则根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接。
可选的,各搜索引擎服务器设置有对应的查询语法解析器(QueryParser) 和索引语法解析器(IndexParser)。查询语法解析器用于将满足某种语法的数据查询语句转换成满足搜索引擎服务器的查询语法的数据查询语句。索引语法解析器用于将满足某种语法的数据写入语句转换成满足搜索引擎服务器的索引语法的数据写入语句。
在一个具体实例中,可选的,所述数据处理请求为数据查询请求,所述数据处理信息包括查询资源名称和查询条件;所述根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接,包括:获取与所述搜索引擎服务器类型匹配的查询语法解析器,作为与所述数据处理信息对应的目标语法解析器;在预设的本地路由表中,获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与所述数据处理信息对应的目标搜索引擎服务器连接。
具体地,处理配置信息中的搜索引擎服务器类型即为与数据查询请求所属业务的数据资源对应的搜索引擎服务器的类型。服务器获取与搜索引擎服务器类型匹配的查询语法解析器,作为与数据处理信息对应的目标语法解析器。即服务器获取与数据查询请求所属业务的数据资源对应的搜索引擎服务器的查询语法解析器,作为与数据处理信息对应的目标语法解析器。
预设的本地路由表用于存储与各搜索引擎服务器对应的搜索引擎服务器连接。服务器在预设的本地路由表中,获取与搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与数据处理信息对应的目标搜索引擎服务器连接。即服务器获取与数据查询请求所属业务的数据资源对应的搜索引擎服务器的搜索引擎服务器连接,作为与数据处理信息对应的目标搜索引擎服务器连接。
可选的,如果无法获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,可以根据处理配置信息中包括的搜索引擎服务器类型、搜索引擎服务器地址以及账密信息动态创建搜索引擎服务器连接并缓存进本地路由表,然后获取该搜索引擎服务器连接,作为与数据处理信息对应的目标搜索引擎服务器连接。
在一个具体实例中,可选的,所述数据处理请求为数据写入请求,所述数据处理信息包括写入资源名称和写入数据;所述根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接,包括:获取与所述搜索引擎服务器类型匹配的索引语法解析器,作为与所述数据处理信息对应的目标语法解析器;在预设的本地路由表中,获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与所述数据处理信息对应的目标搜索引擎服务器连接。
具体地,处理配置信息中的搜索引擎服务器类型即为与数据写入请求所属业务的数据资源对应的搜索引擎服务器的类型。服务器获取与搜索引擎服务器类型匹配的索引语法解析器,作为与数据处理信息对应的目标语法解析器。即服务器获取与数据写入请求所属业务的数据资源对应的搜索引擎服务器的索引语法解析器,作为与数据处理信息对应的目标语法解析器。
服务器在预设的本地路由表中,获取与搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与数据处理信息对应的目标搜索引擎服务器连接。即服务器获取与数据写入请求所属业务的数据资源对应的搜索引擎服务器的搜索引擎服务器连接,作为与数据处理信息对应的目标搜索引擎服务器连接。
步骤104、通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息。
具体地,对所述数据处理信息进行解析包括将满足某种语法的数据处理信息转换成满足目标搜索引擎的语法的数据解析信息。
在一个具体实例中,数据处理请求为数据查询请求,数据处理信息包括查询资源名称和查询条件。与数据处理信息对应的目标语法解析器为与数据查询请求所属业务的数据资源对应的搜索引擎服务器的查询语法解析器。通过目标语法解析器对数据处理信息进行解析,将数据处理信息转换成满足与数据查询请求所属业务的数据资源对应的搜索引擎服务器的查询语法的信息,得到与数据处理信息对应的数据解析信息。
在另一个具体实例中,数据处理请求为数据写入请求,数据处理信息包括写入资源名称和写入数据。与数据处理信息对应的目标语法解析器为与数据查询请求所属业务的数据资源对应的搜索引擎服务器的索引语法解析器。通过目标语法解析器对数据处理信息进行解析,将数据处理信息转换成满足与数据写入请求所属业务的数据资源对应的搜索引擎服务器的索引语法的信息,得到与数据处理信息对应的数据解析信息。
步骤105、根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端。
其中,目标搜索引擎服务器是与数据处理请求所属业务的数据资源对应的搜索引擎服务器。目标搜索引擎服务器连接是与数据处理请求所属业务的数据资源对应的搜索引擎服务器的搜索引擎服务器连接。
可选的,服务器根据数据解析信息生成目标数据处理请求,目标数据处理请求携带数据解析信息。然后服务器根据目标搜索引擎服务器连接,将目标数据处理请求发送至目标搜索引擎服务器,以使目标搜索引擎服务器对目标数据处理请求进行处理,反馈数据处理结果。服务器获取目标搜索引擎服务器反馈的数据处理结果,并将数据处理结果发送至客户端,以使客户端将数据处理结果提供给用户。由此,完成一个完整的数据处理过程。
在一个具体实例中,数据处理请求为数据查询请求,数据处理信息包括查询资源名称和查询条件;所述根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端,包括:根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据查询请求,获取所述目标搜索引擎服务器反馈的数据查询结果,并将所述数据查询结果发送至所述客户端。
在另一个具体实例中,数据处理请求为数据写入请求,数据处理信息包括写入资源名称和写入;所述根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端,包括:根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据查询请求,获取所述目标搜索引擎服务器反馈的数据写入结果,并将所述数据写入结果发送至所述客户端。
本发明实施例提供了一种数据处理方法,通过语法解析器解析数据处理信息,将满足某种语法的数据处理信息转换成满足目标搜索引擎的语法的信息,屏蔽了几种搜索引擎共用时的语法差异性,统一了不同搜索引擎服务器的使用姿势;将搜索引擎服务器和账密信息推送到处理配置信息数据库中,无需再提供给客户端,保证了搜索引擎的安全性;将资源权限信息推送到处理配置信息数据库中,使不同客户端的不同请求之间的数据无法互相访问,做到了数据权限隔离,实现了权限统一管理,因此,实现了数据处理过程的规范化。
图2为本发明实施例一提供的又一种数据处理方法的流程图。在本发明实施例的一个可选实施方式中,在将所述数据处理结果发送至所述客户端之后,还包括:
步骤106、记录与所述数据处理请求对应的访问日志。
其中,服务器在完成一个完整的数据处理过程后,记录与数据处理请求对应的访问日志,即记录与本次数据处理过程对应的访问日志。
可选的,访问日志包括与所述数据处理请求对应的权限验证信息、源ip、请求耗时和数据处理结果数等,用于记录每次数据处理请求的访问情况,提供给管理员进行监控。
步骤107、将所述访问日志发送至预设的日志分析平台。
可选的,服务器将访问日志发送至预设的日志分析平台。预设的日志分析平台可以是日志分析平台ELK、日志分析平台Graylog或其他日志分析平台,本实施例在此不做限定。
上述实施方式通过向日志分析平台发送访问日志,记录了数据处理请求的访问情况,对数据处理请求进行统一监控,进一步地实现了数据处理规范化。
实施例二
图3为本发明实施例二提供的一种数据处理方法的流程图。本发明实施例可适用于实现数据查询请求需要几种搜索引擎共用时,统一使用姿势和管控流程的情况。如图3所示,本发明实施例的方法具体包括:
步骤201、获取客户端发送的数据查询请求,所述数据处理请求携带权限验证信息和数据处理信息。
具体地,所述数据处理信息包括查询资源名称和查询条件。
步骤202、获取与所述权限验证信息匹配的处理配置信息。
步骤203、判断所述数据处理信息中的查询资源名称与所述资源权限信息中的资源名称是否一致。
步骤204、如果所述数据处理信息中的查询资源名称与所述资源权限信息中的资源名称一致,则判断所述资源权限信息中的权限类型是否包括数据查询权限。
步骤205、如果所述资源权限信息中的权限类型包括数据查询权限,则确定所述数据查询请求具有数据查询权限。
步骤206、获取与所述搜索引擎服务器类型匹配的查询语法解析器,作为与所述数据处理信息对应的目标语法解析器。
具体地,查询语法解析器用于将满足某种语法的数据查询语句转换成满足搜索引擎服务器的语法的数据查询语句。
步骤207、在预设的本地路由表中,获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与所述数据处理信息对应的目标搜索引擎服务器连接。
步骤208、通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息。
其中,与数据处理信息对应的目标语法解析器为与数据查询请求所属业务的数据资源对应的搜索引擎服务器的查询语法解析器。通过目标语法解析器对数据处理信息进行解析,将数据处理信息转换成满足与数据查询请求所属业务的数据资源对应的搜索引擎服务器的查询语法的信息,得到与数据处理信息对应的数据解析信息。
步骤209、根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据查询请求,获取所述目标搜索引擎服务器反馈的数据查询结果,并将所述数据查询结果发送至所述客户端。
可选的,服务器根据数据解析信息生成目标数据查询请求,目标数据查询请求携带数据解析信息。然后服务器根据目标搜索引擎服务器连接,将目标数据查询请求发送至目标搜索引擎服务器。
目标搜索引擎服务器对目标数据查询请求进行处理,根据目标数据查询请求携带的数据解析信息,在搜索引擎服务器中的与数据查询请求对应的指定业务的数据资源中,进行数据查询,获取符合查询条件的数据作为数据查询结果,反馈至服务器。
服务器获取目标搜索引擎服务器反馈的数据查询结果,并将数据查询结果发送至客户端,以使客户端将数据查询结果提供给用户。由此,完成一个完整的数据查询过程。
在本发明实施例的一个可选实施方式中,在将所述数据查询结果发送至所述客户端之后,还包括:记录与所述数据查询请求对应的访问日志;将所述访问日志发送至预设的日志分析平台。
由此,服务器在完成一个完整的数据查询过程后,记录与数据处理请求对应的访问日志,即记录与本次数据查询过程对应的访问日志,并将访问日志发送至预设的日志分析平台,以供管理员进行监控。
本发明实施例提供了一种数据处理方法,通过查询语法解析器解析数据处理信息,将满足某种语法的数据处理信息转换成满足目标搜索引擎的查询语法的信息,屏蔽了几种搜索引擎共用时的语法差异性,统一了不同搜索引擎服务器的使用姿势;将搜索引擎服务器和账密信息推送到处理配置信息数据库中,无需再提供给客户端,保证了搜索引擎的安全性;将资源权限信息推送到处理配置信息数据库中,使不同客户端的不同请求之间的数据无法互相访问,做到了数据权限隔离,实现了权限统一管理;通过向日志分析平台发送访问日志,记录了数据查询请求的访问情况,对数据查询请求进行统一监控,因此,实现了数据处理规范化。
实施例三
图4为本发明实施例三提供的一种数据处理方法的流程图。本发明实施例可适用于实现数据写入请求需要几种搜索引擎共用时,统一使用姿势和管控流程的情况。如图4所示,本发明实施例的方法具体包括:
步骤301、获取客户端发送的数据写入请求,所述数据处理请求携带权限验证信息和数据处理信息。
具体地,所述数据处理信息包括写入资源名称和写入数据。
步骤302、获取与所述权限验证信息匹配的处理配置信息。
步骤303、判断所述数据处理信息中的写入资源名称与所述资源权限信息中的资源名称是否一致。
步骤304、如果所述数据处理信息中的写入资源名称与所述资源权限信息中的资源名称一致,则判断所述资源权限信息中的权限类型是否包括数据写入权限。
步骤305、如果所述资源权限信息中的权限类型包括数据写入权限,则确定所述数据查询请求具有数据写入权限。
步骤306、获取与所述搜索引擎服务器类型匹配的索引语法解析器,作为与所述数据处理信息对应的目标语法解析器。
具体地,索引语法解析器用于将满足某种语法的数据写入语句转换成满足搜索引擎服务器的索引语法的数据写入语句。
步骤307、在预设的本地路由表中,获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与所述数据处理信息对应的目标搜索引擎服务器连接。
步骤308、通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息。
其中,与数据处理信息对应的目标语法解析器为与数据查询请求所属业务的数据资源对应的搜索引擎服务器的索引语法解析器。通过目标语法解析器对数据处理信息进行解析,将数据处理信息转换成满足与数据写入请求所属业务的数据资源对应的搜索引擎服务器的索引语法的信息,得到与数据处理信息对应的数据解析信息。
步骤309、根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据写入请求,获取所述目标搜索引擎服务器反馈的数据写入结果,并将所述数据写入结果发送至所述客户端。
可选的,服务器根据数据解析信息生成目标数据写入请求,目标数据查询请求携带数据解析信息。然后服务器根据目标搜索引擎服务器连接,将目标数据写入请求发送至目标搜索引擎服务器。
目标搜索引擎服务器对目标数据写入请求进行处理,根据目标数据查询请求携带的数据解析信息,将数据写入请求携带的写入数据写入至搜索引擎服务器中的与数据写入请求对应的指定业务的数据资源中,并生成数据写入结果反馈至服务器。
服务器获取目标搜索引擎服务器反馈的数据写入结果,并将数据写入结果发送至客户端,以使客户端将数据写入结果提供给用户。用户可以根据数据写入结果,确定写入数据已成功写入至对应的数据资源中。由此,完成一个完整的数据写入过程。
在本发明实施例的一个可选实施方式中,写入数据之后,还包括:记录与所述数据写入请求对应的访问日志;将所述访问日志发送至预设的日志分析平台。
由此,服务器在完成一个完整的数据写入过程后,记录与数据处理请求对应的访问日志,即记录与本次数据写入过程对应的访问日志,并将访问日志发送至预设的日志分析平台,以供管理员进行监控。
本发明实施例提供了一种数据处理方法,通过索引语法解析器解析数据处理信息,将满足某种语法的数据处理信息转换成满足目标搜索引擎的索引语法的信息,屏蔽了几种搜索引擎共用时的语法差异性,统一了不同搜索引擎服务器的使用姿势;将搜索引擎服务器和账密信息推送到处理配置信息数据库中,无需再提供给客户端,保证了搜索引擎的安全性;将资源权限信息推送到处理配置信息数据库中,使不同客户端的不同请求之间的数据无法互相访问,做到了数据权限隔离,实现了权限统一管理;通过向日志分析平台发送访问日志,记录了数据写入请求的访问情况,对数据写入请求进行统一监控,因此,实现了数据处理规范化。
实施例四
图5是本发明实施例四提供的一种数据处理装置的结构示意图,如图5所示,所述装置包括请求获取模块411、权限确定模块412、信息确定模块413、信息解析模块414和结果发送模块415。
请求获取模块411,用于获取客户端发送的数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息。
权限确定模块412,用于获取与所述权限验证信息匹配的处理配置信息,根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限。
信息确定模块413,用于如果确定所述数据处理请求具有数据处理权限,则根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接。
信息解析模块414,用于通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息。
结果发送模块415,用于根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端。
本发明实施例提供了一种数据处理装置,通过语法解析器解析数据处理信息,将满足某种语法的数据处理信息转换成满足目标搜索引擎的语法的信息,屏蔽了几种搜索引擎共用时的语法差异性,统一了不同搜索引擎服务器的使用姿势;将搜索引擎服务器和账密信息推送到处理配置信息数据库中,无需再提供给客户端,保证了搜索引擎的安全性;将资源权限信息推送到处理配置信息数据库中,使不同客户端的不同请求之间的数据无法互相访问,做到了数据权限隔离,实现了权限统一管理;通过向日志分析平台发送访问日志,记录了数据处理请求的访问情况,对数据处理请求进行统一监控,因此,实现了数据处理过程的规范化。
在本发明实施例的一个可选实施方式中,可选的,数据处理装置还包括:日志记录模块,用于记录与所述数据处理请求对应的访问日志;日志发送模块,用于将所述访问日志发送至预设的日志分析平台。
在本发明实施例的一个可选实施方式中,可选的,所述请求获取模块411 具体用于通过RPC,获取客户端发送的数据处理请求。
在本发明实施例的一个可选实施方式中,可选的,所述权限确定模块412 具体用于在预设的处理配置信息数据库中,获取与所述权限验证信息匹配的处理配置信息。
在本发明实施例的一个可选实施方式中,可选的,所述处理配置信息包括:资源权限信息、搜索引擎服务器类型、搜索引擎服务器地址以及账密信息,所述资源权限信息包括资源名称和权限类型。
在本发明实施例的一个可选实施方式中,可选的,所述数据处理请求为数据查询请求,所述数据处理信息包括查询资源名称和查询条件;所述权限确定模块412包括:第一判断子模块,用于判断所述数据处理信息中的查询资源名称与所述资源权限信息中的资源名称是否一致;第二判断子模块,用于如果所述数据处理信息中的查询资源名称与所述资源权限信息中的资源名称一致,则判断所述资源权限信息中的权限类型是否包括数据查询权限;第三判断子模块,用于如果所述资源权限信息中的权限类型包括数据查询权限,则确定所述数据查询请求具有数据查询权限。
在本发明实施例的一个可选实施方式中,可选的,所述信息确定模块413 包括:第一确定子模块,用于获取与所述搜索引擎服务器类型匹配的查询语法解析器,作为与所述数据处理信息对应的目标语法解析器;第二确定子模块,用于在预设的本地路由表中,获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与所述数据处理信息对应的目标搜索引擎服务器连接。
在本发明实施例的一个可选实施方式中,可选的,所述结果发送模块415 包括:第一发送子模块,用于根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据查询请求,获取所述目标搜索引擎服务器反馈的数据查询结果,并将所述数据查询结果发送至所述客户端。
在本发明实施例的一个可选实施方式中,可选的,所述权限确定模块412 包括:第四判断子模块,用于判断所述数据处理信息中的写入资源名称与所述资源权限信息中的资源名称是否一致;第五判断子模块,用于如果所述数据处理信息中的写入资源名称与所述资源权限信息中的资源名称一致,则判断所述资源权限信息中的权限类型是否包括数据写入权限;第六判断子模块,用于如果所述资源权限信息中的权限类型包括数据写入权限,则确定所述数据查询请求具有数据写入权限。
在本发明实施例的一个可选实施方式中,可选的,所述信息确定模块413 包括:第三确定子模块,用于获取与所述搜索引擎服务器类型匹配的索引语法解析器,作为与所述数据处理信息对应的目标语法解析器;第四确定子模块,用于在预设的本地路由表中,获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与所述数据处理信息对应的目标搜索引擎服务器连接。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
实施例五
图6为本发明实施例五提供的一种计算机设备的结构示意图。图6示出了适于用来实现本发明实施方式的示例性计算机设备12的框图。图6显示的计算机设备12仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图6所示,计算机设备12以通用计算设备的形式表现。计算机设备12 的组件可以包括但不限于:一个或者多个处理器16,存储器28,连接不同系统组件(包括存储器28和处理器16)的总线18。
总线18表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构 (ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
计算机设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机设备12访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
存储器28可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)30和/或高速缓存存储器32。计算机设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统34可以用于读写不可移动的、非易失性磁介质(图6未显示,通常称为“硬盘驱动器”)。尽管图6中未示出,可以提供用于对可移动非易失性磁盘 (例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块42的程序/实用工具40,可以存储在例如存储器28中,这样的程序模块42包括——但不限于——操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。
计算机设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信,还可与一个或者多个使得用户能与该计算机设备12交互的设备通信,和/或与使得该计算机设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/ 输出(I/O)接口22进行。并且,计算机设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图6 所示,网络适配器20通过总线18与计算机设备12的其它模块通信。应当明白,尽管图6中未示出,可以结合计算机设备12使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理器16通过运行存储在存储器28中的程序,从而执行各种功能应用以及数据处理,实现本发明实施例所提供的数据处理方法,包括:获取客户端发送的数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息;获取与所述权限验证信息匹配的处理配置信息,根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限;如果确定所述数据处理请求具有数据处理权限,则根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接;通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息;根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端。
实施例六
本发明实施例六提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时,实现本发明实施例所提供的数据处理方法,包括:获取客户端发送的数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息;获取与所述权限验证信息匹配的处理配置信息,根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限;如果确定所述数据处理请求具有数据处理权限,则根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接;通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息;根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端。
可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM 或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、 Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或计算机设备上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (12)
1.一种数据处理方法,其特征在于,包括:
获取客户端发送的数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息;
获取与所述权限验证信息匹配的处理配置信息,根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限;其中,所述处理配置信息包括:资源权限信息、搜索引擎服务器类型、搜索引擎服务器地址以及账密信息,所述资源权限信息包括资源名称和权限类型;
如果确定所述数据处理请求具有数据处理权限,则根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接;
通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息;
根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端。
2.根据权利要求1所述的方法,其特征在于,在将所述数据处理结果发送至所述客户端之后,还包括:
记录与所述数据处理请求对应的访问日志;
将所述访问日志发送至预设的日志分析平台。
3.根据权利要求1所述的方法,其特征在于,所述获取客户端发送的数据处理请求,包括:
通过远程过程调用,获取客户端发送的数据处理请求。
4.根据权利要求1所述的方法,其特征在于,获取与所述权限验证信息匹配的处理配置信息,包括:
在预设的处理配置信息数据库中,获取与所述权限验证信息匹配的处理配置信息。
5.根据权利要求1所述的方法,其特征在于,所述数据处理请求为数据查询请求,所述数据处理信息包括查询资源名称和查询条件;
所述根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限,包括:
判断所述数据处理信息中的查询资源名称与所述资源权限信息中的资源名称是否一致;
如果所述数据处理信息中的查询资源名称与所述资源权限信息中的资源名称一致,则判断所述资源权限信息中的权限类型是否包括数据查询权限;
如果所述资源权限信息中的权限类型包括数据查询权限,则确定所述数据查询请求具有数据查询权限。
6.根据权利要求5所述的方法,其特征在于,所述根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接,包括:
获取与所述搜索引擎服务器类型匹配的查询语法解析器,作为与所述数据处理信息对应的目标语法解析器;
在预设的本地路由表中,获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与所述数据处理信息对应的目标搜索引擎服务器连接。
7.根据权利要求6所述的方法,其特征在于,所述根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端,包括:
根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据查询请求,获取所述目标搜索引擎服务器反馈的数据查询结果,并将所述数据查询结果发送至所述客户端。
8.根据权利要求1所述的方法,其特征在于,所述数据处理请求为数据写入请求,所述数据处理信息包括写入资源名称和写入数据;
所述根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限,包括:
判断所述数据处理信息中的写入资源名称与所述资源权限信息中的资源名称是否一致;
如果所述数据处理信息中的写入资源名称与所述资源权限信息中的资源名称一致,则判断所述资源权限信息中的权限类型是否包括数据写入权限;
如果所述资源权限信息中的权限类型包括数据写入权限,则确定所述数据查询请求具有数据写入权限。
9.根据权利要求8所述的方法,其特征在于,所述根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接,包括:
获取与所述搜索引擎服务器类型匹配的索引语法解析器,作为与所述数据处理信息对应的目标语法解析器;
在预设的本地路由表中,获取与所述搜索引擎服务器类型匹配的搜索引擎服务器连接,作为与所述数据处理信息对应的目标搜索引擎服务器连接。
10.一种数据处理装置,其特征在于,包括:
请求获取模块,用于获取客户端发送的数据处理请求,所述数据处理请求携带权限验证信息和数据处理信息;
权限确定模块,用于获取与所述权限验证信息匹配的处理配置信息,根据所述处理配置信息和所述数据处理信息,确定所述数据处理请求是否具有数据处理权限;其中,所述处理配置信息包括:资源权限信息、搜索引擎服务器类型、搜索引擎服务器地址以及账密信息,所述资源权限信息包括资源名称和权限类型;
信息确定模块,用于如果确定所述数据处理请求具有数据处理权限,则根据所述处理配置信息,确定与所述数据处理信息对应的目标语法解析器和目标搜索引擎服务器连接;
信息解析模块,用于通过所述目标语法解析器对所述数据处理信息进行解析,得到与所述数据处理信息对应的数据解析信息;
结果发送模块,用于根据所述数据解析信息和所述目标搜索引擎服务器连接,向目标搜索引擎服务器发送目标数据处理请求,获取所述目标搜索引擎服务器反馈的数据处理结果,并将所述数据处理结果发送至所述客户端。
11.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-9中任一所述的数据处理方法。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1-9中任一所述的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010511831.0A CN111680313B (zh) | 2020-06-08 | 2020-06-08 | 一种数据处理方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010511831.0A CN111680313B (zh) | 2020-06-08 | 2020-06-08 | 一种数据处理方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111680313A CN111680313A (zh) | 2020-09-18 |
CN111680313B true CN111680313B (zh) | 2022-06-28 |
Family
ID=72435497
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010511831.0A Active CN111680313B (zh) | 2020-06-08 | 2020-06-08 | 一种数据处理方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111680313B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112579093B (zh) * | 2020-12-11 | 2022-08-12 | 杭州安恒信息技术股份有限公司 | 一种信息推送方法、装置及相关设备 |
CN112733190B (zh) * | 2021-01-20 | 2024-03-08 | 北京联创信安科技股份有限公司 | 数据处理方法、装置、电子设备、系统和存储介质 |
CN113341929A (zh) * | 2021-06-18 | 2021-09-03 | 中国第一汽车股份有限公司 | 电子控制单元标定数据管理系统、方法、装置及设备 |
CN114978991B (zh) * | 2022-05-17 | 2024-03-12 | 平安科技(深圳)有限公司 | 路由分发方法、装置、电子设备及计算机可读存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103577440A (zh) * | 2012-07-27 | 2014-02-12 | 阿里巴巴集团控股有限公司 | 一种非关系型数据库中的数据处理方法和装置 |
CN108121709A (zh) * | 2016-11-28 | 2018-06-05 | 中兴通讯股份有限公司 | 一种搜索处理方法及装置 |
CN110597891A (zh) * | 2018-06-12 | 2019-12-20 | 武汉斗鱼网络科技有限公司 | MySQL聚合为PostgreSQL数据库的设备、系统、方法、存储介质 |
CN110909004A (zh) * | 2019-11-29 | 2020-03-24 | 南京领行科技股份有限公司 | 一种分库分表的数据校验方法及设备 |
CN110941602A (zh) * | 2019-11-20 | 2020-03-31 | 中国建设银行股份有限公司 | 数据库的配置方法、装置、电子设备及存储介质 |
-
2020
- 2020-06-08 CN CN202010511831.0A patent/CN111680313B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103577440A (zh) * | 2012-07-27 | 2014-02-12 | 阿里巴巴集团控股有限公司 | 一种非关系型数据库中的数据处理方法和装置 |
CN108121709A (zh) * | 2016-11-28 | 2018-06-05 | 中兴通讯股份有限公司 | 一种搜索处理方法及装置 |
CN110597891A (zh) * | 2018-06-12 | 2019-12-20 | 武汉斗鱼网络科技有限公司 | MySQL聚合为PostgreSQL数据库的设备、系统、方法、存储介质 |
CN110941602A (zh) * | 2019-11-20 | 2020-03-31 | 中国建设银行股份有限公司 | 数据库的配置方法、装置、电子设备及存储介质 |
CN110909004A (zh) * | 2019-11-29 | 2020-03-24 | 南京领行科技股份有限公司 | 一种分库分表的数据校验方法及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN111680313A (zh) | 2020-09-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111680313B (zh) | 一种数据处理方法、装置、设备及存储介质 | |
US10503627B2 (en) | Robotic process automation enabled file dissection for error diagnosis and correction | |
US11372997B2 (en) | Automatic audit logging of events in software applications performing regulatory workloads | |
US9910941B2 (en) | Test case generation | |
CN112035858B (zh) | Api访问控制方法、装置、设备及介质 | |
US10079832B1 (en) | Controlling user creation of data resources on a data processing platform | |
CN111291339B (zh) | 一种区块链数据的处理方法、装置、设备及存储介质 | |
CN110428319B (zh) | 一种数据比对平台、方法、设备和存储介质 | |
CN110958127B (zh) | 一种异常处理方法、装置、设备和计算机存储介质 | |
CN111291330A (zh) | 一种svn权限管理方法、装置、计算机设备及存储介质 | |
US9996576B2 (en) | Updating progression of performing computer system maintenance | |
CN112561353A (zh) | 一种仿真模型资源综合管理系统、方法和计算机设备 | |
US20220300395A1 (en) | Contextual drill back to source code and other resources from log data | |
CN110569266A (zh) | 一种数据查询的方法、装置、设备及存储介质 | |
CN113612766A (zh) | 数据治理装置、方法、计算机设备及存储介质 | |
CN113238739A (zh) | 一种插件开发和数据获取方法、装置、电子设备及介质 | |
CN112579632A (zh) | 一种数据核验方法、装置、设备和介质 | |
CN112069158A (zh) | 一种数据修复方法、装置、设备和存储介质 | |
CN115576978A (zh) | 一种业务处理请求的响应方法、装置、系统及介质 | |
US11763014B2 (en) | Production protection correlation engine | |
US11880473B2 (en) | Removing data having a data type from a data set | |
JP2009187392A (ja) | 監査ログ生成システム及び方法 | |
CN112818342A (zh) | 一种脚本审计方法、装置、设备及存储介质 | |
CN112162984A (zh) | 一种基于区块链的实名认证方法、系统、设备和存储介质 | |
CN111177671A (zh) | 一种数据管理平台、方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |