CN111767330B - 一种数据交互方法、装置、电子设备及存储介质 - Google Patents

一种数据交互方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111767330B
CN111767330B CN202010537412.4A CN202010537412A CN111767330B CN 111767330 B CN111767330 B CN 111767330B CN 202010537412 A CN202010537412 A CN 202010537412A CN 111767330 B CN111767330 B CN 111767330B
Authority
CN
China
Prior art keywords
data source
target
data
metadata
connection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010537412.4A
Other languages
English (en)
Other versions
CN111767330A (zh
Inventor
雷公武
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Dt Dream Technology Co Ltd
Original Assignee
Hangzhou Dt Dream Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Dt Dream Technology Co Ltd filed Critical Hangzhou Dt Dream Technology Co Ltd
Priority to CN202010537412.4A priority Critical patent/CN111767330B/zh
Publication of CN111767330A publication Critical patent/CN111767330A/zh
Application granted granted Critical
Publication of CN111767330B publication Critical patent/CN111767330B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/252Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44521Dynamic linking or loading; Link editing at or after load time, e.g. Java class loading
    • G06F9/44526Plug-ins; Add-ons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2141Access rights, e.g. capability lists, access control lists, access tables, access matrices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Bioethics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Mining & Analysis (AREA)
  • Stored Programmes (AREA)

Abstract

本申请提供一种数据交互方法、装置、电子设备及存储介质,所述方法包括:响应于所述多个应用中的任一应用对统一的数据交互接口的调用操作,确定所述多个应用中的任一应用发送的数据交互请求;根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令;对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作;将与所述交互操作对应的响应信息发送至所述任一应用。

Description

一种数据交互方法、装置、电子设备及存储介质
技术领域
本申请涉及网络技术领域,具体涉及一种数据交互方法、装置、电子设备及存储介质。
背景技术
随着信息技术的快速发展,大数据相关的应用呈现出快速增长,不仅体现在应用程序的种类及数量的丰富,而且各个应用所实现的业务功能也日趋复杂,主要表现为各个应用存在与数据源频繁进行对接的需要。
对于不同类型的数据源或者同一类型的不同版本的数据源而言,数据源的连接方式、对数据源中的元数据信息的查询方式等均存在差异,相应的,与数据源存在对接需要的应用则需要配置与各个数据源对应的对接程序,以支持应用与各个数据源的对接工作。
然而,随着数据源的种类和数量的增多,应用程序需要增添的配置程序也相应增多,尤其在多个应用均存在对数据源的对接需要的情况下,各个应用中均需增添相应的配置程序,这不仅使得各个应用之间的连通性低下,而且造成了诸如对各个应用的维护成本高、因对接程序的赘余导致资源浪费等问题。
发明内容
有鉴于此,本申请提供一种数据交互方法及装置,以至少解决相关技术中存在的技术问题。
为实现上述目的,本申请提供技术方案如下:
根据本申请的第一方面,提出了一种数据交互方法,应用于连接管理平台,响应于所述多个应用中的任一应用对统一的数据交互接口的调用操作,确定所述连接管理平台与多个应用和至少一个数据源连接,所述方法包括:
接收所述多个应用中的任一应用发送的数据交互请求;
根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令;
对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作;
将与所述交互操作对应的响应信息发送至所述任一应用。
可选的,所述统一的数据交互接口包括元数据接口,所述方法还包括:
在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述数据交互请求对应的连接标识;
调用与所述连接标识对应的连接接口,以根据所述连接标识确定目标数据源的数据源接口;
调用所述目标数据源的数据源接口,以由所述目标数据源对应的插件与所述连接管理平台建立数据连接。
可选的,所述对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作,包括:
基于所述数据连接对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作。
可选的,所述数据连接包括两段式的数据源标识和数据连接标识;
所述基于所述数据连接对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作,包括:
根据所述数据源标识对应的访问控制列表对所述数据连接标识中的用户标识信息进行操作权限校验;
在所述用户标识信息通过操作权限校验的情况下,按照所述交互操作指令对所述数据源标识对应的目标数据源和/或目标元数据进行交互操作。
可选的,所述统一的数据交互接口包括连接配置接口或者数据源配置接口,所述方法还包括:
在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述目标数据源或者目标元数据所在的数据源对应的链接插件,以由所述链接插件实现与所述目标数据源或者目标元数据所在的数据源建立数据连接,其中,所述链接插件是根据所述目标数据源或者目标元数据所在的数据源的接入方式而确定的。
可选的,还包括:
对所述至少一个数据源中的当前元数据与预先维护的预设时刻的历史元数据进行比对;
在经过比对后确定所述历史元数据与所述当前元数据存在差异的情况下,向所述多个应用中任一应用发送数据变动提示信息。
根据本申请的第二方面,提出了一种数据交互装置,应用于连接管理平台,所述连接管理平台与多个应用和至少一个数据源连接,所述装置包括:
请求接收模块,响应于所述多个应用中的任一应用对统一的数据交互接口的调用操作,确定所述多个应用中的任一应用发送的数据交互请求;
指令确定模块,根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令;
操作执行模块,对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作;
第一信息发送模块,将与所述交互操作对应的响应信息发送至所述任一应用。
可选的,所述统一的数据交互接口包括元数据接口,所述装置还包括:
连接标识确定模块,在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述数据交互请求对应的连接标识;
第一接口调用模块,调用与所述连接标识对应的连接接口,以根据所述连接标识确定目标数据源的数据源接口;
第二接口调用模块,调用所述目标数据源的数据源接口,以由所述目标数据源的插件与所述连接管理平台建立数据连接。
可选的,所述操作执行模块具体用于:
基于所述数据连接对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作。
可选的,所述数据连接包括两段式的数据源标识和数据连接标识;
所述操作执行模块还用于:
根据所述数据源标识对应的访问控制列表对所述数据连接标识中的用户标识信息进行操作权限校验;
在所述用户标识信息通过操作权限校验的情况下,按照所述交互操作指令对所述数据源标识对应的目标数据源和/或目标元数据进行交互操作。
可选的,所述统一的数据交互接口包括连接配置接口或者数据源配置接口,所述装置还包括:
插件确定模块,在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述目标数据源或者目标元数据所在的数据源对应的链接插件,以由所述链接插件实现与所述目标数据源或者目标元数据所在的数据源建立数据连接,其中,所述链接插件是根据所述目标数据源或者目标元数据所在的数据源的接入方式而确定的。
可选的,还包括:
数据比对模块,对所述至少一个数据源中的当前元数据与预先维护的预设时刻时的历史元数据进行比对;
第二信息发送模块,在经过比对后确定所述历史元数据与所述当前元数据存在差异的情况下,向所述多个应用中任一应用发送数据变动提示信息。
根据本申请的第三方面,提出了一种电子设备,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为可执行指令以实现如上述第一方面中任一项所述的方法。
根据本申请的第四方面,提供一种计算机可读存储介质,其上存储有计算机指令,该指令被处理器执行时实现如上述第一方面中任一所述方法的步骤。
由上述技术方案可见,通过在多个应用和至少一个数据源之间设立连接管理平台,进而能够借助于连接管理平台在数据交互中所起到的中转作用,实现多个应用对至少一个数据源的数据交互的需要,而无需由各个应用对各个数据源的对接方式进行维护,提高了各个应用之间的连通性,而且降低了对各个应用的维护成本和因对接程序的赘余所导致的资源浪费的问题。
附图说明
图1是根据本申请一示例性实施例之一中的数据交互示意图;
图2是根据本申请一示例性实施例之二中的数据交互示意图;
图3是根据本申请一示例性实施例之一提供的一种数据交互方法的流程图;
图4是根据本申请一示例性实施例之二提供的一种数据交互方法的流程图;
图5是根据本申请一示例性实施例提供的一种数据源链接插件的示意图;
图6是根据本申请一示例性实施例中的一种电子设备的示意结构图;
图7是根据本申请一示例性实施例中的一种数据交互装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
随着信息技术的快速发展,大数据相关的应用呈现出快速增长,不仅体现在应用程序的种类及数量的丰富,而且各个应用所实现的业务功能也日趋复杂,主要表现为各个应用存在与数据源频繁进行对接的需要。
然而在应用与数据源进行对接的过程中,对于不同类型的数据源或者同一类型的不同版本的数据源而言,应用中需要配置不同的对接程序,以支持应用与各个不同类型的数据源或者同一类型的不同版本的数据源的对接工作。
诸如在应用的连接请求对应不同的数据源的情况下,应用程序中需配置不同的对接程序以使得根据不同的数据源所对应的通信协议建立相应的数据源连接通道;或者应用程序基于不同的对接程序触发一个进程对预设的数据库连接池中的相应的空闲数据库连接进行调用,使得各个应用程序各自维护对各个数据源的对接方式,请参考图1,图1是根据本申请一示例性实施例之一中的数据交互示意图,如图1所示,该数据交互的应用场景中示例性地包括应用A、应用B和应用C,以及与各个应用所对接的数据源A、数据源B、数据源C和数据源D,各个应用基于各自所维护的与数据源的对接方式与数据源建立数据连接,进而进行数据交互,诸如应用A需分别与数据源A、数据源B、数据源C和数据源D建立数据连接,进而基于所建立的数据连接与该数据连接对应的数据源进行数据交互,相应的,应用B和应用C也需要分别与数据源A、数据源B、数据源C和数据源D建立数据连接,并基于所建立的数据连接进行数据交互。
随着数据源的种类的扩增,应用A、应用B和应用C中同样需要增加新扩增的数据源对应的对接程序,诸如在扩增了与数据源A、数据源B、数据源C和数据源D版本均不相同的数据源E的情况下,应用A、应用B和应用C中均需配置与数据源E对应的对接程序,使得应用A、应用B和应用C能够基于各自应用中所增添的对接程序实现与数据源E的数据交互,可见,相关技术中需要耗费网络资源、硬件资源和用工成本对各个应用中的关于各个数据源的对接程序进行重复维护,且各个应用之间的连通性低下,并不利于数据连接信息的资源共享。
有鉴于此,本申请提供一种数据交互方法,在多个应用和至少一个数据源之间设立连接管理平台,借助于连接管理平台所起到的中转作用,多个应用无需各自维护与各个数据源的对接方式,而是由连接管理平台与各个数据源进行对接,请参考图2,图2是根据本申请一示例性实施例之二中的数据交互示意图,如图2所示,应用A、应用B和应用C分别与连接管理平台进行对接,进而由连接管理平台与存在交互需要的数据源进行交互,并将交互操作对应的响应信息返回至存在交互需要的应用程序,诸如应用A、应用B和应用C通过连接管理平台与数据源A、数据源B、数据源C和数据源D进行数据交互,即便新扩增了数据源E,应用A、应用B和应用C同样是与连接管理平台进行对接,进而由连接管理平台与新扩增的数据源E进行交互,而无需在应用A、应用B和应用C中新增数据源E对应的对接程序,从而不仅降低了对应用A、应用B和应用C的维护成本,而且避免了重复资源的浪费和对接程序的重复维护。
为对本申请进行详细阐述说明,请参考下列实施例:
图3是根据本申请一示例性实施例之一提供的一种数据交互方法的流程图,应用于连接管理平台,所述连接管理平台与多个应用和至少一个数据源连接,如图3所示,该方法可以包括以下步骤:
在步骤301中,响应于所述多个应用中的任一应用对统一的数据交互接口的调用操作,确定所述多个应用中的任一应用发送的数据交互请求。
在一实施例中,多个应用中的任一应用所发送的数据交互请求中可以包括目标数据源信息、目标元数据信息或者目标数据源中的目标元数据信息,以及对目标数据源、目标元数据或者目标数据源中的目标元数据的交互操作指令信息。在实际应用中,根据不同的需要可以设置不同类型的数据源,诸如Oracle数据源、SQLServer数据源、PostgreSQL数据源、MySQL数据源等,或者相同类型的数据源的不同版本,本申请对此不做限制。
在又一实施例中,统一的数据交互接口可以为多种形式,在针对连接或者数据源进行交互处理的过程中,统一的数据交互接口可以为连接配置接口或者数据源配置接口;在针对元数据进行交互处理的过程中,统一的数据交互接口可以为元数据接口。
具体的,在应用所调用的统一的数据交互接口为元数据接口的情况下,在执行步骤302之前还可以包括:确定与所述数据交互请求对应的连接标识;调用与所述连接标识对应的连接接口,以根据所述连接标识确定目标数据源的数据源接口;调用所述目标数据源的数据源接口,以由所述目标数据源对应的插件与所述连接管理平台建立数据连接。
在应用所调用的统一的数据交互接口为连接配置接口或者数据源配置接口的情况下,在执行步骤302之前还可以包括:确定与所述目标数据源或者目标元数据所在的数据源对应的链接插件,以由所述链接插件实现与所述目标数据源或者目标元数据所在的数据源建立数据连接,其中,所述链接插件是根据所述目标数据源或者目标元数据所在的数据源的接入方式而确定的。
在步骤302中,根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令。
连接管理平台可通过多个应用中的任一应用所发送的数据交互请求确定该任一应用进行数据交互操作的目标数据源信息、目标元数据信息或者目标数据源中的目标元数据信息,以及对于目标数据源、目标元数据或者目标数据源中的目标元数据的交互操作指令。
实际应用中,在交互操作指令对应于数据源的情况下,该交互操作指令可以包括新建数据源、对目标数据源的删除操作、对目标数据源的属性信息的修改、查询整个目标数据源、对目标数据源进行连接测试等。
具体的,目标数据源的属性信息可以包括目标数据源的ID、目标数据源的名称、目标数据源的描述信息、目标数据源的数据源类型、目标数据源的创建人、目标数据源的创建时间等。进一步的,用于支持对目标数据源进行连接测试,目标数据源的属性信息中该可以包括IP地址、HOST地址、Port端口号、测试用户名、测试密码等。
在交互操作指令对应于元数据的情况下,该交互操作指令可以包括新增元数据、删除元数据、修改元数据、查询元数据等。在实际应用中,元数据可以为数据源中的表对象数据或者表对象数据中的列对象数据,其中,表对象数据中可以包含该表对象对应的属性信息,诸如表对象的名称、表对象的创建人、表对象的创建时间、表对象的大小、该表对象是否为分区表、表索引字段、表对象的生命周期或者表对象的列对象集合等;类似的,表对象中的各个列对象可以包含对应的字段名、字段类型、字段长度、字段精度、字段备注、该字段是否为主键等属性信息。
在交互操作指令对应于目标数据源的数据连接的情况下,该交互操作指令可以包括新增对应于该目标数据源的数据连接、修改对应于目标数据源的数据连接、删除对应于目标数据源的数据连接、查询对应于目标数据源的数据连接或者基于该数据连接对目标数据源的可达性进行测试等。
在步骤303中,对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作。
在一实施例中,可以与目标数据源或者目标元数据所在的数据源建立数据连接,进而基于所建立的数据连接对目标数据源、目标元数据或者目标数据源中的目标元数据执行与交互操作指令对应的交互操作。
进一步的,所建立的数据连接可以包括两段式的数据源标识和数据连接标识,其中,数据源标识用于表征目标数据源,数据连接标识中包含用户标识信息,诸如用户的唯一标识信息或者用户名称与密码的组合等。在基于数据连接对所述目标数据源、目标元数据或者目标数据源中的目标元数据执行与所述交互操作指令对应的交互操作的过程中,可以根据数据源标识对应的访问控制列表对数据连接标识中的用户标识信息进行操作权限校验,进而在用户标识信息通过操作权限校验的情况下,按照交互操作指令对数据源标识对应的目标数据源、目标元数据或者目标数据源中的目标元数据进行交互操作。
在另一实施例中,在与目标数据源、目标元数据或者目标元数据所在的数据源建立数据连接的过程中,可以由连接管理平台确定与目标数据源或者目标元数据所在的数据源对应的链接插件,进而由该链接插件实现与目标数据源或者目标元数据所在的数据源建立数据连接,其中,链接插件是根据目标数据源或者目标元数据所在的数据源的接入方式而确定的。
在步骤304中,将与所述交互操作对应的响应信息发送至所述任一应用。
在一实施例中,连接管理平台可以对至少一个数据源中的当前元数据与预先维护的预设时刻的历史元数据进行比对,进而在经过比对后确定历史元数据与当前元数据存在差异的情况下,向多个应用中的任一应用发送数据变动的提示信息。
由上述技术方案可见,通过在多个应用和至少一个数据源之间设立连接管理平台,进而能够借助于连接管理平台在数据交互中所起到的中转作用,实现多个应用对至少一个数据源的数据交互的需要,而无需由各个应用对各个数据源的对接方式进行维护,提高了各个应用之间的连通性,而且降低了对各个应用的维护成本和因对接程序的赘余所导致的资源浪费的问题。
图4是根据本申请一示例性实施例之二提供的一种数据交互方法的流程图,应用于连接管理平台,如图4所示,该方法可以包括下述步骤:
在步骤401中,响应于所述多个应用中的任一应用对元数据接口的调用操作,确定多个应用中的任一应用发送的数据交互请求。
在实际应用过程中,本实施例中的元数据接口可以为统一的数据交互接口中的一种,除此之外,统一的数据交互接口还可以包括连接配置接口或者数据源配置接口等。多个应用中的任一应用可以连接至连接管理平台中的接口层,使得多个应用中的任一应用通过对接口层中统一的数据交互接口的调用实现对连接管理平台所对接的多个数据源中的目标数据源的交互操作、对多个数据源的交互操作或者关于连接的交互操作,诸如对多个数据源中的目标数据源的交互操作、对多个数据源中的目标元数据的交互操作或者对多个数据源中的目标数据源的连接测试操作等,其中,多个数据源,诸如图5中实例性的MySQL类型的数据源A、Oracle类型的数据源B、SQL Server类型的数据源C可以为预先配置完成的,或者基于接收到的对元数据接口的调用操作后实时所加载的,本申请对此不作限制;相应的,在对数据源配置完成或者加载完成后,可以针对相应的数据源配置数据连接,以及与该数据源对应的访问控制列表,其中,访问控制列表中可以包含具有操作权限的用户标识信息,用户标识信息可以为单独的用户名,或者包含用户名和密码的组合,本申请对此不作限制。
进一步的,连接管理平台中的接口层可以对不同类型的数据源或者同一类型的不同版本的数据源所对应的各个功能程序的接口进行维护,或者连接管理平台可以对不同类型的数据源或者同一类型的不同版本的数据源相应的功能程序的接口进行统一封装,应用可以通过调用统一封装后的接口实现对连接管理平台所对接的不同类型的数据源或者同一类型的不同版本的数据源的数据交互操作,在此过程中,应用程序无需识别各个接口所对应的数据源,连接管理平台中的接口层可根据接收到的数据交互请求确定与应用进行数据交互的目标数据源、目标元数据,进而根据预先配置好的路由信息,确定目标数据源或者目标元数据所在的数据源,进而调用目标数据源或者目标元数据所在的数据源对应的链接插件执行连接建立、数据交互等过程。
具体的,以管理平台接收到应用对元数据接口的调用操作为例,响应于该应用对元数据接口的调用操作,还包括下述步骤402至步骤405的过程:
在步骤402中,确定与数据交互请求对应的连接标识。
在步骤403中,调用与所述连接标识对应的连接接口,以根据所述连接标识确定目标数据源的数据源接口。
在步骤404中,确定与目标数据源对应的访问控制列表,以根据该访问控制列表对数据交互请求中的用户标识信息进行操作权限校验。
在步骤405中,在用户标识信息通过操作权限校验的情况下,调用目标数据源的数据源接口,以由目标数据源对应的插件与连接管理平台建立数据连接。
在一实施例中,所建立的数据连接可以包括两段式的数据源标识和数据连接标识,其中,数据源标识用于表征目标数据源,数据连接标识中包含用户标识信息,诸如用户的唯一标识信息或者用户名称与密码的组合等。诸如传统配置中数据连接为一段式的,其中,数据源标识和数据连接标识共同构成数据连接,诸如数据连接中既包含由数据源所指定的MySQL的host信息、port信息和数据源信息,也包含由数据连接标识所指定的用户标识信息,例如用户名username和密码password。通过将数据连接设置为两段式的数据源标识和数据连接标识,这使得不论是连接管理平台或者第三方应用程序通过数据源标识便可以区分目标数据源,而无需对数据连接标识进行识别和判断,提高了对目标数据源的识别效率。
在步骤406中,确定任一应用对目标数据源和/或目标元数据的数据交互操作指令,以基于所建立的数据连接对目标数据源和/或目标元数据执行交互操作指令对应的交互操作。
在一实施例中,不同类型的数据源或者同一类型不同版本的数据源对应不同的链接插件,如图5所示,图5是根据本申请一示例性实施例提供的一种数据源链接插件的示意图,示例性地示出了三个应用程序,即应用A、应用B和应用C,以及三个数据源,即数据源A、数据源B和数据源C,其中,数据源A的数据源类型为MySQL类型、数据源B的数据源类型为Oracle类型、数据源C的数据源类型为SQL Server类型。在连接管理平台中的接口层接收到应用A、应用B和应用C发送的数据交互请求的情况下,可以根据数据交互请求确定目标数据源或者目标元数据所在的数据源,例如所确定的目标数据源或者目标元数据所在的数据源分别是数据源A、数据源B和数据源C,相应的,连接管理平台可以通过调用MySQL插件,进而与数据源A中的数据源A链接插件进行交互,从而实现对数据源A或者数据源A中的元数据执行交互操作,类似的,连接管理平台可以通过调用Oracle插件,进而与数据源B中的数据源B链接插件进行交互,从而实现对数据源B或者数据源B中的元数据执行交互操作;连接管理平台可以通过调用SQL Server插件,进而与数据源C中的数据源C链接插件进行交互,以实现对数据源C或者数据源C中的元数据执行交互操作。
不同链接插件中可以包装有不同种类语言的调用包,以实现不对不同类型或者同一类型不同版本的数据源的调用,链接插件可以预先根据对目标数据源、目标元数据或者与目标数据源的数据连接的存储、修改、删除等函数功能封装而成,由于链接插件中封装了数据源本身可执行的函数功能的程序集,这使得链接插件可以根据交互操作指令执行对目标数据源、目标元数据或者与目标数据源的数据连接相应的交互操作。
图6是根据本申请一示例性实施例中的一种电子设备的示意结构图。请参考图6,在硬件层面,该电子设备包括处理器、内部总线、网络接口、内存以及非易失性存储器,当然还可能包括其他业务所需要的硬件。处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行,在逻辑层面上形成数据交互装置。当然,除了软件实现方式之外,本申请并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
请参考图7,图7是根据本申请一示例性实施例中的一种数据交互装置的框图,如图7所示,在软件实施方式中,数据交互装置可以包括:
请求接收模块701,接收所述多个应用中的任一应用发送的数据交互请求;
指令确定模块702,根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令;
操作执行模块703,对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作;
第一信息发送模块704,将与所述交互操作对应的响应信息发送至所述任一应用。
可选的,所述统一的数据交互接口包括元数据接口,所述装置还包括:
连接标识确定模块705,在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述数据交互请求对应的连接标识;
第一接口调用模块706,调用与所述连接标识对应的连接接口,以根据所述连接标识确定目标数据源的数据源接口;
第二接口调用模块707,调用所述目标数据源的数据源接口,以由所述目标数据源的插件与所述连接管理平台建立数据连接。
可选的,所述操作执行模块703具体用于:
基于所述数据连接对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作。
可选的,所述数据连接包括两段式的数据源标识和数据连接标识;
所述操作执行模块703还用于:
根据所述数据源标识对应的访问控制列表对所述数据连接标识中的用户标识信息进行操作权限校验;
在所述用户标识信息通过操作权限校验的情况下,按照所述交互操作指令对所述数据源标识对应的目标数据源和/或目标元数据进行交互操作。
所述操作执行模块703还用于:
确定与所述目标数据源或者目标元数据所在的数据源对应的链接插件,以由所述链接插件实现与所述目标数据源或者目标元数据所在的数据源建立数据连接,其中,所述链接插件是根据所述目标数据源或者目标元数据所在的数据源的接入方式而确定的。
可选的,所述统一的数据交互接口包括连接配置接口或者数据源配置接口,所述装置还包括:
插件确定模块708,在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述目标数据源或者目标元数据所在的数据源对应的链接插件,以由所述链接插件实现与所述目标数据源或者目标元数据所在的数据源建立数据连接,其中,所述链接插件是根据所述目标数据源或者目标元数据所在的数据源的接入方式而确定的。
可选的,还包括:
数据比对模块709,对所述至少一个数据源中的当前元数据与预先维护的预设时刻时的历史元数据进行比对;
第二信息发送模块710,在经过比对后确定所述历史元数据与所述当前元数据存在差异的情况下,向所述多个应用中任一应用发送数据变动提示信息。
所述装置与上述方法相对应,更多相同的细节不再一一赘述。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
虽然本说明书包含许多具体实施细节,但是这些不应被解释为限制任何发明的范围或所要求保护的范围,而是主要用于描述特定发明的具体实施例的特征。本说明书内在多个实施例中描述的某些特征也可以在单个实施例中被组合实施。另一方面,在单个实施例中描述的各种特征也可以在多个实施例中分开实施或以任何合适的子组合来实施。此外,虽然特征可以如上所述在某些组合中起作用并且甚至最初如此要求保护,但是来自所要求保护的组合中的一个或多个特征在一些情况下可以从该组合中去除,并且所要求保护的组合可以指向子组合或子组合的变型。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (12)

1.一种数据交互方法,其特征在于,应用于连接管理平台,所述连接管理平台与多个应用和至少一个数据源连接,所述连接管理平台上配置有供所述应用调用的数据交互接口,所述方法包括:
响应于所述多个应用中的任一应用对统一的数据交互接口的调用操作,确定所述多个应用中的任一应用发送的数据交互请求;所述统一的数据交互接口包括元数据接口;
根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令;
对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作;
将与所述交互操作对应的响应信息发送至所述任一应用;
所述方法还包括:
在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述数据交互请求对应的连接标识;
调用与所述连接标识对应的连接接口,以根据所述连接标识确定目标数据源的数据源接口;
调用所述目标数据源的数据源接口,以由所述目标数据源对应的插件与所述连接管理平台建立数据连接。
2.根据权利要求1所述方法,其特征在于,所述对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作,包括:
基于所述数据连接对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作。
3.根据权利要求1所述方法,其特征在于,所述数据连接包括两段式的数据源标识和数据连接标识;
所述基于所述数据连接对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作,包括:
根据所述数据源标识对应的访问控制列表对所述数据连接标识中的用户标识信息进行操作权限校验;
在所述用户标识信息通过操作权限校验的情况下,按照所述交互操作指令对所述数据源标识对应的目标数据源和/或目标元数据进行交互操作。
4.根据权利要求1所述方法,其特征在于,所述统一的数据交互接口包括连接配置接口或者数据源配置接口,所述方法还包括:
在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述目标数据源或者目标元数据所在的数据源对应的链接插件,以由所述链接插件实现与所述目标数据源或者目标元数据所在的数据源建立数据连接,其中,所述链接插件是根据所述目标数据源或者目标元数据所在的数据源的接入方式而确定的。
5.根据权利要求1所述方法,其特征在于,还包括:
对所述至少一个数据源中的当前元数据与预先维护的预设时刻的历史元数据进行比对;
在经过比对后确定所述历史元数据与所述当前元数据存在差异的情况下,向所述多个应用中任一应用发送数据变动提示信息。
6.一种数据交互装置,其特征在于,应用于连接管理平台,所述连接管理平台与多个应用和至少一个数据源连接,所述连接管理平台上配置有供所述应用调用的数据交互接口,所述装置包括:
请求接收模块,响应于所述多个应用中的任一应用对统一的数据交互接口的调用操作,确定所述多个应用中的任一应用发送的数据交互请求;所述统一的数据交互接口包括元数据接口;
指令确定模块,根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令;
操作执行模块,对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作;
第一信息发送模块,将与所述交互操作对应的响应信息发送至所述任一应用;
所述装置还包括:
连接标识确定模块,在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述数据交互请求对应的连接标识;
第一接口调用模块,调用与所述连接标识对应的连接接口,以根据所述连接标识确定目标数据源的数据源接口;
第二接口调用模块,调用所述目标数据源的数据源接口,以由所述目标数据源的插件与所述连接管理平台建立数据连接。
7.根据权利要求6所述装置,其特征在于,所述操作执行模块具体用于:
基于所述数据连接对所述目标数据源和/或目标元数据执行与所述交互操作指令对应的交互操作。
8.根据权利要求6所述装置,其特征在于,所述数据连接包括两段式的数据源标识和数据连接标识;
所述操作执行模块还用于:
根据所述数据源标识对应的访问控制列表对所述数据连接标识中的用户标识信息进行操作权限校验;
在所述用户标识信息通过操作权限校验的情况下,按照所述交互操作指令对所述数据源标识对应的目标数据源和/或目标元数据进行交互操作。
9.根据权利要求6所述装置,其特征在于,所述统一的数据交互接口包括连接配置接口或者数据源配置接口,所述装置还包括:
插件确定模块,在根据所述数据交互请求确定作用于目标数据源和/或目标元数据的交互操作指令之前,确定与所述目标数据源或者目标元数据所在的数据源对应的链接插件,以由所述链接插件实现与所述目标数据源或者目标元数据所在的数据源建立数据连接,其中,所述链接插件是根据所述目标数据源或者目标元数据所在的数据源的接入方式而确定的。
10.根据权利要求6所述装置,其特征在于,还包括:
数据比对模块,对所述至少一个数据源中的当前元数据与预先维护的预设时刻的历史元数据进行比对;
第二信息发送模块,在经过比对后确定所述历史元数据与所述当前元数据存在差异的情况下,向所述多个应用中任一应用发送数据变动提示信息。
11.一种电子设备,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为可执行指令以实现如权利要求1-5中任一项所述的方法。
12.一种计算机可读存储介质,其上存储有计算机指令,其特征在于,该指令被处理器执行时实现如权利要求1-5中任一项所述方法的步骤。
CN202010537412.4A 2020-06-12 2020-06-12 一种数据交互方法、装置、电子设备及存储介质 Active CN111767330B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010537412.4A CN111767330B (zh) 2020-06-12 2020-06-12 一种数据交互方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010537412.4A CN111767330B (zh) 2020-06-12 2020-06-12 一种数据交互方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN111767330A CN111767330A (zh) 2020-10-13
CN111767330B true CN111767330B (zh) 2022-02-25

Family

ID=72720807

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010537412.4A Active CN111767330B (zh) 2020-06-12 2020-06-12 一种数据交互方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN111767330B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104182228A (zh) * 2014-08-22 2014-12-03 徐增超 一种创建网络应用的方法和系统
CN109189841A (zh) * 2018-07-24 2019-01-11 中国电力科学研究院有限公司 一种多数据源访问方法及系统
CN111241173A (zh) * 2019-12-29 2020-06-05 航天信息股份有限公司 一种用于多个系统间数据交互的方法及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130312049A1 (en) * 2012-05-21 2013-11-21 Gomiso, Inc. Authoring, archiving, and delivering time-based interactive tv content

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104182228A (zh) * 2014-08-22 2014-12-03 徐增超 一种创建网络应用的方法和系统
CN109189841A (zh) * 2018-07-24 2019-01-11 中国电力科学研究院有限公司 一种多数据源访问方法及系统
CN111241173A (zh) * 2019-12-29 2020-06-05 航天信息股份有限公司 一种用于多个系统间数据交互的方法及系统

Also Published As

Publication number Publication date
CN111767330A (zh) 2020-10-13

Similar Documents

Publication Publication Date Title
EP3353672B1 (en) Method and apparatus for transferring data between databases
CN108959385B (zh) 数据库部署方法、装置、计算机设备和存储介质
CN112328363B (zh) 一种云硬盘挂载方法及其装置
CN108664343B (zh) 一种微服务的有状态调用方法及装置
CN114189525B (zh) 服务请求方法、装置和电子设备
CN114356521A (zh) 任务调度方法、装置、电子设备及存储介质
CN113986402A (zh) 函数调用方法、装置、电子设备及存储介质
US20240205292A1 (en) Data processing method and apparatus, computer device, and computer-readable storage medium
CN115098426A (zh) Pcie设备管理方法、接口管理模块、pcie系统、设备和介质
CN114710549A (zh) 一种容器平台中网卡的动态管理方法、系统及业务节点
CN114020444A (zh) 一种企业数字中台中资源服务应用的调用系统和方法
CN111767330B (zh) 一种数据交互方法、装置、电子设备及存储介质
CN112738181A (zh) 集群外部ip接入的方法、装置及服务器
CN112860507A (zh) 分布式链路跟踪系统采样率的控制方法和装置
CN106855821B (zh) 一种分布式事务处理方法及装置
CN117273628A (zh) 基于流程自动化的业务处理系统、方法、装置和介质
CN110928941A (zh) 一种数据分片抽取方法及装置
CN112988738A (zh) 用于区块链的数据分片方法和装置
CN114281818A (zh) 数据处理方法、装置、服务器和存储介质
CN115063198A (zh) SaaS服务下对EPR软件进行数据访问的方法及设备、介质
CN113553193A (zh) 一种镜像数据审计分配处理方法和系统
CN114363211A (zh) 一种灾备系统网络的网络连通验证方法及相关设备
CN107704557B (zh) 操作互斥数据的处理方法、装置、计算机设备和存储介质
CN112130900A (zh) 一种bmc的用户信息管理方法、系统、设备以及介质
CN112749149A (zh) 数据库切换方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant