CN116860859B - 一种多源异构数据的接口创建方法、装置及电子设备 - Google Patents

一种多源异构数据的接口创建方法、装置及电子设备 Download PDF

Info

Publication number
CN116860859B
CN116860859B CN202311120377.6A CN202311120377A CN116860859B CN 116860859 B CN116860859 B CN 116860859B CN 202311120377 A CN202311120377 A CN 202311120377A CN 116860859 B CN116860859 B CN 116860859B
Authority
CN
China
Prior art keywords
interface
data
target
database
output parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202311120377.6A
Other languages
English (en)
Other versions
CN116860859A (zh
Inventor
杜军龙
周剑涛
文剑
刘韶辉
张菁
贾若
钱丽
来敏涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangxi Provincial Information Center Jiangxi Provincial Electronic Government Network Management Center Jiangxi Provincial Credit Center Jiangxi Provincial Big Data Center
Taiji Computer Corp Ltd
Original Assignee
Jiangxi Provincial Information Center Jiangxi Provincial Electronic Government Network Management Center Jiangxi Provincial Credit Center Jiangxi Provincial Big Data Center
Taiji Computer Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangxi Provincial Information Center Jiangxi Provincial Electronic Government Network Management Center Jiangxi Provincial Credit Center Jiangxi Provincial Big Data Center, Taiji Computer Corp Ltd filed Critical Jiangxi Provincial Information Center Jiangxi Provincial Electronic Government Network Management Center Jiangxi Provincial Credit Center Jiangxi Provincial Big Data Center
Priority to CN202311120377.6A priority Critical patent/CN116860859B/zh
Publication of CN116860859A publication Critical patent/CN116860859A/zh
Application granted granted Critical
Publication of CN116860859B publication Critical patent/CN116860859B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/252Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请关于一种多源异构数据的接口创建方法、装置及电子设备。具体方案为:响应于接收到接口创建指示,根据接口创建指示获取目标数据库中的目标数据;根据接口创建指示获取目标接口配置数据;确定输出参数项的预设处理规则;基于接口创建信息、输入参数项、输出参数项和预设处理规则,创建目标接口。本申请降低了用户对多源异构数据服务接口开发的难度,提高了接口开发质量和效率。

Description

一种多源异构数据的接口创建方法、装置及电子设备
技术领域
本申请涉及计算机技术领域,尤其涉及一种多源异构数据的接口创建方法、装置及电子设备。
背景技术
相关技术中,数据接口的开发,往往是基于确定的业务需求,由开发人员运用专业技术及工具,完成该项功能的定向开发,业务人员往往不具备数据接口的开发能力,需要委托外部技术公司实施建设,这种方式存在业务沟通成本过大、建设实施周期长和技术资源浪费的问题。
其中,关于业务沟通成本过大的问题,由于部分技术公司不了解数据应用业务,需要与业务人员进行需求的沟通、确认及验证等几个阶段,这个过程需要反复进行“发现问题-反馈问题-整改问题-检查改进”的沟通,导致数据服务开发过程存在较大的沟通成本。
关于实施建设周期,由于系统的建设往往要经历项目立项、审批、招投标、验收等环节,从项目需求提出到验收应用大量时间浪费在这些流程上,对应短小精干的数据服务应用开发而言显然不适合,很多数据服务需求因为程序复杂耗时长,不能落地实施,进而导致数据应用水平较低,间接致使数据质量问题难以发现,从而进入数据服务应用难以实施的恶性循环。
此外,由于数据接口开发属于定制开发,但从开发的过程分析,不同数据接口开发存在较多共性能力的重复建设,如数据的获取与处理、接口的开发、服务开放的等能力建设,随着数据应用程度的不断加剧,目前的建设模式将造成资源的严重浪费。
多源异构数据聚合接口服务开发难度大,质量难以保障。数据应用接口开发,通常需要解决数据来源问题、异构数据统一类型转换问题和数据加工逻辑处理问题,通常通过数据共享交换平台,订阅数据、提出数据、装载数据等环节,耗时较长,过程繁琐。且异构数据的转化和数据加工处理则存在一定的技术门槛,通常要根据数据类型,选择工具、方式完成特定类型的转换,这个过程需要反复验证,确定无误,同时对于数据加工逻辑运算过程的配置,较为复杂,特别是涉及多层嵌套的数据运算,难度较大。
发明内容
为此,本申请提供一种多源异构数据的接口创建方法、装置及电子设备。本申请的技术方案如下:
根据本申请实施例的第一方面,提供一种多源异构数据的接口创建方法,所述方法包括:
响应于接收到接口创建指示,根据所述接口创建指示获取目标数据库中的目标数据;
根据所述接口创建指示获取目标接口配置数据;所述目标接口配置数据包括接口创建信息、目标接口的输入参数项和输出参数项;
确定所述输出参数项的预设处理规则;
基于所述接口创建信息、所述输入参数项、所述输出参数项和所述预设处理规则,创建目标接口;其中,所述基于所述接口创建信息、所述输入参数项、所述输出参数项和所述预设处理规则,创建目标接口,包括:基于所述输入参数项,确定与所述输入参数项对应的至少一个目标数据;基于所述至少一个目标数据,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第一接口,将所述第一接口确定为目标接口;和/或,基于所述至少一个目标数据和其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第二接口,将所述第二接口确定为目标接口;和/或,基于多个其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第三接口,将所述第三接口确定为目标接口。
根据本申请的一个实施例,所述目标数据库包括第一数据库和第二数据库,所述第一数据库有多个,所述第二数据库是根据预设规则基于至少一个所述第一数据库中存储的数据生成的。
根据本申请的一个实施例,所述目标数据有多项,所述根据所述接口创建指示获取目标数据库中的目标数据,包括:
所述根据所述接口创建指示确定目标数据;
在所述第二数据库中查询所述目标数据,得到查询结果;
响应于所述查询结果为所述第二数据库中查询到全部目标数据,获取所述第二数据库中的全部目标数据;
响应于所述查询结果为所述第二数据库中查询到多项目标数据中的部分目标数据,获取所述第二数据库中的全部目标数据,在所述第一数据库中获取多项目标数据中除所述第二数据库中全部目标数据以外的目标数据;
响应于所述查询结果为所述第二数据库中未查询到目标数据,在所述第一数据库中获取所述目标数据。
根据本申请的一个实施例,所述根据所述接口创建指示获取目标数据库中的目标数据,还包括:
所述根据所述接口创建指示确定目标数据;
获取所述目标数据库中的所述目标数据;
响应于所述目标数据为库表数据,将所述目标数据存储至本地数据库;
响应于所述目标数据为文件数据,对所述目标数据进行解析处理,将解析结果转换为结构化库表数据,将所述结构化库表数据存储至所述本地数据库。
根据本申请的一个实施例,在所述响应于接收到接口创建指示,根据所述接口创建指示获取目标数据库中的目标数据之前,还包括:
获取用户的身份信息,对所述身份信息进行验证;
响应于所述身份信息验证通过,获取所述用户的待创建接口的历史目标接口配置数据。
根据本申请实施例的第二方面,提供一种多源异构数据的接口创建装置,所述装置包括:
第一获取模块,用于响应于接收到接口创建指示,根据所述接口创建指示获取目标数据库中的目标数据;
第二获取模块,用于根据所述接口创建指示获取目标接口配置数据;所述目标接口配置数据包括接口创建信息、目标接口的输入参数项和输出参数项;
确定模块,用于确定所述输出参数项的预设处理规则;
创建模块,用于基于所述接口创建信息、所述输入参数项、所述输出参数项和所述预设处理规则,创建目标接口;其中,所述基于所述接口创建信息、所述输入参数项、所述输出参数项和所述预设处理规则,创建目标接口,包括:基于所述输入参数项,确定与所述输入参数项对应的至少一个目标数据;基于所述至少一个目标数据,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第一接口,将所述第一接口确定为目标接口;和/或,基于所述至少一个目标数据和其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第二接口,将所述第二接口确定为目标接口;和/或,基于多个其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第三接口,将所述第三接口确定为目标接口。
根据本申请实施例的第三方面,提供一种电子设备,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如第一方面中任一项所述的方法。
根据本申请实施例的第四方面,提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现如第一方面中任一项所述的方法。
根据本申请实施例的第五方面,提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现第一方面中任一项所述的方法。
本申请的实施例提供的技术方案至少带来以下有益效果:
通过响应于接收到接口创建指示,根据接口创建指示获取目标数据库中的目标数据;根据接口创建指示获取目标接口配置数据;确定输出参数项的预设处理规则;基于接口创建信息、输入参数项、输出参数项和预设处理规则,创建目标接口。从而实现了导向化的数据服务接口自定义开发,降低了用户对多源异构数据服务接口开发的难度,提高了接口开发质量和效率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理,并不构成对本申请的不当限定。
图1为本申请实施例中的一种多源异构数据的接口创建方法的流程图;
图2为本申请实施例中的一种多源异构数据的接口创建装置的结构框图;
图3为本申请实施例中的一种电子设备的框图。
具体实施方式
为了使本领域普通人员更好地理解本申请的技术方案,下面将结合附图,对本申请实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
需要说明的是,数据接口的开发,往往是基于确定的业务需求,由开发人员运用专业技术及工具,完成该项功能的定向开发,业务人员往往不具备数据接口的开发能力,需要委托外部技术公司实施建设,这种方式存在业务沟通成本过大、建设实施周期长和共性数据接口开发能力重复建设等问题。
基于上述问题,本申请提出了一种多源异构数据的接口创建方法、装置及电子设备,可以实现通过响应于接收到接口创建指示,根据接口创建指示获取目标数据库中的目标数据;根据接口创建指示获取目标接口配置数据;确定输出参数项的预设处理规则;基于接口创建信息、输入参数项、输出参数项和预设处理规则,创建目标接口。从而实现了导向化的数据服务接口定制化开发,降低了用户对多源异构数据服务接口开发的难度,提高了接口开发质量和效率。
图1为本申请实施例中的一种多源异构数据的接口创建方法的流程图。
如图1所示,该多源异构数据的接口创建方法包括:
步骤101,响应于接收到接口创建指示,根据接口创建指示获取目标数据库中的目标数据。
其中,在本申请一些实施例中,目标数据库包括第一数据库和第二数据库,第一数据库有多个,第二数据库是根据预设规则基于至少一个第一数据库中存储的数据生成的,步骤101包括:
步骤a1,响应于接收到接口创建指示,根据接口创建指示确定目标数据。
需要说明的是,第一数据库和第二数据库可以是数据共享交换平台上的数据库,数据共享交换平台上存在多个数据源,每个数据源均可以对应有一个第一数据库,由于第一数据库数量较多,数据量巨大,为更加高效的共享数据,可以根据不同的主题创建多个第二数据库,每个第二数据库中的数据可以是根据所属主题由某一个第一数据库中的数据抽取得到,还可以是根据所属主题由多个第一数据库中的数据进行抽取得到的。
步骤a2,在第二数据库中查询目标数据,得到查询结果。
步骤a3,响应于查询结果为第二数据库中查询到全部目标数据,获取第二数据库中的全部目标数据。
步骤a4,响应于查询结果为第二数据库中查询到多项目标数据中的部分目标数据,获取第二数据库中的全部目标数据,在第一数据库中获取多项目标数据中除第二数据库中全部目标数据以外的数据。
步骤a5,响应于查询结果为第二数据库中未查询到目标数据,在第一数据库中获取目标数据。
作为一种可能实施方式的示例,响应于接收到接口创建指示,若在第二数据库中查询到全部目标数据,则查询结束;若仅在第二数据库中查询到部分目标数据,则在第一数据库中查询多项目标数据中除所述第二数据库中全部目标数据以外的目标数据;在第二数据库中未查询到目标数据,则在第一数据库中查询目标数据。
其中,在本申请一些实施例中,步骤101还包括:
步骤b1,根据接口创建指示确定目标数据。
步骤b2,获取目标数据库中的目标数据。
步骤b3,响应于目标数据为库表数据,将目标数据存储至本地数据库。
步骤b4,响应于目标数据为文件数据,对目标数据进行解析处理,将解析结果转换为结构化库表数据,将结构化库表数据存储至本地数据库。
作为一种可能实施方式的示例,用户可以预先通过数据目录系统对目标数据进行订阅申请,并由同一身份认证系统进行身份权限验证,若验证通过,则用户能够订阅到目标数据,根据接口创建指示,将目标数据存储至本地数据库。多源数据多租户数据处理模式,保障租户数据安全独立。基于共享交换平台,获取数据资源,建立面对租户的数据库,按照需求实现对订阅数据进行抽取和目标库自动装载,接口数据则依据统一身份认证进行认证,完成数据处理工作。
作为一种可能实施的示例,用户通过对订阅数据的查询,选定所需数据,根据数据类型进行数据的转换或独立存储,数据类型主要分为库表数据和文件数据两类,其中库表数据直接从目标数据库中获取所需的数据,基于用户信息,将数据复制进入本地数据库;文件数据则是通过对选定的文件进行解析读取转换为结构化库表数据,并将其转存在用户的本地数据库中。通过整合、标准化多类数据的转换,最大限度降低了数据转换问题发生的概率。
其中,在本申请一些实施例中,在步骤101之前,该多源异构数据的接口创建方法还包括:
步骤c1,获取用户的身份信息,验证用户的身份信息。
步骤c2,响应于身份信息验证通过,获取用户的待创建接口的历史目标接口配置数据。
作为一种可能实施的示例,在用户进行登录操作时,获取客户端发送的用户的身份信息,对身份信息进行验证,响应于身份信息验证通过,获取用户的待创建接口的历史目标接口配置数据,并将历史目标接口配置数据发送至客户端的对应位置上,从而避免用户对已上传的配置数据重复配置,提高了用户的使用体验和接口配置效率。
步骤102,根据接口创建指示获取目标接口配置数据。
其中,在本申请一些实施例中,目标接口配置数据包括接口创建信息、目标接口的输入参数项和输出参数项。
作为一种可能实施方式的示例,接口创建信息可以包括接口名称、接口URL、接口HTTP的请求方法、数据源和接口描述等信息,以用于完成接口主体的创建。其中,接口HTTP的请求方法可以包括以下任意一种或多种:Get、Post、Delete、Put、Head。
可选的,目标接口配置数据还可以包括以下任意一项或者多项:数据项类型、数据项是否为空、数据项是否唯一、数据范围、外键约束、数据项是否可以模糊输入。
步骤103,确定输出参数项的预设处理规则。
可以理解的是,需要按照预设处理规则对输入参数和目标数据进行处理,以得到输出参数。
可选的,预设处理规则可以是目标数据的简单组合,还可以是针对目标数据和输入参数之间设定的计算规则。可以依据数据服务的业务逻辑,对所选数据源中数据项进行逻辑运算和数据运行,可以实现多数据表、数据表-接口,接口-接口等多种组合数据的逻辑运算处理。同时支撑逻辑运算的多层嵌套运算。
步骤104,基于接口创建信息、输入参数项、输出参数项和预设处理规则,创建目标接口。
其中,步骤104包括:
步骤d1,基于输入参数项,确定与输入参数项对应的至少一个目标数据。
步骤d2,基于至少一个目标数据,根据接口创建信息和输出参数项对应的预设处理规则,创建第一接口,将该第一接口确定为目标接口。
其中,第一接口可以根据单张数据表或者多张数据表确定输出参数值,通过库表-库表数据组合的接口数据类型转化,实现单表或多表的数据项入参和出参配置形式。
步骤d3,基于至少一个目标数据和其他接口的输出参数项,根据接口创建信息和输出参数项对应的预设处理规则,创建第二接口,将该第二接口确定为目标接口。
其中,第二接口可以根据接口与数据表确定输出参数值,通过接口数据-库表数据组合的接口数据类型转化,实现接口-表的数据项入参和出参配置形式。可选地,数据表可以是单张数据表,还可以是多张数据表。
步骤d4,基于多个其他接口的输出参数项,根据接口创建信息和输出参数项对应的预设处理规则,创建第三接口,将该第三接口确定为目标接口。
其中,第三接口可以根据多个接口的输出参数项对应的输出参数值确定本接口的输出参数值,通过接口-接口数据组合的接口数据类型转化,实现接口-接口的数据项入参和出参配置形式。
可选的,上述输出参数值的配置方法可以包括数据项入参和出参名称的设置、数据类型、加密脱敏处理、模糊输入设置、表连接数据项及其条件的设定。其中加密处理对接国密平台,调用加密机密算法完成对该字段机密;脱敏处理则依据脱敏数据类型,可以选择哈希脱敏、遮盖脱敏、替换脱敏、变换脱敏等完成对数据项的脱敏处理。
需要说明的是,用户可以通过客户端可视化的进行接口创建指示以及目标接口的数据配置,还可以通过客户端查看基于接口创建指示以及目标接口配置数据生成的接口创建结果,有效提高了用户的接口配置效率。
在本申请的一些实施例中,该多源异构数据的接口创建方法还可以包括对数据接口的管理,包括接口注册、发布\停用、删除及监控等操作。接口的注册:主要填写接口基本信息,出参入参,配置接口路由及授权用户信息,完成接口的服务注册;发布\停用:基于数据接口状态进行该服务的发布和停用操作,发布将完成对授权用户开放该服务,其他用户可通过订阅该服务方式,进行该服务使用,停用即对所有用户屏蔽该服务;监控:调用服务监控信息,对该服务调用数量、响应时间、告警信息、申请用户等信息进行监控。
根据本申请实施例的多源异构数据的接口创建方法,通过响应于接收到接口创建指示,根据接口创建指示获取目标数据库中的目标数据;根据接口创建指示获取目标接口配置数据;确定输出参数项的预设处理规则;基于接口创建信息、输入参数项、输出参数项和预设处理规则,通过多种形式的数据项入参和出参配置创建目标接口,解决了异构数据服务一站式开发问题。通过不同接口数据类型转化,基于标准化加工处理方式,从而实现了导向化的数据服务接口自定义开发及异构数据服务综合接口开发,降低了用户对多源异构数据服务接口开发的难度,提高了接口开发质量和效率。
图2为本申请实施例中的一种多源异构数据的接口创建装置的流程图。
如图2所示,该多源异构数据的接口创建装置包括:
第一获取模块201,用于响应于接收到接口创建指示,根据接口创建指示获取目标数据库中的目标数据;
第二获取模块202,用于根据接口创建指示获取目标接口配置数据;目标接口配置数据包括接口创建信息、目标接口的输入参数项和输出参数项;
确定模块203,用于确定输出参数项的预设处理规则;
创建模块204,用于基于接口创建信息、输入参数项、输出参数项和预设处理规则,创建目标接口;其中,所述基于所述接口创建信息、所述输入参数项、所述输出参数项和所述预设处理规则,创建目标接口,包括:基于所述输入参数项,确定与所述输入参数项对应的至少一个目标数据;基于所述至少一个目标数据,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第一接口,将所述第一接口确定为目标接口;和/或,基于所述至少一个目标数据和其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第二接口,将所述第二接口确定为目标接口;和/或,基于多个其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第三接口,将所述第三接口确定为目标接口。
根据本申请实施例的多源异构数据的接口创建装置,通过响应于接收到接口创建指示,根据接口创建指示获取目标数据库中的目标数据;根据接口创建指示获取目标接口配置数据;确定输出参数项的预设处理规则;基于接口创建信息、输入参数项、输出参数项和预设处理规则,通过多种形式的数据项入参和出参配置创建目标接口,解决了异构数据服务一站式开发问题。通过不同接口数据类型转化,基于标准化加工处理方式,从而实现了导向化的数据服务接口自定义开发及异构数据服务综合接口开发,降低了用户对多源异构数据服务接口开发的难度,提高了接口开发质量和效率。
图3为本申请实施例中的一种电子设备的框图。如图3所示,该电子设备可以包括:收发器31、处理器32、存储器33。
处理器32执行存储器存储的计算机执行指令,使得处理器32执行上述实施例中的方案。处理器32可以是通用处理器,包括中央处理器CPU、网络处理器(network processor,NP)等;还可以是数字信号处理器DSP、专用集成电路ASIC、现场可编程门阵列FPGA或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
存储器33通过系统总线与处理器32连接并完成相互间的通信,存储器33用于存储计算机程序指令。
收发器31可以用于获取待运行任务和待运行任务的配置信息。
系统总线可以是外设部件互连标准(peripheral component interconnect,PCI)总线或扩展工业标准结构(extended industry standard architecture,EISA)总线等。系统总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。收发器用于实现数据库访问装置与其他计算机(例如客户端、读写库和只读库)之间的通信。存储器可能包含随机存取存储器(randomaccess memory,RAM),也可能还包括非易失性存储器(non-volatile memory)。
本申请实施例提供的电子设备,可以是上述实施例的终端设备。
本申请实施例还提供一种运行指令的芯片,该芯片用于执行上述实施例中多源异构数据的接口创建方法的技术方案。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机指令,当该计算机指令在计算机上运行时,使得计算机执行上述实施例多源异构数据的接口创建方法的技术方案。
本申请实施例还提供一种计算机程序产品,该计算机程序产品包括计算机程序,其存储在计算机可读存储介质中,至少一个处理器可以从计算机可读存储介质读取计算机程序,至少一个处理器执行计算机程序时可实现上述实施例中多源异构数据的接口创建方法的技术方案。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求书指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求书来限制。

Claims (7)

1.一种多源异构数据的接口创建方法,其特征在于,所述方法包括:
响应于接收到接口创建指示,根据所述接口创建指示获取目标数据库中的目标数据;
根据所述接口创建指示获取目标接口配置数据;所述目标接口配置数据包括接口创建信息、目标接口的输入参数项和输出参数项;
确定所述输出参数项的预设处理规则;
基于所述接口创建信息、所述输入参数项、所述输出参数项和所述预设处理规则,创建目标接口,包括:
基于所述输入参数项,确定与所述输入参数项对应的至少一个目标数据;
基于所述至少一个目标数据,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第一接口,将所述第一接口确定为目标接口;基于所述至少一个目标数据和其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第二接口,将所述第二接口确定为目标接口;基于多个其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第三接口,将所述第三接口确定为目标接口;
其中,所述第一接口根据单张数据表或者多张数据表确定输出参数值,通过库表-库表数据组合的接口数据类型转化,实现单表或多表的数据项入参和出参配置形式;
所述第二接口根据接口与数据表确定输出参数值,通过接口数据-库表数据组合的接口数据类型转化,实现接口-表的数据项入参和出参配置形式;
所述第三接口根据多个接口的输出参数项对应的输出参数值确定本接口的输出参数值,通过接口-接口数据组合的接口数据类型转化,实现接口-接口的数据项入参和出参配置形式;
所述根据所述接口创建指示获取目标数据库中的目标数据,还包括:
所述根据所述接口创建指示确定目标数据;
获取所述目标数据库中的所述目标数据;
响应于所述目标数据为库表数据,将所述目标数据存储至本地数据库;
响应于所述目标数据为文件数据,对所述目标数据进行解析处理,将解析结果转换为结构化库表数据,将所述结构化库表数据存储至所述本地数据库。
2.根据权利要求1所述的方法,其特征在于,所述目标数据库包括第一数据库和第二数据库,所述第一数据库有多个,所述第二数据库是根据预设规则基于至少一个所述第一数据库中存储的数据生成的。
3.根据权利要求2所述的方法,其特征在于,所述目标数据有多项,所述根据所述接口创建指示获取目标数据库中的目标数据,包括:
根据所述接口创建指示确定目标数据;
在所述第二数据库中查询所述目标数据,得到查询结果;
响应于所述查询结果为所述第二数据库中查询到全部目标数据,获取所述第二数据库中的全部目标数据;
响应于所述查询结果为所述第二数据库中查询到多项目标数据中的部分目标数据,获取所述第二数据库中的全部目标数据,在所述第一数据库中获取多项目标数据中除所述第二数据库中全部目标数据以外的目标数据;
响应于所述查询结果为所述第二数据库中未查询到目标数据,在所述第一数据库中获取所述目标数据。
4. 根据权利要求1所述的方法,其特征在于,在所述响应于接收到接口创建指示,根据所述接口创建指示获取目标数据库中的目标数据之前, 还包括:
获取用户的身份信息,对所述身份信息进行验证;
响应于所述身份信息验证通过,获取所述用户的待创建接口的历史目标接口配置数据。
5.一种多源异构数据的接口创建装置,其特征在于,所述装置包括:
第一获取模块,用于响应于接收到接口创建指示,根据所述接口创建指示获取目标数据库中的目标数据;
第二获取模块,用于根据所述接口创建指示获取目标接口配置数据;所述目标接口配置数据包括接口创建信息、目标接口的输入参数项和输出参数项;
确定模块,用于确定所述输出参数项的预设处理规则;
创建模块,用于基于所述接口创建信息、所述输入参数项、所述输出参数项和所述预设处理规则,创建目标接口;其中,所述基于所述接口创建信息、所述输入参数项、所述输出参数项和所述预设处理规则,创建目标接口,包括:基于所述输入参数项,确定与所述输入参数项对应的至少一个目标数据;基于所述至少一个目标数据,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第一接口,将所述第一接口确定为目标接口;基于所述至少一个目标数据和其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第二接口,将所述第二接口确定为目标接口;基于多个其他接口的输出参数项,根据所述接口创建信息和所述输出参数项对应的预设处理规则,创建第三接口,将所述第三接口确定为目标接口;
其中,所述第一接口根据单张数据表或者多张数据表确定输出参数值,通过库表-库表数据组合的接口数据类型转化,实现单表或多表的数据项入参和出参配置形式;
所述第二接口根据接口与数据表确定输出参数值,通过接口数据-库表数据组合的接口数据类型转化,实现接口-表的数据项入参和出参配置形式;
所述第三接口根据多个接口的输出参数项对应的输出参数值确定本接口的输出参数值,通过接口-接口数据组合的接口数据类型转化,实现接口-接口的数据项入参和出参配置形式;
所述第一获取模块,还用于:
所述根据所述接口创建指示确定目标数据;
获取所述目标数据库中的所述目标数据;
响应于所述目标数据为库表数据,将所述目标数据存储至本地数据库;
响应于所述目标数据为文件数据,对所述目标数据进行解析处理,将解析结果转换为结构化库表数据,将所述结构化库表数据存储至所述本地数据库。
6.一种电子设备,其特征在于,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如权利要求1-4中任一项所述的方法。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现如权利要求1-4中任一项所述的方法。
CN202311120377.6A 2023-09-01 2023-09-01 一种多源异构数据的接口创建方法、装置及电子设备 Active CN116860859B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311120377.6A CN116860859B (zh) 2023-09-01 2023-09-01 一种多源异构数据的接口创建方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311120377.6A CN116860859B (zh) 2023-09-01 2023-09-01 一种多源异构数据的接口创建方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN116860859A CN116860859A (zh) 2023-10-10
CN116860859B true CN116860859B (zh) 2023-12-22

Family

ID=88232638

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311120377.6A Active CN116860859B (zh) 2023-09-01 2023-09-01 一种多源异构数据的接口创建方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN116860859B (zh)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006099295A2 (en) * 2005-03-11 2006-09-21 University Of Utah Research Foundation Systems and methods for displaying and querying heterogenous sets of data
CN103678665A (zh) * 2013-12-24 2014-03-26 焦点科技股份有限公司 一种基于数据仓库的异构大数据整合方法和系统
WO2014155380A1 (en) * 2013-03-24 2014-10-02 Orca Interactive Ltd System and method for topics extraction and filtering
CN109376188A (zh) * 2018-09-13 2019-02-22 智恒科技股份有限公司 一种基于主题域的智慧水务大数据融合方法及系统
CN110019141A (zh) * 2017-12-30 2019-07-16 广州明领基因科技有限公司 面向高校教学管理决策的大数据分析系统
CN112148689A (zh) * 2020-10-28 2020-12-29 云赛智联股份有限公司 一种用于城市级数据中台的数据共享交换系统
CN112732680A (zh) * 2021-01-22 2021-04-30 浪潮卓数大数据产业发展有限公司 一种数据仓库设计方法
WO2022126966A1 (zh) * 2020-12-15 2022-06-23 平安科技(深圳)有限公司 接口参数校验与转换方法、装置、设备及存储介质
CN114661407A (zh) * 2022-05-20 2022-06-24 浙江简捷物联科技有限公司 一种界面配置的方法、bms和存储介质
CN114741396A (zh) * 2022-04-28 2022-07-12 北京远舢智能科技有限公司 一种数据服务的处理方法、装置、电子设备及存储介质
CA3149710A1 (en) * 2021-02-19 2022-08-19 10353744 Canada Ltd. Data collecting method, device, computer equipment and storage medium
WO2022174356A1 (en) * 2021-02-19 2022-08-25 Chata Technologies Inc. Methods and systems for controlled modeling and optimization of a natural language database interface
CN116186129A (zh) * 2022-12-19 2023-05-30 国网浙江省电力有限公司信息通信分公司 一种多源异构数据的处理方法及装置

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006099295A2 (en) * 2005-03-11 2006-09-21 University Of Utah Research Foundation Systems and methods for displaying and querying heterogenous sets of data
WO2014155380A1 (en) * 2013-03-24 2014-10-02 Orca Interactive Ltd System and method for topics extraction and filtering
CN103678665A (zh) * 2013-12-24 2014-03-26 焦点科技股份有限公司 一种基于数据仓库的异构大数据整合方法和系统
CN110019141A (zh) * 2017-12-30 2019-07-16 广州明领基因科技有限公司 面向高校教学管理决策的大数据分析系统
CN109376188A (zh) * 2018-09-13 2019-02-22 智恒科技股份有限公司 一种基于主题域的智慧水务大数据融合方法及系统
CN112148689A (zh) * 2020-10-28 2020-12-29 云赛智联股份有限公司 一种用于城市级数据中台的数据共享交换系统
WO2022126966A1 (zh) * 2020-12-15 2022-06-23 平安科技(深圳)有限公司 接口参数校验与转换方法、装置、设备及存储介质
CN112732680A (zh) * 2021-01-22 2021-04-30 浪潮卓数大数据产业发展有限公司 一种数据仓库设计方法
CA3149710A1 (en) * 2021-02-19 2022-08-19 10353744 Canada Ltd. Data collecting method, device, computer equipment and storage medium
WO2022174356A1 (en) * 2021-02-19 2022-08-25 Chata Technologies Inc. Methods and systems for controlled modeling and optimization of a natural language database interface
CN114741396A (zh) * 2022-04-28 2022-07-12 北京远舢智能科技有限公司 一种数据服务的处理方法、装置、电子设备及存储介质
CN114661407A (zh) * 2022-05-20 2022-06-24 浙江简捷物联科技有限公司 一种界面配置的方法、bms和存储介质
CN116186129A (zh) * 2022-12-19 2023-05-30 国网浙江省电力有限公司信息通信分公司 一种多源异构数据的处理方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Microblog Topic Mining Based on FR-DATM;LIU Bingyu;WANG Cuirong;WANG Yiran;ZHANG Kun;WANG Cong;;Chinese Journal of Electronics(第02期);全文 *
一种通用的多数据库间数据抽取方法及应用;刘如九;张振山;柴天佑;;北京交通大学学报(第04期);全文 *

Also Published As

Publication number Publication date
CN116860859A (zh) 2023-10-10

Similar Documents

Publication Publication Date Title
US10776107B2 (en) Microservice-based data processing apparatus, method, and program
CN107798038B (zh) 数据响应方法及数据响应设备
CN105283849A (zh) 针对性能和细节的并行跟踪
CN105122230A (zh) 跟踪作为服务
CN105103147A (zh) 用工作负载分发器来跟踪
CN112905323B (zh) 数据处理方法、装置、电子设备及存储介质
CN111488594B (zh) 一种基于云服务器的权限检查方法、装置、存储介质及终端
CN111400288A (zh) 数据质量检查方法及系统
CN111199028A (zh) 资源信息访问方法、装置、计算机设备和存储介质
CN107430557B (zh) 多方加密立方体处理设备、方法和系统
CN111382252A (zh) 基于用户请求的问题类别确定方法、装置、设备及介质
CN115392501A (zh) 数据采集方法、装置、电子设备及存储介质
CN115238247A (zh) 基于零信任数据访问控制系统的数据处理方法
CN117171711B (zh) 一种基于云平台的企业内外部数据融合共享方法及系统
CN114138877A (zh) 基于微服务架构的主题数据服务实现方法、装置及设备
CN116860859B (zh) 一种多源异构数据的接口创建方法、装置及电子设备
CN117493309A (zh) 一种标准模型生成方法、装置、设备及存储介质
CN112835863A (zh) 操作日志的处理方法和处理装置
CN110728118A (zh) 跨数据平台的数据处理方法、装置、设备及存储介质
CN113672361B (zh) 分布式数据处理系统、方法、服务器和可读存储介质
CN113626387A (zh) 一种任务数据的导出方法、装置、电子设备及存储介质
CN111447156A (zh) 一种数据交换方法、装置、电子设备及存储介质
CN112612817A (zh) 数据处理方法、装置、终端设备及计算机可读存储介质
CN111310166A (zh) 权限管理方法、装置、设备及存储介质
CN117648718B (zh) 基于数据源的业务对象显示方法、装置、电子设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant