CN113590085B - 多源异构数据的处理方法、计算机设备、存储介质 - Google Patents
多源异构数据的处理方法、计算机设备、存储介质 Download PDFInfo
- Publication number
- CN113590085B CN113590085B CN202010367069.3A CN202010367069A CN113590085B CN 113590085 B CN113590085 B CN 113590085B CN 202010367069 A CN202010367069 A CN 202010367069A CN 113590085 B CN113590085 B CN 113590085B
- Authority
- CN
- China
- Prior art keywords
- data
- external
- database
- user
- tree
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/20—Software design
- G06F8/24—Object-oriented
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/34—Graphical or visual programming
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Abstract
本发明提供了一种多源异构数据的处理的方法,所述多源异构数据的处理方法包括:从外部对象获取外部数据;获取所述外部对象的类型;提供数据结构图形化界面以供用户配置树形数据结构的示意图;根据所述用户配置的树形数据结构示意图,构建树形数据存储结构;根据所述外部对象的类型从预设映射函数集合中匹配对应的映射函数;以及调用所述匹配的映射函数将所述外部数据映射至所述树形数据存储结构以对所述外部数据进行存储。此外本发明还提供一种计算机设备、以及存储介质。上述多源异构数据的处理方法可以根据用户配置的树形数据结构将不同数据结构类型的数据相映射,支持各种不同数据结构的数据,使得不同产品业务之间数据互通,实现信息、业务集中管理。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种多源异构数据的处理方法、计算机设备、存储介质。
背景技术
随着互联网技术在企业应用领域的发展,且为了降低成本以及量产,企业逐步采用了产品信息化。相应地,市场上从基本的财务、HR、OA、CRM系统建设到移动办公、决策分析等系统不断推陈出新。
一方面,企业真正的信息化需求使得一个企业在不同的业务场景下的数据是可以互通,例如,采购、排产、生产加工、销售、售后等一系列数据是连通的。但另一方面,一个企业在不同的系统之间语言、平台、技术的差异会导致信息片段化的产生。例如,每个业务场景内都需要对涉及的不同信息源(比如:商品、订单等)进行数据刻画,而不同的企业所需要的场景数据又各不相同。例如,一个企业在与其他企业业务数据进行交互时,会面临相互数据不兼容、缺失、过多等问题。即,现有的信息化产品很难达成数据互通,不同产品业务之间数据往往被隔离,业务无法协同,导致出现信息片段化以及无法实现信息、业务集中管理的目标。
可见,针对客观的信息源,在各不相同的业务场景需要刻画的结构各不相同,但在产品信息化过程中,需要不同结构的数据进行互通,才能够实现企业的信息化目标,帮助企业实现良好的资源配置,进一步帮助企业在激烈的社会竞争取得优势。因此,在产品信息化过程中,如何实现支持和创建支持各种数据结构的数据已成为亟需解决的问题。
发明内容
本发明提供一种多源异构数据的处理方法、计算机设备、存储介质,可以将各种不同数据存储结构的数据处理成用户所需的数据。
第一方面,本发明提供一种多源异构数据的处理方法,所述多源异构数据的处理方法包括:
从外部对象获取外部数据;
获取所述外部对象的类型;
提供数据结构图形化界面以供用户配置树形数据结构的示意图;
根据用户配置的树形数据结构示意图,构建树形数据存储结构;
根据所述外部对象的类型从预设映射函数集合中匹配对应的映射函数;以及
调用所述匹配的映射函数将所述外部数据映射至所述树形数据存储结构以对所述外部数据进行存储。
在一些可行的实施例中,获取外部数据之前,所述多源异构数据的处理方法还包括:
提供数据获取图形化界面以供用户配置获取数据的示意图;
根据获取数据的示意图创建获取所述外部数据的请求指令;以及
发送所述外部数据的请求指令给所述外部对象,以使所述外部对象根据所述请求指令返回所述外部数据。
在一些可行的实施例中,所述外部对象包括第三方平台,所述请求指令包括第三方接口数据访问指令,提供数据获取图形化界面之前,所述多源异构数据的处理方法还包括:
根据预设的访问第三方接口编程语句框架生成第三方接口配置图形模板,所述第三方接口配置图形模板用于供用户输入所述访问第三方接口编程语句框架相对应的接口属性数据以及需要访问的数据,所述接口属性数据用于表示所述外部对象的类型;以及
根据用户输入的接口属性数据以及需要访问的数据,配置出所述获取数据的示意图。
在一些可行的实施例中,所述外部对象包括数据库,所述请求指令包括访问数据库指令,提供数据获取图形化界面之前,所述方法具体包括:
根据预设的访问数据库编程语句框架生成对应数据库配置图形模板,所述数据库配置图形模板用于供用户输入所述访问数据库编程语句框架相对应的数据库属性数据;以及
根据用户输入的数据库属性数据配置出所述获取数据的示意图。
在一些可行的实施例中,所述数据结构图形化界面包括提供操作数据库的数据库编程语句框架对应的图标,所述数据库编程语句框架包括多种类型软件开发语言所对应的数据库编程语句框架,所述同类型语言的操作数据库的编程语句框架还包括表示对数据库进行相同操作的不同类型软件开发语言的数据库编程语句框架,所述不同类型软件开发语言用于表示对数据库进行同种操作的数据库编程语言框架对应相同的图标。
在一些可行的实施例中,所述多源异构数据的处理方法还包括:
响应用户对所述图标的搭建操作,生成节点互连的示意图;
响应用户对所述图标的数据配置操作,提供呈树形结构的输入框和输出框以供用户输入相应的输入数据和输出数据,所述每一输入数据与一所述外部数据对应;以及
根据树形结构的输入框中的输入数据和所述互连节点创建出所述树形数据结构。
在一些可行的实施例中,所述树形数据存储结构中的输入数据与全部或者部分所述外部数据一一对应。
在一些可行的实施例中,调用所述匹配的映射函数将所述外部数据映射至所述数据模型以对所述外部数据进行存储,具体包括:
根据所述输入数据找出所需外部数据;以及
根据所述输入数据和所述输出数据的对应关系,将所需的外部数据利用所述树形数据结构进行存储。
本发明还提供一种计算机设备,所述计算设备包括:
存储器,所述存储器用于存储计算机可执行程序;以及
处理器,所述处理器用于执行所述可执行程序以实现如上述所述的多源异构数据的处理方法。
本发明还提供一种存储介质,所述存储介质用于存储计算机可执行程序,所述计算机可执行程序由处理器执行以实现如上述所述的多源异构数据的处理方法。
上述多源异构数据的处理方法、计算机设备、存储介质,可以根据用户配置的树形数据结构将不同数据结构类型的数据相映射,支持各种不同数据结构的数据,使得不同产品业务之间数据互通,实现信息、业务集中管理。
附图说明
图1为本发明第一实施例提供的一种具有多源异构数据的处理功能的软件开发程序运行的环境示意图。
图2为本发明第一实施例提供的树形图示意图。
图3为本发明第一实施例提供的计算机设备的内部结构示意图。
图4为本发明第一实施例提供的实现多源异构数据的处理方法流程示意图。
图5为本发明第一实施例提供的实现多源数据的处理过程示意图。
图6为本发明第一实施例提供多源数据的处理方法的用户界面示意图。
图7为本发明第一实施例提供第一实施例提供多源异构数据的处理方法的子流程示意图。
图8为本发明第二实施例提供第一实施例提供实现多源异构数据的处理方法的子流程示意图。
图9为本发明第二实施例提供多源异构数据的处理方法的用户界面示意图。
图10为本发明第三实施例提供的多源异构数据的处理方法的子流程示意图。
图11为本发明第四实施例提供的多源异构数据的处理方法的子流程示意图。
图12为本发明第三实施例提供的多源异构数据的处理方法的用户界面示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,在本发明中涉及“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本发明要求的保护范围之内。
请参看图1,其为第一实施例提供的具有多源异构数据的处理功能的软件开发程序运行的环境示意图。具有多源异构数据的处理功能的软件开发系统1000包括客户端1001、后台服务器端1002、以及提供源数据的外部对象1004。后台服务器端1002通过网络1003与客户端1001通讯。外部对象1004可以为数据库、第三方接口、数据表等。数据库包括但不限于MySQL、Oracle、NOSQL等;第三方接口包括但不限于Web Service 接口、RPC 接口、HTTP 接口等;数据表可以为EXCEL文档、Word文档等。不同的外部对象1004存储的数据结构各不相同。在本实施例中,后台服务器端1002提供相应的图形化配置界面供用户配置出用树形数据结构表示的情报要素。后台服务器端1002根据用户配置的树形数据结构将外部对象1004提供的源数据包含的情报要素映射至用户配置的树形数据结构中。
如图2所示树形图T,树形图T包括多个节点t1。若用树形图T对一个对象进行分解,可以无限极地进行分解。可以理解地,若一个对象用树形结构进行刻画,可以根据需要从各个维度对该对象进行刻画,即利用树形结构总能刻画出一个对象在各种业务场景所需要的情报要素。换句话说,用树形数据结构可以将不同的数据结构中的任一数据/情报要素都对应至树形结构的一个节点t1上。因此,采用树形数据结构可以承接任意一种数据结构的源数据的情报要素。
请结合参看图3,其为第一实施例提供的计算机设备800的内部结构示意图。在本实施例中,客户端1001和服务器端1002分别安装具有多源异构数据的处理功能的软件开发程序的客户端和服务器端程序的计算机设备。计算机设备可以为平板电脑、台式计算机、笔记型计算机。计算机设备可以装载有WindowsR、IOSR、或AndroidR等操作系统。计算机设备800包括存储介质801、处理器802和总线803。其中,存储介质801至少包括一种类型的可读存储介质,该可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、磁性存储器、磁盘、光盘等。存储介质801在一些实施例中可以是计算机设备800的内部存储单元,例如计算机设备800的硬盘。存储介质801在另一些实施例中也可以是的外部计算机设备800存储设备,例如计算机设备800上配备的插接式硬盘,智能存储卡(SmartMediaCard, SMC),安全数字(SecureDigital, SD)卡,闪存卡(FlashCard)等。进一步地,存储介质801还可以既包括计算机设备800的内部存储单元也包括外部存储设备。存储介质801不仅可以用于存储安装于计算机设备800的应用软件及各类数据,例如实现多源异构数据处理程序指令等,还可以用于暂时地存储已经输出或者将要输出的数据。
总线803可以是外设部件互连标准(peripheral component interconnect,简称PCI)总线或扩展工业标准结构(extendedindustry standard architecture,简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图2中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
进一步地,计算机设备800还可以包括显示组件804。显示组件804可以是LED(Light EmittingDiode,发光二极管)显示器、液晶显示器、触控式液晶显示器以及OLED(OrganicLight-Emitting Diode,有机发光二极管)触摸器等。其中,显示组件804也可以适当的称为显示装置或显示单元,用于显示在计算机设备800中处理的信息以及用于显示可视化的用户界面。
进一步地,计算机设备800还可以包括通信组件805,通信组件805可选的可以包括有线通信组件和/或无线通信组件(如WI-FI通信组件、蓝牙通信组件等),通常用于在计算机设备800与其他计算机设备之间建立通信连接。
处理器802在一些实施例中可以是一中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器或其他数据处理芯片,用于运行存储介质801中存储的程序代码或处理数据。具体地,处理器802执行多源异构数据的处理程序以控制计算机设备800实现多源异构数据的处理方法。
可以理解地,图3仅示出了具有组件801-805以及实现多源异构数据处理程序01的计算机设备800,本领域技术人员可以理解的是,图3示出的结构并不构成对计算机设备800的限定,可以包括比图示更少或者更多的部件,或者组合某些部件,或者不同的部件布置。
请参看图4,其为第一实施例提供的实现多源异构数据的处理方法流程示意图。实现多源异构数据的处理方法包括下面步骤。
步骤S401,从外部对象获取外部数据。在一些可行的实施例中,如图5所示,外部对象1004用于提供外部数据。外部对象1004可以为数据库D1、第三方接口D2、数据表D3等。数据库D1包括但不限于MySQL、Oracle、NOSQL等;第三方接口D2包括但不限于Web Service 接口、RPC 接口、HTTP 接口等;数据表D3可以为EXCEL文档、Word文档等。不同的外部对象1004存储的数据结构各不相同。
在一些可行的实施例中,若用户想获取外部对象1004提供的外部数据,可以通过编写代码的方式向相应的外部对象发出请求。然后,外部对象1004响应该请求并返回请求数据,从而可以从外部对象1004获取到外部对象1004提供的源数据。
在一些可行的实施例,从外部对象1004获取外部数据无需通过用户编写代码。可以理解地,不同的外部对象1004提供的数据结构不同,因此,在获取不同的数据对象1004中数据,所采用的获取方式也不一致。如何无需通过用户编写代码实现获取外部数据将具体将在下文描述。
步骤S403,获取外部对象的类型。在一些可行的实施例中,外部对象1004的类型根据数据结构的类型进行划分。数据结构的类型用属性进行表示。例如,不同类的外部对象1004,如数据库D1、第三方接口D2、数据表D3采用的属性/数据结构不同。甚至,同类的外部对象1004,也具有不同的属性/数据结构。例如,数据库D1包括MySQL、Oracle、NOSQL。又例如,多个外部对象1004都是数据库,但不同类型的数据库采用的数据结构不同,即在不同的数据库中对情报要素采用了不同的数据结构进行存储。
步骤S405,提供数据结构图形化界面以供用户配置树形数据结构示意图。在一些可行的实施例中,如图6所示,数据结构图形化界面101所搭建的图形示意图102为用互连的多个节点1021构成的流程图或者是关系图。数据结构图形化界面101提供以树形数据结构展示的输入框1010和输出框1011以供用户配置相应节点1021的输入数据/情报要素和输出数据/情报要素,从而限制输入数据和输出输出数据仅以树形结构配置。各节点1021下的输入数据和输出输出数据可以通过各节点1021进行关联,关联的节点1021中一者的输出输出数据为另一者或者多者提供输入情报要素,可以将各个节点1021上得输入数据和输出数据进行关联。
数据结构图形化界面101还包括提供数据处理逻辑编程语句框架对应的图标103。数据处理逻辑编程语句框架包括多种类型软件开发语言所对应的数据处理逻辑编程语句框架,同类型语言的数据处理逻辑编程语句框架还包括表示对数据进行相同处理的不同类型软件开发语言的数据处理逻辑编程语句框架,不同类型软件开发语言用于表示对数据进行相同处理的数据库编程语言框架对应相同的图标。例如,用户通过拖拽来选择图标103,则生成相应的节点1021。节点1021具有连接端。用户通过在两个节点1021的连接端进行连接操作,则通过配置线1022将两个节点1021进行关联。在树形数据结构的示意图101中,各节点1021与操作数据库的数据库编程语句框架相关联。
具体地,步骤S405进一步包括下面步骤:步骤S4051,响应用户对图标103的数据配置操作,提供呈树形结构的输入框1010和输出框1011以供用户输入相应的输入数据和输出数据,每一输入数据与一外部数据对应。步骤S4052,根据树形结构的输入框中的输入数据和互连节点创建出图形示意图102。
步骤S407,根据用户配置的树形数据结构示意图,构建树形数据存储结构。在一些可行的实施例中,开发人员通过编码实现构建树形数据存储结构。在一些可行的实施例中,构建树形数据存储结构无需用户端通过编码实现。
如图7所示,步骤S407进一步包括:步骤S4071,解析根据用户配置的树形数据结构示意图获得树形数据结构的配置信息。树形数据结构的配置信息包括用于表示各节点1021的数据处理逻辑编程语句框架信息、表示数据处理逻辑编程语句框架信息的先后顺序信息、以及表示各节点1021的输入数据和输出数据信息。步骤S4072,根据树形数据结构的配置信息获取各节点1021所关联的数据处理逻辑编程语句框架、获取各数据处理逻辑编程语句框架信息的输入数据和输出数据、和获取各数据处理逻辑编程语句框架顺序。步骤S4073,将各节点1021的各输入数据和输出数据和各数据处理逻辑编程语句框架一一对应,利用树形数据结构进行关联构建出用于表示与用户配置的树形数据结构相一致的树形数据存储结构。
S409,根据外部对象的类型从预设映射函数集合中匹配对应的映射函数。可以理解地,在对不同的外部对象1004中的数据转换都采用用户配置的树形数据结构进行存储时,则会采用不同映射函数一一对应映射。
请结合参看图5,映射函数集N包括映射函数N1~n。当外部对象1004为某属性的数据库D1时,采用映射函数N1。当外部对象1004为某属性的第三方接口D2,采用映射函数Nn-1。当外部对象1004为某属性的数据表D3时,采用映射函数Nn。在一些可行的实施例中,查找匹配的映射函数时,皆需要从映射函数N1~n中查找。在一些可行的实施例中,为了快速查找到匹配的映射函数,还可以根据外部对象1004的类型将映射函数集N划分为多个映射函数子集。例如,将外部对象1004为数据库划的分为一个映射函数子集;当外部对象1004为某一属性的数据库,例如,MySQL数据库,可以在对应的映射函数子集中查找即可。
步骤S4011,调用匹配的映射函数将外部数据映射至树形数据存储结构以对外部数据进行存储。可以理解地,映射函数与外部对象1004的类型进行匹配,即便一个对象的情报要素采用不同的数据结构存储,最终都可以根据用户的配置获得用户所需的情报要素。具体地,步骤S4011进一步包括:步骤S40110,根据输入数据找出所需外部数据。步骤S40111,根据输入数据和输出数据的对应关系,将所需的外部数据利用树形数据结构进行存储。
请结合参看图8,其为步骤S401子流程示意图。在本实施例中,从外部对象获取外部数据无需通过开发人员编写程序代码。具体地,步骤S401包括下面步骤。
步骤S801,提供数据获取图形化界面以供用户配置获取数据的示意图。在本实施例中,数据获取图形化界面提供输入框、按钮等控件以供用户配置出用图表形式的示意图,如图9和图12所示。用户可以通过输入框配置所需要参数。
步骤S803,根据获取数据的示意图创建获取所述外部数据的请求指令。在本实施例中,多源异构数据的处理功能提供识别示意图并产生对应的请求指令,无需同构编程的方式编写访问外部数据的代码。具体地,多源异构数据的处理功能的软件开发程序还提供预设的访问外部对象的编程语句框架。例如,访问外部对象的编程语句框架包括访问数据库的编程语句框架、访问第三方接口的编程语句框架。不同类型的数据库所对应的访问数据库的编程语句框架不一样。同理,不同类型的第三方接口的编程语句框架也不一样。根据获取数据的示意图创建获取所述外部数据的请求指令具体为:根据预设的访问外部对象的编程语句框架及参数进行组合创建出获取所述外部数据的请求指令。
步骤S805,发送外部数据的请求指令给外部对象,以使外部对象根据请求指令返回外部数据。
请结合参看图10-图11,不同的外部对象1004提供的数据结构不同,因此,在获取不同的数据对象1004中的数据,所采用的获取方式也不一致。请参看图10,图10是从第三方平台提供的第三方接口D2获取源数据的流程示意图。请参看图11,图11是从数据库D1获取源数据的流程示意图。
请再次参看图10和图12,在提供数据获取图形化界面之前,多源异构数据的处理方法还包括下面步骤。
步骤S1002,根据预设的访问第三方接口编程语句框架生成第三方接口配置图形模板,第三方接口配置图形模板用于供用户输入所述访问第三方接口编程语句框架相对应的接口属性数据以及需要访问的数据,接口属性数据用于表示外部对象1004的类型。
步骤S1004,根据用户输入的接口属性数据以及需要访问的数据,配置出获取数据的示意图。
请结合参看图11和图9,在提供数据获取图形化界面之前,多源异构数据的处理方法还包括下面步骤。
步骤S1101,根据预设的访问数据库编程语句框架生成对应数据库配置图形模板,数据库配置图形模板用于供用户输入访问数据库编程语句框架相对应的数据库属性数据;以及
步骤S1103,根据用户输入的数据库属性数据配置出获取数据的示意图。
本发明提供的一种多源异构数据的处理方法、计算机设备、存储介质,利用树形数据存储结构进行存储的情报要素和流程图组合来实现无代码编程,从而让企业在自主信息建设时无需通过专业人员编写程序设计语言完成所需应用软件,让企业快速低成本的拥有自主信息化建设能力,提升企业在整个市场经济活动中的资源配置效率与合理性。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。
该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行该计算机程序指令时,全部或部分地产生按照本发明实施例的流程或功能。该计算机设备可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。该计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一计算机可读存储介质传输,例如,该计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。该计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。该可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid StateDisk(SSD))等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,该单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
该作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
该集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、流动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random AccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。并且本文中的术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (9)
1.一种多源异构数据的处理方法,其特征在于,所述多源异构数据的处理方法包括:
从外部对象获取外部数据;
获取所述外部对象的类型;
提供数据结构图形化界面以供用户配置树形数据结构示意图,所述数据结构图形化界面包括提供操作数据库的数据库编程语句框架对应的图标,所述数据库编程语句框架包括至少一种类型软件开发语言所对应的数据库编程语句框架;
根据所述用户配置的树形数据结构示意图,构建树形数据存储结构;
根据所述外部对象的类型从预设映射函数集合中匹配对应的映射函数;以及
调用所述匹配的映射函数将所述外部数据映射至所述树形数据存储结构以对所述外部数据进行存储;其中,所述方法还包括:
响应用户对所述图标的搭建操作,生成节点互连的示意图;
响应用户对所述图标的数据配置操作,提供呈树形结构的输入框和输出框以供用户输入相应的输入数据和输出数据,每一输入数据与一所述外部数据对应;以及
根据所述树形结构的输入框中的输入数据和互连节点创建出所述树形数据结构。
2.如权利要求1所述的多源异构数据的处理方法,其特征在于,获取所述外部数据之前,所述方法还包括:
提供数据获取图形化界面以供用户配置获取数据的示意图;
根据所述获取数据的示意图创建获取所述外部数据的请求指令;以及
发送所述外部数据的请求指令给所述外部对象,以使所述外部对象根据所述请求指令返回所述外部数据。
3.如权利要求2所述的多源异构数据的处理方法,其特征在于,所述外部对象包括第三方平台,所述请求指令包括第三方接口数据访问指令,提供所述数据获取图形化界面之前,所述方法具体包括:
根据预设的访问第三方接口编程语句框架生成第三方接口配置图形模板,所述第三方接口配置图形模板用于供用户输入所述访问第三方接口编程语句框架相对应的接口属性数据以及需要访问的数据,所述接口属性数据用于表示所述外部对象的类型;以及
根据所述用户输入的接口属性数据以及需要访问的数据,配置出获取数据的示意图。
4.如权利要求2所述的多源异构数据的处理方法,其特征在于,所述外部对象包括数据库,所述请求指令包括访问数据库指令,提供所述数据获取图形化界面之前,所述方法具体包括:
根据预设的访问数据库编程语句框架生成对应数据库配置图形模板,所述数据库配置图形模板用于供用户输入所述访问数据库编程语句框架相对应的数据库属性数据;以及
根据所述用户输入的数据库属性数据配置出获取数据的示意图。
5.如权利要求1所述的多源异构数据的处理方法,其特征在于,所述数据库编程语句框架包括多种类型软件开发语言所对应的数据库编程语句框架,同类型语言的操作数据库的编程语句框架还包括表示对数据库进行相同操作的不同类型软件开发语言的数据库编程语句框架,不同类型软件开发语言用于表示对数据库进行同种操作的数据库编程语言框架对应相同的图标。
6.如权利要求5所述的多源异构数据的处理方法,其特征在于,所述树形数据存储结构中的输入数据与全部或者部分所述外部数据一一对应。
7.如权利要求6所述的多源异构数据的处理方法,其特征在于,调用所述匹配的映射函数将所述外部数据映射至数据模型以对所述外部数据进行存储,具体包括:
根据所述输入数据找出所需外部数据;以及
根据所述输入数据和输出数据的对应关系,将所需的外部数据利用所述树形数据结构进行存储。
8.一种计算机设备,其特征在于,所述计算机设备包括:
存储器,所述存储器用于存储计算机可执行程序;以及
处理器,所述处理器用于执行所述可执行程序以实现如权利要求1~7任一项所述的多源异构数据的处理的方法。
9.一种存储介质,其特征在于,所述存储介质用于存储计算机可执行程序,所述计算机可执行程序由处理器执行以实现如权利要求1~7任一项所述的多源异构数据的处理的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010367069.3A CN113590085B (zh) | 2020-04-30 | 2020-04-30 | 多源异构数据的处理方法、计算机设备、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010367069.3A CN113590085B (zh) | 2020-04-30 | 2020-04-30 | 多源异构数据的处理方法、计算机设备、存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113590085A CN113590085A (zh) | 2021-11-02 |
CN113590085B true CN113590085B (zh) | 2023-06-16 |
Family
ID=78237569
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010367069.3A Active CN113590085B (zh) | 2020-04-30 | 2020-04-30 | 多源异构数据的处理方法、计算机设备、存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113590085B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1995006292A1 (en) * | 1993-08-25 | 1995-03-02 | Asymetrix Corporation | Method and apparatus for the modeling and query of database structures using natural language-like constructs |
CN101329682A (zh) * | 2008-07-22 | 2008-12-24 | 华北电力大学 | 一种分布异构信息资源集成方法 |
CN102982075A (zh) * | 2012-10-30 | 2013-03-20 | 北京京东世纪贸易有限公司 | 支持访问异构数据源的系统和方法 |
CN107545046A (zh) * | 2017-08-17 | 2018-01-05 | 北京奇安信科技有限公司 | 一种多源异构数据的融合方法及装置 |
CN108628648A (zh) * | 2017-03-16 | 2018-10-09 | 华为软件技术有限公司 | 数据处理方法和数据处理装置 |
CN109657103A (zh) * | 2018-12-19 | 2019-04-19 | 广州天鹏计算机科技有限公司 | 数据结构的转换方法、装置、计算机设备和存储介质 |
CN110377598A (zh) * | 2018-04-11 | 2019-10-25 | 西安邮电大学 | 一种基于智能制造过程的多源异构数据存储方法 |
CN110618983A (zh) * | 2019-08-15 | 2019-12-27 | 复旦大学 | 基于json文档结构的工业大数据多维分析与可视化方法 |
WO2020015495A1 (zh) * | 2018-07-16 | 2020-01-23 | 中兴通讯股份有限公司 | 访问异构数据库的方法、装置、设备、插件及存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7660805B2 (en) * | 2003-12-23 | 2010-02-09 | Canon Kabushiki Kaisha | Method of generating data servers for heterogeneous data sources |
US9116975B2 (en) * | 2013-10-18 | 2015-08-25 | Palantir Technologies Inc. | Systems and user interfaces for dynamic and interactive simultaneous querying of multiple data stores |
US11003635B2 (en) * | 2016-08-24 | 2021-05-11 | Sap Se | Database scheme for storing generic data |
US20180232262A1 (en) * | 2017-02-15 | 2018-08-16 | Ca, Inc. | Mapping heterogeneous application-program interfaces to a database |
-
2020
- 2020-04-30 CN CN202010367069.3A patent/CN113590085B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1995006292A1 (en) * | 1993-08-25 | 1995-03-02 | Asymetrix Corporation | Method and apparatus for the modeling and query of database structures using natural language-like constructs |
CN101329682A (zh) * | 2008-07-22 | 2008-12-24 | 华北电力大学 | 一种分布异构信息资源集成方法 |
CN102982075A (zh) * | 2012-10-30 | 2013-03-20 | 北京京东世纪贸易有限公司 | 支持访问异构数据源的系统和方法 |
CN108628648A (zh) * | 2017-03-16 | 2018-10-09 | 华为软件技术有限公司 | 数据处理方法和数据处理装置 |
CN107545046A (zh) * | 2017-08-17 | 2018-01-05 | 北京奇安信科技有限公司 | 一种多源异构数据的融合方法及装置 |
CN110377598A (zh) * | 2018-04-11 | 2019-10-25 | 西安邮电大学 | 一种基于智能制造过程的多源异构数据存储方法 |
WO2020015495A1 (zh) * | 2018-07-16 | 2020-01-23 | 中兴通讯股份有限公司 | 访问异构数据库的方法、装置、设备、插件及存储介质 |
CN109657103A (zh) * | 2018-12-19 | 2019-04-19 | 广州天鹏计算机科技有限公司 | 数据结构的转换方法、装置、计算机设备和存储介质 |
CN110618983A (zh) * | 2019-08-15 | 2019-12-27 | 复旦大学 | 基于json文档结构的工业大数据多维分析与可视化方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113590085A (zh) | 2021-11-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108304201B (zh) | 对象更新方法、装置及设备 | |
CN108874924B (zh) | 搜索服务的创建方法、装置及计算机可读存储介质 | |
CN109492053B (zh) | 用于访问数据的方法和装置 | |
US10838964B2 (en) | Supporting a join operation against multiple NoSQL databases | |
WO2019134340A1 (zh) | 薪资计算方法、应用服务器及计算机可读存储介质 | |
US10261808B2 (en) | Access operation with dynamic linking and access of data within plural data sources | |
WO2021217659A1 (zh) | 多源异构数据的处理方法、计算机设备、存储介质 | |
US11561972B2 (en) | Query conversion for querying disparate data sources | |
US20110252049A1 (en) | Function execution using sql | |
CN113590103B (zh) | 实现图形化无代码开发用户界面的方法、计算机设备、存储介质 | |
CN113626223A (zh) | 一种接口调用方法和装置 | |
KR101150121B1 (ko) | 객체 및 엔터티의 표현을 구성하기 위한 방법 및 객체 표현 시스템 | |
CN110727777A (zh) | 知识图谱的管理方法、装置、计算机设备和存储介质 | |
US11204925B2 (en) | Enabling data source extensions | |
CN111125064A (zh) | 一种生成数据库模式定义语句的方法和装置 | |
CN110888972A (zh) | 一种基于Spark Streaming的敏感内容识别方法及装置 | |
CN113590085B (zh) | 多源异构数据的处理方法、计算机设备、存储介质 | |
CN111858617A (zh) | 用户查找方法和装置、计算机可读存储介质、电子设备 | |
CN115629763A (zh) | 目标代码的生成方法、npu指令的显示方法及装置 | |
CN115543428A (zh) | 一种基于策略模板的模拟数据生成方法和装置 | |
CN113722007A (zh) | Vpn分支设备的配置方法、装置及系统 | |
US11138174B2 (en) | Electronic database and method for forming same | |
US20240144126A1 (en) | Tagging systems and methods for efficient cloud service provisioning | |
US20240054145A1 (en) | Object Lineage Analysis For Package Transport | |
US20230394164A1 (en) | Dynamic user dashboard based on artificial intelligence techniques |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: Room 1102, Unit 2, Building 3, Tian'an Digital City, No. 1, Huangjin Road, Nancheng Street, Dongguan City, Guangdong Province, 523000 Applicant after: Guangdong Zhongtong Internet of Things Technology Co.,Ltd. Address before: 518000 Room 201, building A, 1 front Bay Road, Shenzhen Qianhai cooperation zone, Shenzhen, Guangdong Applicant before: SHENZHEN ZHONGTONG INTERNET OF THINGS TECHNOLOGY Co.,Ltd. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |