CN108280147A - 一种数据管理方法和装置 - Google Patents
一种数据管理方法和装置 Download PDFInfo
- Publication number
- CN108280147A CN108280147A CN201810002080.2A CN201810002080A CN108280147A CN 108280147 A CN108280147 A CN 108280147A CN 201810002080 A CN201810002080 A CN 201810002080A CN 108280147 A CN108280147 A CN 108280147A
- Authority
- CN
- China
- Prior art keywords
- data
- model
- metadata
- current
- metadata schema
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000013523 data management Methods 0.000 title abstract description 3
- 238000013499 data model Methods 0.000 claims description 35
- 238000005070 sampling Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 claims description 7
- 238000005516 engineering process Methods 0.000 description 5
- 238000007726 management method Methods 0.000 description 4
- 230000010354 integration Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000012550 audit Methods 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 210000001520 comb Anatomy 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012384 transportation and delivery Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种数据管理方法和装置,其中,预先创建至少一个元数据模型,还包括:针对每一个业务系统,均执行:利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心;确定所述至少一个元数据模型的参数信息;根据所述至少一个元数据模型的参数信息,构建元数据目录;根据所述元数据目录,确定至少一个目标元数据模型;根据各个所述目标元数据模型采集的数据,发布数据共享服务。本发明提供的方案能够实现不同业务系统间的数据共享。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种数据管理方法和装置。
背景技术
随着各个业务系统中数据量的增加,不同业务系统间存在同样的数据重复采集的问题,导致各个业务系统数据管理效率降低。
在实际应用场景中,不同企业、不同部门的业务系统中的数据依据不同标准采集,无法实现不同业务系统间的数据共享。
发明内容
本发明实施例提供了一种数据管理方法和装置,能够实现不同业务系统间的数据共享。
第一方面,本发明实施例提供了一种数据管理方法,预先创建至少一个元数据模型,还包括:
针对每一个业务系统,均执行:利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心;
确定所述至少一个元数据模型的参数信息;
根据所述至少一个元数据模型的参数信息,构建元数据目录;
根据所述元数据目录,确定至少一个目标元数据模型;
根据各个所述目标元数据模型采集的数据,发布数据共享服务。
优选地,
所述创建至少一个元数据模型,包括:
确定模型数据项;
确定所述模型数据项对应的采集规则;
根据所述模型数据项和所述采集规则,创建所述至少一个元数据模型。
优选地,
所述利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
针对每一个所述元数据模型,均执行:确定当前元数据模型的模型数据项对应的所述当前业务系统的数据项;根据当前元数据模型的采集规则,将所述当前元数据模型的模型数据项对应的所述当前业务系统的数据项采集至所述数据资源中心。
优选地,
当所述业务系统与所述数据资源中心位于同一个局域网时,
所述利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
利用所述至少一个元数据模型和预先设置的采集工具从所述当前业务系统中采集数据至数据资源中心;
或,
当所述业务系统与所述数据资源中心位于不同的局域网时,
所述利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
将所述至少一个元数据模型发送给所述当前业务系统中部署的客户端,接收所述当前业务系统中部署的客户端利用各个所述元数据模型采集的数据。
优选地,
进一步包括:
确定至少一个专题应用模型;
针对每一个所述专题应用模型,均执行:确定当前专题应用模型对应的至少一个当前元数据模型;将各个所述当前元数据模型采集的数据添加进所述当前专题应用模型。
优选地,
所述参数信息,包括:数据来源、共享方式和应用类型中任意一种或多种的组合。
第二方面,本发明实施例提供了一种数据管理装置,包括:
创建单元,用于创建至少一个元数据模型;
采集单元,用于针对每一个业务系统,均执行:利用所述创建单元创建的所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心;
处理单元,用于确定所述创建单元创建的所述至少一个元数据模型的参数信息,根据所述至少一个元数据模型的参数信息,构建元数据目录;
发布单元,用于根据所述处理单元构建的所述元数据目录,确定至少一个目标元数据模型,根据各个所述目标元数据模型采集的数据,发布数据共享服务。
优选地,
所述创建单元,用于确定模型数据项,确定所述模型数据项对应的采集规则,根据所述模型数据项和所述采集规则,创建所述至少一个元数据模型。
优选地,
所述采集单元,用于针对每一个所述元数据模型,均执行:确定当前元数据模型的模型数据项对应的所述当前业务系统的数据项,根据当前元数据模型的采集规则,将所述当前元数据模型的模型数据项对应的所述当前业务系统的数据项采集至所述数据资源中心。
优选地,
当所述业务系统与所述数据资源中心位于同一个局域网时,
所述采集单元,用于利用所述至少一个元数据模型和预先设置的采集工具从所述当前业务系统中采集数据至数据资源中心;
或,
当所述业务系统与所述数据资源中心位于不同的局域网时,
所述采集单元,用于将所述至少一个元数据模型发送给所述当前业务系统中部署的客户端,接收所述当前业务系统中部署的客户端利用各个所述元数据模型采集的数据。
优选地,
进一步包括:
确定单元,用于确定至少一个专题应用模型,针对每一个所述专题应用模型,均执行:确定当前专题应用模型对应的至少一个当前元数据模型,将各个所述当前元数据模型采集的数据添加进所述当前专题应用模型。
优选地,
所述参数信息,包括:数据来源、共享方式和应用类型中任意一种或多种的组合。
本发明实施例提供了一种数据管理方法和装置,其中,该方法通过预先创建的元数据模型从各个业务系统采集数据,利用元数据模型的参数信息构建元数据目录实现对元数据模型采集的数据进行管理,并发布数据共享服务。该方法能够实现不同业务系统间的数据共享,避免对于同样的数据重复采集。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一个实施例提供的一种数据管理方法的流程图;
图2是本发明另一个实施例提供的一种数据管理方法的流程图;
图3是本发明一个实施例提供的一种数据管理装置的结构示意图;
图4是本发明另一个实施例提供的一种数据管理装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例,基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,本发明实施例提供了一种数据管理方法,该方法可以包括以下步骤:
步骤101:预先创建至少一个元数据模型;
步骤102:针对每一个业务系统,均执行:利用至少一个元数据模型从当前业务系统中采集数据至数据资源中心;
步骤103:确定至少一个元数据模型的参数信息;
步骤104:根据至少一个元数据模型的参数信息,构建元数据目录;
步骤105:根据元数据目录,确定至少一个目标元数据模型;
步骤106:根据各个目标元数据模型采集的数据,发布数据共享服务。
该方法通过预先创建的元数据模型从各个业务系统采集数据,利用元数据模型的参数信息构建元数据目录实现对元数据模型采集的数据进行管理,并发布数据共享服务。该方法能够实现不同业务系统间的数据共享,避免对于同样的数据重复采集。
需要说明的是,数据资源中心并不是固定的,例如,省公安厅系统采集各个市级公安局系统的数据,则省公安厅系统为数据资源中心,各个市级公安局系统为业务系统。
在本发明的一个实施例中,为了保证采集的数据具有统一的标准,
创建至少一个元数据模型,包括:
确定模型数据项;
确定模型数据项对应的采集规则;
根据模型数据项和采集规则,创建至少一个元数据模型。
要采集什么样的数据、以及采集的数据要满足什么标准就依据创建的元数据模型,元数据模型中规定了采集的内容以及内容应该满足的格式、长度等信息
模型数据项一般指的是一个字段对应的所有数据项,例如,创建元数据模型A,模型数据项为身份证号,采集规则为18位。
在本发明的一个实施例中,利用至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
针对每一个元数据模型,均执行:确定当前元数据模型的模型数据项对应的当前业务系统的数据项;根据当前元数据模型的采集规则,将当前元数据模型的模型数据项对应的当前业务系统的数据项采集至数据资源中心。
由于同一种数据在不同的业务系统中可能具有不同的字段名称,为了保证采集信息的准确性,需要确定当前元数据模型的模型数据项对应的当前业务系统的数据项。例如,模型数据项为身份证号字段对应的所有数据项,与业务系统中身份信息字段对应的所有数据项一一对应。
在本发明的一个实施例中,利用元数据模型采集数据包括两种情况:
情况一:当业务系统与数据资源中心位于同一个局域网时,
利用至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
利用至少一个元数据模型和预先设置的采集工具从当前业务系统中采集数据至数据资源中心。
采集工具包括ETL工具等。
情况二:当业务系统与数据资源中心位于不同的局域网时,
利用至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
将至少一个元数据模型发送给当前业务系统中部署的客户端,接收当前业务系统中部署的客户端利用各个元数据模型采集的数据。
在实际应用场景中,采用消息队列技术,实现数据的顺序传输,支持断点续传等功能,在每个采集点(业务系统)部署一个客户端,将要采集整合的数据对应的元数据模型,通过消息队列分发到各个采集点,各采集客户端按照相应的元数据模型将数据进行组织封装,然后通过消息队列上传到数据资源中心。为了提高数据资源中心的安全性,还可以设置中心端,将采集的数据先上传到中心端进行验证,然后将验证通过的数据传输至数据资源中心。
在本发明的一个实施例中,
进一步包括:
确定至少一个专题应用模型;
针对每一个专题应用模型,均执行:确定当前专题应用模型对应的至少一个当前元数据模型;将各个当前元数据模型采集的数据添加进当前专题应用模型。
在实际应用场景中,可以在元数据模型的基础上,借助数据加工工具,对标准的元数据模型进行再次组合、计算等操作,按需产生某一个专题应用模型,如统计查询模型、分析挖掘模型、全文检索索引模型、档案浏览组合模型等,为专题数据应用提供支撑。
例如,当省公安厅统计各个地市公安局的数据时,不需要分别从各个地市公安局的系统采集数据,而直接调用统计查询模型便可,该方式能够大大减少统计时间,提高办事效率。
在本发明的一个实施例中,参数信息,包括:数据来源、共享方式和应用类型中任意一种或多种的组合。
按照数据来源、共享方式、应用类型等多维度对元数据模型进行分类梳理编码,构建一个多类别多层级的元数据目录体系,达到对所汇集的数据可知可控,利于快速定位和发现数据,对自身所掌握的各类数据进行清晰明了的管理,为数据的共享和应用奠定了基础。
如图2所示,本发明实施例以业务系统与数据资源中心位于同一个局域网为例,对数据管理方法进行详细地说明,该方法包括:
步骤201:确定模型数据项,模型数据项对应的采集规则。
例如,模型数据项为手机号字段,采集规则为11位数字。
步骤202:根据模型数据项和采集规则,创建至少一个元数据模型。
根据“模型数据项为手机号字段,采集规则为11位数字”创建一个元数据模型。由于各个元数据模型创建方法相同,此处不再赘述。
步骤203:针对每一个元数据模型,均执行:确定当前元数据模型的模型数据项对应的业务系统的数据项,根据当前元数据模型的采集规则,利用预先设置的采集工具,将当前元数据模型的模型数据项对应的业务系统的数据项采集至数据资源中心。
本发明实施例仅以一个业务系统为例,当存在多个业务系统时,各个业务系统的处理方法同本实施例。
元数据模型中的手机号字段与业务系统中手机字段相对应,则利用ETL工具,根据采集规则将业务系统中手机字段数据采集至数据资源中心。
步骤204:确定至少一个元数据模型的参数信息,根据至少一个元数据模型的参数信息,构建元数据目录。
其中,参数信息,包括:数据来源、共享方式和应用类型中任意一种或多种的组合。
构建元数据目录,利于快速定位和发现数据。例如,元数据模型A的数据来源为a,元数据模型B的数据来源为a,则当查询数据来源为a时,可以得到查询结果为元数据模型A、B。
步骤205:根据元数据目录,确定至少一个目标元数据模型。
步骤206:根据各个目标元数据模型采集的数据,发布数据共享服务。
当需要对外提供数据共享服务时,可直接选择一个元数据模型或者多个元数据模型并建立关联关系,通过页面可视化的勾选方式定义出可对外共享的数据项,规定好参数条件和分页信息,以及审核和授权信息,直接点击发布,就以热服务的方式对外提供了一个符合http标准的restful服务,使用者只需按规定的要求进行申请调用,就可以获取到所需要的数据。
步骤207:确定至少一个专题应用模型。
步骤208:针对每一个专题应用模型,均执行:确定当前专题应用模型对应的至少一个当前元数据模型,将各个当前元数据模型采集的数据添加进当前专题应用模型。
综上,该方法利用元数据模型,创新性的以元数据模型为纽带,打通数据整合、管理、共享和应用的各个环节,不仅使得数据在各个环节按相同的标准进行流转,而且在此模型基础上可以方便的构建共享服务和专题数据应用模型,使得非专业人员也能快速便捷的定义出数据共享服务,以及借助数据加工,根据专题应用模型,直接创建出专题应用库。
如图3所示,本发明实施例提供了一种数据管理装置,包括:
创建单元301,用于创建至少一个元数据模型;
采集单元302,用于针对每一个业务系统,均执行:利用创建单元301创建的至少一个元数据模型从当前业务系统中采集数据至数据资源中心;
处理单元303,用于确定创建单元301创建的至少一个元数据模型的参数信息,根据至少一个元数据模型的参数信息,构建元数据目录;
发布单元304,用于根据处理单元303构建的元数据目录,确定至少一个目标元数据模型,根据各个目标元数据模型采集的数据,发布数据共享服务。
在本发明的一个实施例中,创建单元301,用于确定模型数据项,确定模型数据项对应的采集规则,根据模型数据项和采集规则,创建至少一个元数据模型。
在本发明的一个实施例中,采集单元302,用于针对每一个元数据模型,均执行:确定当前元数据模型的模型数据项对应的当前业务系统的数据项,根据当前元数据模型的采集规则,将当前元数据模型的模型数据项对应的当前业务系统的数据项采集至数据资源中心。
在本发明的一个实施例中,当业务系统与数据资源中心位于同一个局域网时,采集单元302,用于利用至少一个元数据模型和预先设置的采集工具从当前业务系统中采集数据至数据资源中心;
在本发明的一个实施例中,当业务系统与数据资源中心位于不同的局域网时,采集单元302,用于将至少一个元数据模型发送给当前业务系统中部署的客户端,接收当前业务系统中部署的客户端利用各个元数据模型采集的数据。
在本发明的一个实施例中,如图4所示,该装置还包括:
确定单元305,用于确定至少一个专题应用模型,针对每一个专题应用模型,均执行:确定当前专题应用模型对应的至少一个当前元数据模型,将各个当前元数据模型采集的数据添加进当前专题应用模型。
在本发明的一个实施例中,参数信息,包括:数据来源、共享方式和应用类型中任意一种或多种的组合。
上述装置内的各单元之间的信息交互、执行过程等内容,由于与本发明方法实施例基于同一构思,具体内容可参见本发明方法实施例中的叙述,此处不再赘述。
本发明实施例提供了一种可读介质,包括执行指令,当存储控制器的处理器执行执行指令时,存储控制器执行上述任一实施例的方法。
本发明实施例提供了一种存储控制器,包括:处理器、存储器和总线;
存储器用于存储执行指令,处理器与存储器通过总线连接,当存储控制器运行时,处理器执行存储器存储的执行指令,以使存储控制器执行上述任一实施例的方法。
综上,本发明各个实施例至少具有如下效果:
1、在本发明实施例中,该方法通过预先创建的元数据模型从各个业务系统采集数据,利用元数据模型的参数信息构建元数据目录实现对元数据模型采集的数据进行管理,并发布数据共享服务。该方法能够实现不同业务系统间的数据共享,避免对于同样的数据重复采集。
2、在本发明实施例中,该方法提供了一种对数据的整合、管理、共享和应用全生命周期内的一种综合管理方法,为数据在每个阶段的管理提供了基础支撑,使得数据的流转连贯一致,避免了环节间的割裂。
3、在本发明实施例中,本方法不仅为数据在各个环节的流转提供纽带连接和标准依据,而且为快速构建数据共享服务和专题数据应用提供了模型支持,使得非技术人员也可以方便快捷的定义出数据共享服务,也为各类专题数据应用提供了加工依据。
需要说明的是,在本文中,诸如第一和第二之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个〃····〃”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同因素。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储在计算机可读取的存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质中。
最后需要说明的是:以上所述仅为本发明的较佳实施例,仅用于说明本发明的技术方案,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所做的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (10)
1.一种数据管理方法,其特征在于,预先创建至少一个元数据模型,还包括:
针对每一个业务系统,均执行:利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心;
确定所述至少一个元数据模型的参数信息;
根据所述至少一个元数据模型的参数信息,构建元数据目录;
根据所述元数据目录,确定至少一个目标元数据模型;
根据各个所述目标元数据模型采集的数据,发布数据共享服务。
2.根据权利要求1所述的数据管理方法,其特征在于,
所述创建至少一个元数据模型,包括:
确定模型数据项;
确定所述模型数据项对应的采集规则;
根据所述模型数据项和所述采集规则,创建所述至少一个元数据模型。
3.根据权利要求2所述的数据管理方法,其特征在于,
所述利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
针对每一个所述元数据模型,均执行:确定当前元数据模型的模型数据项对应的所述当前业务系统的数据项;根据当前元数据模型的采集规则,将所述当前元数据模型的模型数据项对应的所述当前业务系统的数据项采集至所述数据资源中心。
4.根据权利要求1所述的数据管理方法,其特征在于,
当所述业务系统与所述数据资源中心位于同一个局域网时,
所述利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
利用所述至少一个元数据模型和预先设置的采集工具从所述当前业务系统中采集数据至数据资源中心;
或,
当所述业务系统与所述数据资源中心位于不同的局域网时,
所述利用所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心,包括:
将所述至少一个元数据模型发送给所述当前业务系统中部署的客户端,接收所述当前业务系统中部署的客户端利用各个所述元数据模型采集的数据。
5.根据权利要求1-4中任一所述的数据管理方法,其特征在于,
进一步包括:
确定至少一个专题应用模型;
针对每一个所述专题应用模型,均执行:确定当前专题应用模型对应的至少一个当前元数据模型;将各个所述当前元数据模型采集的数据添加进所述当前专题应用模型;
和/或,
所述参数信息,包括:数据来源、共享方式和应用类型中任意一种或多种的组合。
6.一种数据管理装置,其特征在于,包括:
创建单元,用于创建至少一个元数据模型;
采集单元,用于针对每一个业务系统,均执行:利用所述创建单元创建的所述至少一个元数据模型从当前业务系统中采集数据至数据资源中心;
处理单元,用于确定所述创建单元创建的所述至少一个元数据模型的参数信息,根据所述至少一个元数据模型的参数信息,构建元数据目录;
发布单元,用于根据所述处理单元构建的所述元数据目录,确定至少一个目标元数据模型,根据各个所述目标元数据模型采集的数据,发布数据共享服务。
7.根据权利要求6所述的数据管理装置,其特征在于,
所述创建单元,用于确定模型数据项,确定所述模型数据项对应的采集规则,根据所述模型数据项和所述采集规则,创建所述至少一个元数据模型。
8.根据权利要求7所述的数据管理装置,其特征在于,
所述采集单元,用于针对每一个所述元数据模型,均执行:确定当前元数据模型的模型数据项对应的所述当前业务系统的数据项,根据当前元数据模型的采集规则,将所述当前元数据模型的模型数据项对应的所述当前业务系统的数据项采集至所述数据资源中心。
9.根据权利要求6所述的数据管理装置,其特征在于,
当所述业务系统与所述数据资源中心位于同一个局域网时,
所述采集单元,用于利用所述至少一个元数据模型和预先设置的采集工具从所述当前业务系统中采集数据至数据资源中心;
或,
当所述业务系统与所述数据资源中心位于不同的局域网时,
所述采集单元,用于将所述至少一个元数据模型发送给所述当前业务系统中部署的客户端,接收所述当前业务系统中部署的客户端利用各个所述元数据模型采集的数据。
10.根据权利要求6-9中任一所述的数据管理装置,其特征在于,
进一步包括:
确定单元,用于确定至少一个专题应用模型,针对每一个所述专题应用模型,均执行:确定当前专题应用模型对应的至少一个当前元数据模型,将各个所述当前元数据模型采集的数据添加进所述当前专题应用模型;
和/或,
所述参数信息,包括:数据来源、共享方式和应用类型中任意一种或多种的组合。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810002080.2A CN108280147A (zh) | 2018-01-02 | 2018-01-02 | 一种数据管理方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810002080.2A CN108280147A (zh) | 2018-01-02 | 2018-01-02 | 一种数据管理方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108280147A true CN108280147A (zh) | 2018-07-13 |
Family
ID=62802960
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810002080.2A Pending CN108280147A (zh) | 2018-01-02 | 2018-01-02 | 一种数据管理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108280147A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109379399A (zh) * | 2018-08-31 | 2019-02-22 | 杭州东方通信软件技术有限公司 | 一种基于元数据的数据共享自订阅处理方法及系统 |
CN110377568A (zh) * | 2019-07-26 | 2019-10-25 | 北京明略软件系统有限公司 | 一种元数据采集方法及装置 |
CN110457538A (zh) * | 2019-08-20 | 2019-11-15 | 北京明略软件系统有限公司 | 一种标签数据共享方法及装置 |
CN110874353A (zh) * | 2018-09-04 | 2020-03-10 | 阿里巴巴集团控股有限公司 | 一种数据模型的创建、数据表的访问方法和装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090012983A1 (en) * | 2007-07-06 | 2009-01-08 | Cognos Incorporated | System and method for federated member-based data integration and reporting |
CN103106542A (zh) * | 2012-12-13 | 2013-05-15 | 长安大学 | 一种数据分析及处理系统 |
CN103853738A (zh) * | 2012-11-29 | 2014-06-11 | 中国科学院计算机网络信息中心 | 一种网页信息相关地域的识别方法 |
CN103942245A (zh) * | 2014-02-19 | 2014-07-23 | 浪潮软件股份有限公司 | 基于元数据的数据抽取方法 |
-
2018
- 2018-01-02 CN CN201810002080.2A patent/CN108280147A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090012983A1 (en) * | 2007-07-06 | 2009-01-08 | Cognos Incorporated | System and method for federated member-based data integration and reporting |
CN103853738A (zh) * | 2012-11-29 | 2014-06-11 | 中国科学院计算机网络信息中心 | 一种网页信息相关地域的识别方法 |
CN103106542A (zh) * | 2012-12-13 | 2013-05-15 | 长安大学 | 一种数据分析及处理系统 |
CN103942245A (zh) * | 2014-02-19 | 2014-07-23 | 浪潮软件股份有限公司 | 基于元数据的数据抽取方法 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109379399A (zh) * | 2018-08-31 | 2019-02-22 | 杭州东方通信软件技术有限公司 | 一种基于元数据的数据共享自订阅处理方法及系统 |
CN109379399B (zh) * | 2018-08-31 | 2021-08-24 | 杭州东方通信软件技术有限公司 | 一种基于元数据的数据共享自订阅处理方法及系统 |
CN110874353A (zh) * | 2018-09-04 | 2020-03-10 | 阿里巴巴集团控股有限公司 | 一种数据模型的创建、数据表的访问方法和装置 |
CN110377568A (zh) * | 2019-07-26 | 2019-10-25 | 北京明略软件系统有限公司 | 一种元数据采集方法及装置 |
CN110457538A (zh) * | 2019-08-20 | 2019-11-15 | 北京明略软件系统有限公司 | 一种标签数据共享方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105608203B (zh) | 一种基于Hadoop平台的物联网日志处理方法和装置 | |
CN108280147A (zh) | 一种数据管理方法和装置 | |
US9953066B2 (en) | Automatically generating and reporting merged performance and capacity statistics | |
CN104580284B (zh) | 业务分配装置和业务分配方法 | |
CN110225095B (zh) | 一种数据处理方法、装置及系统 | |
WO2015074290A1 (zh) | 数据库实现方法 | |
CN110336863B (zh) | 一种数据上报方法和系统 | |
CN112867989A (zh) | 基于流的组成以及监视服务器系统和方法 | |
CN108173859A (zh) | 文件共享的方法和系统 | |
CN109144785A (zh) | 用于备份数据的方法和装置 | |
CN104113605A (zh) | 一种企业云应用开发的监控处理方法 | |
CN111177244A (zh) | 面向多个异构数据库的数据关联分析方法 | |
US7487183B1 (en) | Grouped filter rules for workflow application update notifications | |
CN102222112A (zh) | 资源管理装置和资源管理方法 | |
CN109978513A (zh) | 获得技术标准的方法和装置、项目任务管理设备和介质 | |
CN107506422A (zh) | 一种多数据源的分布式日志处理系统及方法 | |
CN104539449B (zh) | 一种故障信息处理方法与相关装置 | |
JP2010044763A (ja) | リアルタイム索引情報抽出機能を有するファイルアップロード方法及びこれを用いたウェブストレージシステム | |
Lee et al. | A big data management system for energy consumption prediction models | |
WO2016029272A1 (en) | Analysing medical data | |
EP3058455A1 (en) | Methods for monitoring and controlling a storage environment and devices thereof | |
CN106682177A (zh) | 服务记录信息的动态展示方法 | |
CN107784013B (zh) | 一种将分散文档互联进行分布式管理的方法 | |
CN103455627B (zh) | 一种数据分享方法和装置 | |
Kaur et al. | Image processing on multinode hadoop cluster |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180713 |