CN101661507A - 一种数据合并的方法及系统 - Google Patents
一种数据合并的方法及系统 Download PDFInfo
- Publication number
- CN101661507A CN101661507A CN200910177832A CN200910177832A CN101661507A CN 101661507 A CN101661507 A CN 101661507A CN 200910177832 A CN200910177832 A CN 200910177832A CN 200910177832 A CN200910177832 A CN 200910177832A CN 101661507 A CN101661507 A CN 101661507A
- Authority
- CN
- China
- Prior art keywords
- data
- database
- structural relation
- stored
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种数据合并的方法,该方法包括:在建立各个数据库之间的结构关系,并将所述结构关系进行存储之后,执行步骤:确定所要合并的数据的内容;根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据,并将其进行合并。相应地,本发明实施例还公开了一种数据合并的系统。本发明实施例所涉及的技术方案可以通过所存储的各个数据库之间的结构关系进行相关数据库的选择,并直接从选定的数据库中进行相关数据的获取和合并工作,从而在进行多个数据库中相关数据的合并时,可以有效减少用户的工作量,并相应降低出错率。
Description
技术领域
本发明涉及数据处理领域,更具体地说,涉及一种数据合并的方法及系统。
背景技术
数据合并是指根据实际需要将内容相关或指定内容的数据进行整合。通过对合并后的数据进行处理、分析,根据数据处理及数据分析结果得出相应的结论或调整策略。
目前,对于大规模的数据存储,均是通过数据库来完成,而由于在进行数据合并时,所需要的数据很有可能存储于不同的数据库中,这样就需要从多个数据库中进行相关数据的读取和合并,而现有技术中,针对该种情况,大多是通过手动的方式从对应的数据库中读取所需要的数据,之后将读取的这些数据进行合并汇总。
例如,由于现阶段各大公司大部分都采用了信息化管理,也就是说,将公司日常运营的相关数据存储于对应的数据库中,并根据数据库中相关数据的变化进行运营状况的分析和相关策略的调整。在公司的财务管理方面,可以将公司所有往来信息的一整套记录、会计报表和统计分析报表等设置为一个帐套,通常情况下,该帐套对应一个数据库。如果某公司有几个下属的独立核算的分支机构,则需要分别建立几个相互之间独立的帐套。这样,由于各个帐套之间均是独立存在的,总公司如果需要了解整个集团的运营状况,就必须调取各个分支机构的帐套中所存储的相关数据,并将该数据进行合并汇总,而目前基本是都是通过手工操作的方式来实现上述数据合并汇总工作的,这样也就相应产生了工作量大,错误率高的问题。
由上述可以得出,目前在进行多个数据库之间的数据合并工作时,由于各个数据库独立存在,需要通过手动的方式进行相关操作,这样无疑会花费大量的时间,而由于数据的合并工作繁琐,手工合并汇总极易出错。
发明内容
有鉴于此,本发明实施例提供一种数据合并的方法和系统,用以节省时间、减少用户工作量和降低数据合并过程中的错误率。
本发明实施例是这样实现的:
一种数据合并的方法,建立各个数据库之间的结构关系,并将所述结构关系进行存储之后,包括:
确定所要合并的数据的内容;
根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据,并将其进行合并。
所述将所述结构关系进行存储,包括:
为各个数据库设定一个唯一的标识字段;
将所述标识字段进行存储,通过所存储的标识字段之间的结构关系体现各个数据库之间的结构关系。
所述将所述标识字段进行存储,包括:
将所述标识字段根据各个数据库之间的结构关系形成列表,并将所述列表进行存储。
所述将所述列表进行存储,包括:
将所述列表存储于数据库中。
所述根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据,包括:
根据所要合并数据的内容从所述列表中选择所要读取数据的数据库,并从所述数据库中进行数据内容的获取。
所述将所述数据进行合并,包括:
将从多个数据库中提取的数据下载至同一数据列表中。
所述标识字段包括:对应数据库的ID。
一种数据合并的系统,包括:
建立单元,用于建立各个数据库之间的结构关系;
存储单元,用于将建立的各个数据库之间的结构关系进行存储;
确定单元,用于确定所要合并的数据的内容;
数据提取单元,用于根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据;
数据合并单元,用于将提取的数据进行合并。
所述存储单元包括:
字段设定子单元,为各个数据库设定一个唯一的标识字段;
存储子单元,将所述设定的标识子单元进行存储。
所述数据提取单元包括:
数据库选择子单元,用于根据所要合并数据的内容从所述列表中选择所要读取数据的数据库;
数据获取子单元,用于从选择处的数据库中进行数据内容的获取。
与现有技术相比,本发明实施例提供的技术方案具有以下优点和特点:本发明实施例通过将多个数据库之间建立结构关系,并将该结构关系进行存储,在需要从多个数据库中提取相关数据信息时,可以通过所存储的各个数据库之间的结构关系进行相关数据库的选择,并直接从选定的数据库中进行相关数据的获取和合并工作,从而在进行多个数据库中相关数据的合并时,可以有效减少用户的工作量,并相应降低出错率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例所涉及的一种数据合并的方法流程图;
图2为本发明实施例所涉及的一种数据合并的系统的结构示意图;
图3为本发明实施例所涉及的一种数据合并的系统某一单元的机构示意图;
图4为本发明实施例所涉及的一种数据合并的系统某一单元的机构示意图;
图5为本发明实施例所涉及的另一种数据合并的方法流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明可以应用于基于数据库实现的系统或软件中,并且数据库具有如下特点:尽可能不重复,以最优方式为某个特定组织的多种应用服务,其数据结构独立于使用它的应用程度,对数据的增、删、改和检索由统一软件进行管理和控制。
本发明实施例提供了一种数据合并的方法,该方法首先需要建立各个数据库之间的结构关系,并将所述结构关系进行存储。其中。在建立各个数据库之间的结构关系时,可以根据实际情况进行设定,例如,可以设置的结构关系为所有数据库之间均可以自由访问;还可以在多个数据库之间设定某几个数据库之间可以自由访问;或者,其中一个数据库可以自由访问其他所有数据库等等,具体建立何种结构关系,本实施例不做限制。
在建立了各数据库之间的结构关系之后,要将该结构关系进行存储,以便于用户使用。其中,在存储过程中,为了便于存储,可以预先为每一个数据库设定一个标识字段,该标识字段可以是该数据库本身的ID,也可以是任意选取的字母或数字等。之后,为了能够体现各个数据库之间的结构关系,可以将所设定的各个数据库的标识字段根据各个数据库之间的结构关系形成列表,并可将该列表存储于对应的数据库中。在完成上述操作之后,可进行如下步骤:
步骤101:确定所要合并的数据的内容;
在步骤101中,用户可以根据实际需要确定所要合并的数据的内容。例如现有多个数据库,而这些数据库中均包括所需要数据的一部分,要提取所有数据库中的指定数据,需要执行步骤102。
步骤102:根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据,并将其进行合并。
在步骤102中,由于已建立了各个数据库之间的机构关系,并且该结构关系已通过一定形式进行了存储,那么在进行这些数据库中指定数据的获取工作时,只需要根据所存储的各个数据库之间的结构关系,并结合所要获取的数据的内容,对数据库进行选取。对于被选中的数据库,可以直接访问其内部数据。而在进行数据合并时,可以通过下载的方式将多个数据库中指定的数据内容下载至同一个列表中,以完成对相关数据的获取和合并工作。
本发明实施例所提供的一种数据合并的方法,通过将多个数据库之间建立结构关系,并将该结构关系进行存储,在需要从多个数据库中提取相关数据信息时,可以通过所存储的各个数据库之间的结构关系进行相关数据库的选择,并直接从选定的数据库中进行相关数据的获取和合并工作,从而在进行多个数据库中相关数据的合并时,可以有效减少用户的工作量,并相应降低出错率。
相应地,本发明实施例还提供了一种数据合并的系统,该系统结构如图2所示,包括:建立单元201、存储单元202、确定单元203、数据提取单元204和数据合并单元205,其中:
建立单元201,用于建立各个数据库之间的结构关系;
存储单元202,用于将建立的各个数据库之间的结构关系进行存储;
确定单元203,用于确定所要合并的数据的内容;
数据提取单元204,用于根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据;
数据合并单元205,用于将提取的数据进行合并。
另外,还可将上述单元做进一步具体,其中:
存储单元可包括如图3所示子单元:
字段设置子单元301,用于为各个数据库设定一个唯一的标识字段;
存储子单元302,用于将所述设定的标识子单元进行存储。
数据提取单元可包括如图4所示子单元:
数据库选择子单元401,用于根据所要合并数据的内容从所述列表中选择所要读取数据的数据库;
数据获取子单元402,用于从选择处的数据库中进行数据内容的获取。
本发明实施例所提供的一种数据合并的系统,通过将多个数据库之间建立结构关系,并将该结构关系进行存储,在需要从多个数据库中提取相关数据信息时,可以通过所存储的各个数据库之间的结构关系进行相关数据库的选择,并直接从选定的数据库中进行相关数据的获取和合并工作,从而在进行多个数据库中相关数据的合并时,可以有效减少用户的工作量,并相应降低出错率。
结合上述方法、系统和具体应用场景,将本发明所涉及的技术方案做进一步介绍,在本实施例中,以某集团公司信息管理系统为例,对本发明所提供的技术方案做详细阐述。在本实施例中,所提到的某集团公司下设多家分支机构,并且每家分支机构进行独立核算,为了便于集团对各个分支机构的运营情况进行较好、较便利地了解,可以采用如图5所示步骤来实现:
步骤501:建立每家分支机构对应的帐套,并为每个帐套指定一个标志字段;
在步骤501中,由于该集团公司下属的多家分支机构进行独立核算,因此,每家公司均需要建立对应的帐套,以用于对公司的日常运营情况进行记录,同大多数帐套所存储的信息类似,本实施例中,各个分支机构所对应的帐套中同样会设置公司往来信息的记录、会计报表和统计分析报表等项目。在建立好个分支机构的帐套后,需要为每个帐套指定一个对应的标志字段,用于区分集团公司内其他机构的帐套,其中,该字段的类型和长度可以根据公司所采用的信息管理系统的相关功能或性能等来自行进行确定。另外,为了便于识别,还可为标志字段赋予特定的含义,比如可以以该帐套所对应的分支机构的名称等来设定标志字段。
步骤502:建立集团管理帐套;
在步骤502中,在建立集团管理帐套的过程中,除了需要设置一些最基本的项目,例如会计报表、统计分析报表等项目外,为了在对各分支机构的管理过程中,可以快速、准确地获取各分支机构的运营状况信息,就需要对各分支机构所对应的帐套中的相关数据进行读取,为了实现读取过程中的便利性和快捷性,还在集团管理帐套中设置组织机构表,该组织机构表用于对该集团内的所有帐套进行统一管理操作。在设置该组织机构表时,可以根据公司实际的组织结构来进行设置,也可以采取其他有利于管理的方法进行设置。另外在进行组织机构表的设置时,可以在列表中采用各帐套的标志字段来唯一指代该帐套,并与所指代的帐套产生直接关联。也就是说,通过调用一个标志字段,可以对所指代的帐套中的数据进行读取。
步骤503:集团总部对整个集团的相关数据进行提取、合并;
在步骤503中,如果集团需要对整个集团某产品的生产及销售情况进行统计,由于该集团的某几个下属分支机构也生产并销售该种产品,因此,在进行该产品的统计时,就需要提取这几个分支机构所对应的帐套数据库中该产品的生产、销售信息。并可进行如下操作:
首先在集团管理帐套数据库中找出所要统计的产品的生产情况的列表信息以及销售情况的列表信息,由于其下属的多家分支机构也生产并销售该种产品,因此,需要从所建立的组织机构表中选中生产并销售该产品的分支机构,由于组织机构表中的标志字段可以与其所对应的帐套数据库产生直接关联,因此可以直接读取指定帐套数据库中的相关数据信息。
另外,还可以根据预先设置,将读取到的该产品的生产数据显示在同一列表中,完成对所读取的数据的合并。同理,也可对所读取到的该产品的销售数据进行合并显示。
上面所述说明了对某产品的生产和销售进行统计的情况,而对于其他项目的统计,方法与上述类似,在此不做赘述。
步骤504:集团总部对所获取的数据信息进行分析,并根据分析结果调整相应策略。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1、一种数据合并的方法,其特征在于,建立各个数据库之间的结构关系,并将所述结构关系进行存储之后,包括:
确定所要合并的数据的内容;
根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据,并将其进行合并。
2、根据权利要求1所述的方法,其特征在于,所述将所述结构关系进行存储,包括:
为各个数据库设定一个唯一的标识字段;
将所述标识字段进行存储,通过所存储的标识字段之间的结构关系体现各个数据库之间的结构关系。
3、根据权利要求2所述的方法,其特征在于,所述将所述标识字段进行存储,包括:
将所述标识字段根据各个数据库之间的结构关系形成列表,并将所述列表进行存储。
4、根据权利要求3所述的方法,其特征在于,所述将所述列表进行存储,包括:
将所述列表存储于数据库中。
5、根据权利要求3或4所述的方法,其特征在于,所述根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据,包括:
根据所要合并数据的内容从所述列表中选择所要读取数据的数据库,并从所述数据库中进行数据内容的获取。
6、根据权利要求1至5中任一项所述的方法,其特征在于,所述将所述数据进行合并,包括:
将从多个数据库中提取的数据下载至同一数据列表中。
7、根据权利要求所述的方法,其特征在于,所述标识字段包括:对应数据库的ID。
8、一种数据合并的系统,其特征在于,包括:
建立单元,用于建立各个数据库之间的结构关系;
存储单元,用于将建立的各个数据库之间的结构关系进行存储;
确定单元,用于确定所要合并的数据的内容;
数据提取单元,用于根据所建立的各个数据库之间的结构关系,从多个数据库中提取所述内容的数据;
数据合并单元,用于将提取的数据进行合并。
9、根据权利要求8所述的系统,其特征在于,所述存储单元包括:
字段设定子单元,用于为各个数据库设定一个唯一的标识字段;
存储子单元,用于将所述设定的标识子单元进行存储。
10、根据权利要求8所述的系统,其特征在于,所述数据提取单元包括:
数据库选择子单元,用于根据所要合并数据的内容从所述列表中选择所要读取数据的数据库;
数据获取子单元,用于从选择处的数据库中进行数据内容的获取。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN200910177832A CN101661507A (zh) | 2009-09-25 | 2009-09-25 | 一种数据合并的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN200910177832A CN101661507A (zh) | 2009-09-25 | 2009-09-25 | 一种数据合并的方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101661507A true CN101661507A (zh) | 2010-03-03 |
Family
ID=41789527
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200910177832A Pending CN101661507A (zh) | 2009-09-25 | 2009-09-25 | 一种数据合并的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101661507A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104424190A (zh) * | 2013-08-20 | 2015-03-18 | 富士通株式会社 | 整合多个数据库的方法及装置 |
CN105528447A (zh) * | 2015-12-22 | 2016-04-27 | 远光软件股份有限公司 | 一种对特定数据逐层边剔除边汇总的方法 |
CN106066881A (zh) * | 2016-05-31 | 2016-11-02 | 深圳市永兴元科技有限公司 | 数据处理方法及装置 |
CN106469211A (zh) * | 2016-09-05 | 2017-03-01 | 南京简睿捷软件开发有限公司 | 大数据的内存加载方法及装置 |
CN108388675A (zh) * | 2018-03-26 | 2018-08-10 | 深圳市买买提信息科技有限公司 | 一种身份标识拉通方法及终端设备 |
-
2009
- 2009-09-25 CN CN200910177832A patent/CN101661507A/zh active Pending
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104424190A (zh) * | 2013-08-20 | 2015-03-18 | 富士通株式会社 | 整合多个数据库的方法及装置 |
CN105528447A (zh) * | 2015-12-22 | 2016-04-27 | 远光软件股份有限公司 | 一种对特定数据逐层边剔除边汇总的方法 |
CN105528447B (zh) * | 2015-12-22 | 2019-04-26 | 远光软件股份有限公司 | 一种对特定数据逐层边剔除边汇总的方法 |
CN106066881A (zh) * | 2016-05-31 | 2016-11-02 | 深圳市永兴元科技有限公司 | 数据处理方法及装置 |
CN106066881B (zh) * | 2016-05-31 | 2019-10-22 | 深圳市永兴元科技股份有限公司 | 数据处理方法及装置 |
CN106469211A (zh) * | 2016-09-05 | 2017-03-01 | 南京简睿捷软件开发有限公司 | 大数据的内存加载方法及装置 |
CN106469211B (zh) * | 2016-09-05 | 2019-10-25 | 南京简睿捷软件开发有限公司 | 大数据的内存加载方法及装置 |
CN108388675A (zh) * | 2018-03-26 | 2018-08-10 | 深圳市买买提信息科技有限公司 | 一种身份标识拉通方法及终端设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7996378B2 (en) | System and method for graphically distinguishing levels of a multidimensional database | |
EP1922641B1 (en) | User interface for creating a spreadsheet data summary table | |
AU2006291316B2 (en) | Filtering user interface for a data summary table | |
US6839719B2 (en) | Systems and methods for representing and editing multi-dimensional data | |
US7970735B2 (en) | Cross varying dimension support for analysis services engine | |
US9251212B2 (en) | Profiling in a massive parallel processing environment | |
WO2010091456A1 (en) | Creation of a data store | |
US20150356137A1 (en) | Systems and Methods for Optimizing Data Analysis | |
CN103488475B (zh) | 多维数据分析系统和多维数据分析方法 | |
JP2006107431A (ja) | 使いやすいデータコンテキストフィルタリング | |
US20090043788A1 (en) | Proactive business intelligence | |
CN105653647B (zh) | Sql语句的信息采集方法及系统 | |
CN101452487A (zh) | 一种数据加载的方法、系统及数据加载装置 | |
CN101661507A (zh) | 一种数据合并的方法及系统 | |
US9971988B2 (en) | System and method for providing an intelligent configuration rationalization solution | |
Tank et al. | Speeding ETL processing in data warehouses using high-performance joins for changed data capture (cdc) | |
Macura | Integration of data from heterogeneous sources using ETL technology | |
CN104182226B (zh) | 一种通用移动信息系统适配方法与装置 | |
US8112458B1 (en) | User segmentation user interface | |
CN112035468B (zh) | 基于内存计算、web可视化配置的多数据源ETL工具 | |
CN111949743A (zh) | 网点运营数据获取方法、装置及设备 | |
US7966333B1 (en) | User segment population techniques | |
US7636709B1 (en) | Methods and systems for locating related reports | |
US20060218154A1 (en) | Data processing method and data processing program | |
CN113625967B (zh) | 数据存储方法、数据查询方法及服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20100303 |