CN105574073A - 一种用于大数据处理的四维数据库及其创建方法 - Google Patents
一种用于大数据处理的四维数据库及其创建方法 Download PDFInfo
- Publication number
- CN105574073A CN105574073A CN201510771221.3A CN201510771221A CN105574073A CN 105574073 A CN105574073 A CN 105574073A CN 201510771221 A CN201510771221 A CN 201510771221A CN 105574073 A CN105574073 A CN 105574073A
- Authority
- CN
- China
- Prior art keywords
- data
- cell body
- name
- attribute
- dimensional database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 16
- 210000005056 cell body Anatomy 0.000 claims description 48
- 210000004027 cell Anatomy 0.000 claims description 13
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000007726 management method Methods 0.000 description 4
- 238000013523 data management Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/283—Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种用于大数据处理的四维数据库及其创建方法，其特征在于数据名称、数据属性、数据创建时间、数据管理者分别对应四维数据库的四个维度，四维数据库的最小数据单元为一个数据单元体，在每个数据单元体中数据名称只能有一个数据属性，创建数据单元体时一个数据名字只对应其中一种数据属性；有益效果是特别适合处理大数据复杂系统，可以提取数据库中任意数据单元体进行组合得到多种结果，结果输出的柔性化程度大幅提高，程序修改难度大幅降低，工作效率显著提高，即可以填补相关技术空白，又可产生较大的社会效益与经济效益。
Description
技术领域
本发明涉及计算机及管理信息系统领域，特别是涉及一种用于大数据处理的四维数据库及其创建方法。
背景技术
目前企业通过企业信息集成软件如DSS（决策支持系统）、MIS（管理信息系统）或BI（商业智能系统）进行数据管理和报表输出。但是，目前企业信息集成软件底层所采用的SQL数据库均是数据表形式，含有数据名称和对应的数据属性，在创建数据表时，底层一个数据名称同时对应所有的数据属性，一个数据名称与所有的数据属性同时绑定，定义在一起，形成一个整体。根据不同的输出模块，创建许多不同的数据表，一旦输出模块需要调整和更改，需要耗费大量的精力，底层数据库几乎需要全部重新创建，更改起来十分不方便，系统的柔性非常差。且数据表中的数据没有含有时间轴的信息，即不能将动态的数据信息连续的存储在一个一个数据表中，对于不同的时刻需要创建不同的数据表，时间节点增多，这样需要创建大量的数据表。另外，目前的数据表中的每个数据单元不含有数据管理者的信息，后期针对某些特定数据单元进行数据权限设定非常不便，且无法实现局部指定数据单元的群组数据共享。
为了解决目前现有技术数据库结构灵活性较差，随机扩展性不好的技术瓶颈，本发明提出了一种用于大数据处理的四维数据库及其创建方法，能够将底层的多维数据信息同时存放于一个数据库中，能够得到非常丰富的各种输出结果，且能根据系统输出模块需要，随时增加和删除输出模块，无需重新创建底层数据库，修改方便，系统的可扩展性好，即填补相关技术空白，又可产生较大的社会效益与经济效益。
发明内容
为了克服上述现有技术的不足，本发明提供了一种用于大数据处理的四维数据库及其创建方法，现行数据库的创建方法如整版印刷术，四维数据库的创建原理如活字印刷术，可以任意组合和任意排列，后期数据处理和调用及其灵活，现行的数据库的数据单元格均为整体，即一个数据名称与多个数据属性同时绑定在一起，灵活性非常差，一旦目标系统搭建完毕，后期修改非常困难，需要输出新的统计量时，需要重建建立对应的数据表，另外由于现行的数据表中不含有每个基层数据单元的管理者信息，因此无法实现数据共享和建立具有共同话题的数据群组。
本发明所解决的技术问题所采用的技术方案：一种用于大数据处理的四维数据库及其创建方法，其特征在于四维数据库包括传统SQL数据表中行对应的数据名称和列对应的数据属性，另外还包括每个数据的创建时间和数据的管理者,数据名称、数据属性、数据创建时间、数据管理者分别对应四维数据库的四个维度，四维数据库的最小数据单元为一个数据单元体，在每个数据单元体中数据名称只能有一个数据属性，创建数据单元体时一个数据名字只对应其中一种数据属性，一个数据名称拥有多个不同的数据属性时，需要创建多个数据单元体，数据名称与若干数据属性逐个绑定，不同于SQL数据表中数据名称与多个数据属性为一个整体，数据名称与对应的所有数据属性同时绑定，四维数据库中每个数据单元体都独立包含数据名称、数据属性、数据创建时间、数据管理者；包括以下创建步骤：第一，创建数据单元体时，进行数据打散处理，将数据单元体分割成独立的最小数据单元，每个数据名称只对应其中一种数据属性，数据名称和其中一种数据属性绑定，若一个数据名称有多种不同数据属性时，需要逐一分别创建多个数据单元体，不允许在数据单元体中一个数据名称同时绑定所有的数据属性，每个数据单元体都独立包括时间维度和数据管理者信息；第二，根据数据处理的任务需求和目标，提取四维数据库中所需要的数据单元体，进行独立和任意组合输出，得到想要的目标报表和曲线；第三，任务需求发生调整时，随时删除已有的输出项目，再次提取四维数据库中相关的最小数据单元体，再次进行独立和任意组合，即可快速得到想要的统计结果；第四，随时设定和更改任意数据单元体的数据管理者信息，进行数据分享权限设定；第五，确定数据分享对象后，在四维数据库中仅显示指定的数据管理者的数据单元体中的数据信息，其他未授权的数据管理者无法分享他人的数据信息；第六，建立不同的群组，每个群组针对具有某个相同关注点的不同数据管理者，在同一群组内，数据管理者可用共享各自的数据单元体中的数据信息，进一步根据群组内这些共享的数据单元体，组合输出新的统计结果。
与现有技术相比，本发明的有益效果如下：一旦包含基础数据的底层数据库创建成功后，后期修改系统的输出模块将十分方便和随意，无需重新创建或修改数据库，得到丰富的各种统计结果；在一个数据库中即可包含所有的各种数据信息，无需管理繁多的数据表；数据库中的每个数据单元体均包含数据管理者信息，可以精确管理数据库中任意指定位置的数据单元体的权限，实现任意范围的群组数据信息共享；能够随时得到以时间为轴线的数据信息，实现从单一静态数据表向动态数据库的转变；后期程序的维护难度大幅度简体，工作效率大幅度提高，系统输出结果的可扩展性大大增强。
附图说明
图1是四维数据库的结构原理图；
图2是四维数据库的创建流程图。
图1中：
1、数据单元体A；2、数据单元体B；
3、数据单元体C。
具体实施方式
参考附图描述本发明的实施方式，下面结合图1—图2对本发明进行具体说明。本发明提供了一种用于大数据处理的四维数据库及其创建方法，包括以下具体创建步骤：
第一，创建数据单元体时，进行数据打散处理，将数据单元体分割成独立的最小数据单元，每个数据名称只对应其中一种数据属性，数据名称和其中一种数据属性绑定，若一个数据名称有多种不同数据属性时，需要逐一分别创建多个数据单元体，不允许在数据单元体中一个数据名称同时绑定所有的数据属性，每个数据单元体都独立包括时间维度和数据管理者信息，以图1为例进行解释，建立了一个5×5×5的立体数据库，其中每一个小立方体表示一个数据单元体，X、Y、Z分别表示数据名称、数据属性、数据创建时间，数据单元体上的图案信息表示不同的数据管理者，图1中的数据单元体A1、数据单元体B2、数据单元体C3表示四维数据库中在某个同样的时间点来自不同数据名称的某个相同的数据属性，目前这三个数据单元体分别由不同的数据管理者仅限管理，可以通过三维数组的方式任意调取大数据库中空间中任意位置的数据单元体，也可任意调取某个数据名称的同一数据属性不同时间维度的所有信息。
第二，根据数据处理的任务需求和目标，提取四维数据库中所需要的数据单元体，进行独立和任意组合输出，得到想要的目标报表和曲线，任意提取大数据库中的任意位置的数据单元体的数据信息，通过组合和条件公式得到各种输出结果，扩大任务输出的多样性，可以设定多种统计量。
第三，根据任务需求的调整和新的关注点，随时调整输出项目，由于底层数据单元体是最基层的数据来源，同时也是最小的数据来源，随时删除已有的输出项目，再次任意提取四维数据库中相关的最小数据单元体，再次进行独立和任意组合，即可快速得到想要的统计结果，随时可以增加或减少输出项目。
第四，根据管理权限和工作调整等实时变化情况，随时设定和更改任意数据单元体的数据管理者信息，进行数据分享权限设定，由于每个数据单元体自身都含有数据管理者的信息，对整个数据库进行数据权限管理时非常方便和简单，可以精确管理到每一个数据单元体。
第五，确定数据分享对象后，在四维数据库中仅显示指定的数据管理者的数据单元体中的数据信息，其他未授权的数据管理者无法分享他人的数据信息。
第六，根据任务和关注点不同，对整个四维数据库进行分组，建立不同的群组，每个群组针对具有某个相同关注点的不同数据管理者，在同一群组内，数据管理者可用共享各自的数据单元体中的数据信息，可进一步根据群组内这些共享的数据单元体，组合输出新的统计结果，不在这个群组内的其他数据管理者无权分享。
以上所述，仅是发明的较佳实施方式，并非对本发明做任何限制，凡是根据本发明实质对以上实施方式所作的任何修改、变更以及等效变化，均仍属于本发明技术的保护范围之内。
Claims (1)
1.一种用于大数据处理的四维数据库及其创建方法，其特征在于四维数据库包括传统SQL数据表中行对应的数据名称和列对应的数据属性，另外还包括每个数据的创建时间和数据的管理者,数据名称、数据属性、数据创建时间、数据管理者分别对应四维数据库的四个维度，四维数据库的最小数据单元为一个数据单元体，在每个数据单元体中数据名称只能有一个数据属性，创建数据单元体时一个数据名字只对应其中一种数据属性，一个数据名称拥有多个不同的数据属性时，需要创建多个数据单元体，数据名称与若干数据属性逐个绑定，不同于SQL数据表中数据名称与多个数据属性为一个整体，数据名称与对应的所有数据属性同时绑定，四维数据库中每个数据单元体都独立包含数据名称、数据属性、数据创建时间、数据管理者；包括以下创建步骤：第一，创建数据单元体时，进行数据打散处理，将数据单元体分割成独立的最小数据单元，每个数据名称只对应其中一种数据属性，数据名称和其中一种数据属性绑定，若一个数据名称有多种不同数据属性时，需要逐一分别创建多个数据单元体，不允许在数据单元体中一个数据名称同时绑定所有的数据属性，每个数据单元体都独立包括时间维度和数据管理者信息；第二，根据数据处理的任务需求和目标，提取四维数据库中所需要的数据单元体，进行独立和任意组合输出，得到想要的目标报表和曲线；第三，任务需求发生调整时，随时删除已有的输出项目，再次提取四维数据库中相关的最小数据单元体，再次进行独立和任意组合，即可快速得到想要的统计结果；第四，随时设定和更改任意数据单元体的数据管理者信息，进行数据分享权限设定；第五，确定数据分享对象后，在四维数据库中仅显示指定的数据管理者的数据单元体中的数据信息，其他未授权的数据管理者无法分享他人的数据信息；第六，建立不同的群组，每个群组针对具有某个相同关注点的不同数据管理者，在同一群组内，数据管理者可用共享各自的数据单元体中的数据信息，进一步根据群组内这些共享的数据单元体，组合输出新的统计结果。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510771221.3A CN105574073B (zh) | 2015-11-12 | 2015-11-12 | 一种用于大数据处理的四维数据库及其创建方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510771221.3A CN105574073B (zh) | 2015-11-12 | 2015-11-12 | 一种用于大数据处理的四维数据库及其创建方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105574073A true CN105574073A (zh) | 2016-05-11 |
| CN105574073B CN105574073B (zh) | 2019-09-17 |
Family
ID=55884204
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510771221.3A Active CN105574073B (zh) | 2015-11-12 | 2015-11-12 | 一种用于大数据处理的四维数据库及其创建方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105574073B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113553322A (zh) * | 2020-04-26 | 2021-10-26 | 北京极迅智程网络科技股份有限公司 | 基于四维表单的数据分类汇总自主搭建方法和工具 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102318327A (zh) * | 2009-03-31 | 2012-01-11 | 株式会社Ntt都科摩 | 数据共享系统、共享数据管理装置、共享数据管理装置的控制方法 |
| CN104199850A (zh) * | 2014-08-08 | 2014-12-10 | 华迪计算机集团有限公司 | 基础数据的处理方法和装置 |
| CN104636433A (zh) * | 2014-12-29 | 2015-05-20 | 国家电网公司 | 基于统一维度建模的电力信息系统数据管理系统及其方法 |
| CN104660705A (zh) * | 2015-03-06 | 2015-05-27 | 四川智羽软件有限公司 | 一种网站数据库后台处理方法 |
-
2015
- 2015-11-12 CN CN201510771221.3A patent/CN105574073B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102318327A (zh) * | 2009-03-31 | 2012-01-11 | 株式会社Ntt都科摩 | 数据共享系统、共享数据管理装置、共享数据管理装置的控制方法 |
| CN104199850A (zh) * | 2014-08-08 | 2014-12-10 | 华迪计算机集团有限公司 | 基础数据的处理方法和装置 |
| CN104636433A (zh) * | 2014-12-29 | 2015-05-20 | 国家电网公司 | 基于统一维度建模的电力信息系统数据管理系统及其方法 |
| CN104660705A (zh) * | 2015-03-06 | 2015-05-27 | 四川智羽软件有限公司 | 一种网站数据库后台处理方法 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113553322A (zh) * | 2020-04-26 | 2021-10-26 | 北京极迅智程网络科技股份有限公司 | 基于四维表单的数据分类汇总自主搭建方法和工具 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105574073B (zh) | 2019-09-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106777225B (zh) | 一种数据的迁移方法和系统 | |
| CN104199986A (zh) | 基于hbase和geohash的矢量数据空间索引方法 | |
| CN108280080A (zh) | 一种数据同步方法、装置以及电子设备 | |
| CN101499095B (zh) | 用于数据共享平台的构建缓冲的方法 | |
| CN110674154A (zh) | 一种基于Spark的对Hive中数据进行插入、更新和删除的方法 | |
| WO2001048638A3 (en) | Database management system and method for databases having large objects | |
| CN102882973A (zh) | 基于p2p技术的分布式负载均衡系统和方法 | |
| CN104111924A (zh) | 一种数据库系统 | |
| CN106777387A (zh) | 一种基于HBase的物联网大数据存取方法 | |
| CN107665246A (zh) | 基于图数据库的动态数据迁移方法及图数据库集群 | |
| CN102567505A (zh) | 一种分布式数据库及其数据操作方法 | |
| Du et al. | Spatio-temporal data index model of moving objects on fixed networks using hbase | |
| CN105938479A (zh) | 一种关系表与非关系表的结构转换方法 | |
| CN108073696A (zh) | 基于分布式内存数据库的gis应用方法 | |
| CN104008199A (zh) | 一种数据查询方法 | |
| CN103218265B (zh) | 基于空间密度聚类的并行式虚拟角色划分方法 | |
| CN109120445A (zh) | 一种网络日志数据同步系统及方法 | |
| CN104168138A (zh) | 一种电力通信网络系统集中拓扑生成展示方法 | |
| CN105243237A (zh) | 一种装配工艺结构树及其构建方法 | |
| CN105574073A (zh) | 一种用于大数据处理的四维数据库及其创建方法 | |
| CN101587487B (zh) | 一种电网图形动态分布索引的实现方法 | |
| CN105653654A (zh) | 一种抽奖资格索引系统及方法 | |
| CN105471630A (zh) | 大容量分组传送系统下的北向系统消息分发系统及方法 | |
| CN100417077C (zh) | 一种静态动态结合的存储区管理的方法 | |
| CN102103607A (zh) | 一种无刷新批量上传图片并自动获取图片信息的技术 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20240607 Address after: Red Sandalwood Building, No. 27 Jianguo Road, Chaoyang District, Beijing, 100024 Patentee after: Nanjing Ranling Digital Technology Co.,Ltd. Country or region after: China Address before: 100086 401-a097, building 1, yard 1, Shangdi East Road, Haidian District, Beijing Patentee before: BEIJING JIXUN ZHICHENG NETWORK TECHNOLOGY CO.,LTD. Country or region before: China |
|
| TR01 | Transfer of patent right |