CN101916261A - 一种分布式并行数据库系统的数据分区方法 - Google Patents
一种分布式并行数据库系统的数据分区方法 Download PDFInfo
- Publication number
- CN101916261A CN101916261A CN2010102396560A CN201010239656A CN101916261A CN 101916261 A CN101916261 A CN 101916261A CN 2010102396560 A CN2010102396560 A CN 2010102396560A CN 201010239656 A CN201010239656 A CN 201010239656A CN 101916261 A CN101916261 A CN 101916261A
- Authority
- CN
- China
- Prior art keywords
- node
- data
- record
- dimension table
- database system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
Claims (10)
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2010102396560A CN101916261B (zh) | 2010-07-28 | 2010-07-28 | 一种分布式并行数据库系统的数据分区方法 |
PCT/CN2010/077565 WO2012012968A1 (zh) | 2010-07-28 | 2010-10-01 | 一种分布式并行数据库系统的数据分区方法 |
US13/325,810 US20120109888A1 (en) | 2010-07-28 | 2011-12-14 | Data partitioning method of distributed parallel database system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2010102396560A CN101916261B (zh) | 2010-07-28 | 2010-07-28 | 一种分布式并行数据库系统的数据分区方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101916261A true CN101916261A (zh) | 2010-12-15 |
CN101916261B CN101916261B (zh) | 2013-07-17 |
Family
ID=43323773
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010102396560A Active CN101916261B (zh) | 2010-07-28 | 2010-07-28 | 一种分布式并行数据库系统的数据分区方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20120109888A1 (zh) |
CN (1) | CN101916261B (zh) |
WO (1) | WO2012012968A1 (zh) |
Cited By (49)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102043726A (zh) * | 2010-12-29 | 2011-05-04 | 北京播思软件技术有限公司 | 一种大规模时序数据的存储管理方法 |
CN102662968A (zh) * | 2012-03-09 | 2012-09-12 | 浪潮通信信息系统有限公司 | 一种对于Oracle大数据量存储的优化方法 |
CN103186651A (zh) * | 2011-12-31 | 2013-07-03 | 中国移动通信集团公司 | 一种分布式关系数据库及其建立、查询方法和装置 |
CN103309902A (zh) * | 2012-03-16 | 2013-09-18 | 多玩娱乐信息技术(北京)有限公司 | 一种社交网络中用户信息存储和查找的方法和装置 |
CN103384878A (zh) * | 2011-02-25 | 2013-11-06 | 数创株式会社 | 分布式数据库系统和分布式数据库的数据结构 |
CN103412897A (zh) * | 2013-07-25 | 2013-11-27 | 中国科学院软件研究所 | 一种基于分布式结构的并行数据处理方法 |
CN103488645A (zh) * | 2012-06-13 | 2014-01-01 | 镇江华扬信息科技有限公司 | 一种用于物联网数据更新的结构设计方法 |
WO2014015492A1 (zh) * | 2012-07-26 | 2014-01-30 | 华为技术有限公司 | 数据分布的方法、装置及系统 |
WO2014059927A1 (en) * | 2012-10-16 | 2014-04-24 | Huawei Technologies Co., Ltd. | System and Method for Flexible Distributed Massively Parallel Processing (MPP) |
CN103782293A (zh) * | 2011-08-26 | 2014-05-07 | 惠普发展公司,有限责任合伙企业 | 用于数据分区的多维集群 |
WO2014067449A1 (en) * | 2012-10-29 | 2014-05-08 | Huawei Technologies Co., Ltd. | System and method for flexible distributed massively parallel processing (mpp) database |
CN103838787A (zh) * | 2012-11-27 | 2014-06-04 | 阿里巴巴集团控股有限公司 | 一种对分布式数据仓库进行更新的方法和设备 |
US8799284B2 (en) | 2012-11-30 | 2014-08-05 | Futurewei Technologies, Inc. | Method for automated scaling of a massive parallel processing (MPP) database |
CN104077724A (zh) * | 2013-03-28 | 2014-10-01 | 北京东方道迩信息技术股份有限公司 | 一种面向物联网综合应用的基础空间信息架构方法 |
WO2014154016A1 (zh) * | 2013-03-29 | 2014-10-02 | 深圳市并行科技有限公司 | 并行数据库管理系统及设计方案 |
WO2015021828A1 (zh) * | 2013-08-16 | 2015-02-19 | 华为技术有限公司 | 分布式数据库的数据存储方法和装置 |
CN104391948A (zh) * | 2014-12-01 | 2015-03-04 | 广东电网有限责任公司清远供电局 | 数据仓库的数据标准化构建方法及系统 |
CN104794249A (zh) * | 2015-05-15 | 2015-07-22 | 乐得科技有限公司 | 一种数据库的实现方法和设备 |
CN104871153A (zh) * | 2012-10-29 | 2015-08-26 | 华为技术有限公司 | 用于灵活的分布式大规模并行处理(mpp)数据库的系统和方法 |
WO2015123809A1 (zh) * | 2014-02-18 | 2015-08-27 | 华为技术有限公司 | 一种数据表的导入方法、数据管理器以及服务器 |
CN105517644A (zh) * | 2014-03-05 | 2016-04-20 | 华为技术有限公司 | 一种数据分区方法和设备 |
CN105740365A (zh) * | 2016-01-27 | 2016-07-06 | 北京掌阔移动传媒科技有限公司 | 一种数据仓库快速查询方法和装置 |
WO2016107497A1 (en) * | 2014-12-31 | 2016-07-07 | Huawei Technologies Co., Ltd. | Method and apparatus for scalable sorting of data set |
CN105874453A (zh) * | 2013-12-30 | 2016-08-17 | 微软技术许可有限责任公司 | 为多承租者数据库提供一致的承租者体验 |
WO2016165525A1 (zh) * | 2015-04-16 | 2016-10-20 | 华为技术有限公司 | 在跨分区数据库中查询数据的方法及跨分区查询装置 |
WO2016191995A1 (zh) * | 2015-05-31 | 2016-12-08 | 华为技术有限公司 | 一种分布式数据库中关联表分区的方法和设备 |
CN103186651B (zh) * | 2011-12-31 | 2016-12-14 | 中国移动通信集团公司 | 一种分布式关系数据库及其建立、查询方法和装置 |
CN107066495A (zh) * | 2016-12-29 | 2017-08-18 | 北京瑞卓喜投科技发展有限公司 | 沿纵向拓展的区块链的生成方法及系统 |
CN107229635A (zh) * | 2016-03-24 | 2017-10-03 | 华为技术有限公司 | 一种数据处理的方法、存储节点及协调节点 |
WO2018010527A1 (zh) * | 2016-07-13 | 2018-01-18 | 腾讯科技(深圳)有限公司 | 数据处理方法、装置、系统及存储介质 |
US9875263B2 (en) | 2014-10-21 | 2018-01-23 | Microsoft Technology Licensing, Llc | Composite partition functions |
CN107735781A (zh) * | 2015-01-14 | 2018-02-23 | 华为技术有限公司 | 存储查询结果的方法和装置、计算设备 |
CN108205571A (zh) * | 2016-12-20 | 2018-06-26 | 航天信息股份有限公司 | 键值数据表的连接方法及装置 |
CN108482429A (zh) * | 2018-03-09 | 2018-09-04 | 南京南瑞继保电气有限公司 | 一种轨道交通综合监控系统架构 |
CN109299191A (zh) * | 2018-09-18 | 2019-02-01 | 新华三大数据技术有限公司 | 一种数据分布方法、装置、服务器及计算机存储介质 |
CN109388638A (zh) * | 2012-10-29 | 2019-02-26 | 华为技术有限公司 | 用于分布式大规模并行处理数据库的方法及系统 |
CN109871415A (zh) * | 2019-01-21 | 2019-06-11 | 武汉光谷信息技术股份有限公司 | 一种基于图数据库的用户画像构建方法、系统及存储介质 |
CN110019544A (zh) * | 2017-09-30 | 2019-07-16 | 北京国双科技有限公司 | 数据查询方法及系统 |
CN110109951A (zh) * | 2017-12-29 | 2019-08-09 | 华为软件技术有限公司 | 一种关联查询的方法、数据库应用系统及服务器 |
CN110168517A (zh) * | 2016-12-15 | 2019-08-23 | 华为技术有限公司 | 用于自适应分区数据以加快分布式并行数据库系统中连接查询的系统和方法 |
US10574752B2 (en) | 2014-01-26 | 2020-02-25 | Huawei Technologies Co., Ltd. | Distributed data storage method, apparatus, and system |
WO2020042813A1 (zh) * | 2018-08-31 | 2020-03-05 | 阿里巴巴集团控股有限公司 | 一种分布式数据连接处理方法、装置、设备及存储介质 |
CN111522641A (zh) * | 2020-04-21 | 2020-08-11 | 北京嘀嘀无限科技发展有限公司 | 任务调度方法、装置、计算机设备和存储介质 |
CN112256698A (zh) * | 2020-10-16 | 2021-01-22 | 美林数据技术股份有限公司 | 一种基于多哈希函数的表关系自动关联方法 |
CN112650738A (zh) * | 2020-12-31 | 2021-04-13 | 广西中科曙光云计算有限公司 | 一种开放数据库的构建方法 |
CN112800085A (zh) * | 2021-04-13 | 2021-05-14 | 成都四方伟业软件股份有限公司 | 一种基于布隆过滤器识别表间主外键字段的方法及装置 |
CN113468178A (zh) * | 2021-07-07 | 2021-10-01 | 武汉达梦数据库股份有限公司 | 一种关联表的数据分区装载方法与装置 |
CN114595294A (zh) * | 2022-03-11 | 2022-06-07 | 北京梦诚科技有限公司 | 一种数据仓库建模和抽取方法及系统 |
CN115617817A (zh) * | 2022-12-14 | 2023-01-17 | 深圳迅策科技有限公司 | 一种基于全链路的全域资产报表生成方法 |
Families Citing this family (67)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130297788A1 (en) * | 2011-03-30 | 2013-11-07 | Hitachi, Ltd. | Computer system and data management method |
US8812564B2 (en) * | 2011-12-20 | 2014-08-19 | Sap Ag | Parallel uniqueness checks for partitioned tables |
US8996464B2 (en) * | 2012-06-11 | 2015-03-31 | Microsoft Technology Licensing, Llc | Efficient partitioning techniques for massively distributed computation |
US9507825B2 (en) * | 2012-09-28 | 2016-11-29 | Oracle International Corporation | Techniques for partition pruning based on aggregated zone map information |
US9430550B2 (en) | 2012-09-28 | 2016-08-30 | Oracle International Corporation | Clustering a table in a relational database management system |
US9311380B2 (en) * | 2013-03-29 | 2016-04-12 | International Business Machines Corporation | Processing spatial joins using a mapreduce framework |
US9501526B2 (en) * | 2013-04-17 | 2016-11-22 | Excalibur Ip, Llc | Efficient database searching |
US9390162B2 (en) * | 2013-04-25 | 2016-07-12 | International Business Machines Corporation | Management of a database system |
US10452632B1 (en) * | 2013-06-29 | 2019-10-22 | Teradata Us, Inc. | Multi-input SQL-MR |
CN103440362A (zh) * | 2013-07-27 | 2013-12-11 | 国家电网公司 | 一种可扩展维度的输变电工程建设管理展示平台的建模方法 |
US9576039B2 (en) | 2014-02-19 | 2017-02-21 | Snowflake Computing Inc. | Resource provisioning systems and methods |
US10545917B2 (en) | 2014-02-19 | 2020-01-28 | Snowflake Inc. | Multi-range and runtime pruning |
US9454574B2 (en) | 2014-03-28 | 2016-09-27 | Sybase, Inc. | Bloom filter costing estimation |
US9491060B1 (en) * | 2014-06-30 | 2016-11-08 | EMC IP Holding Company LLC | Integrated wireless sensor network (WSN) and massively parallel processing database management system (MPP DBMS) |
US10289723B1 (en) * | 2014-08-21 | 2019-05-14 | Amazon Technologies, Inc. | Distributed union all queries |
US9922081B2 (en) | 2015-06-11 | 2018-03-20 | Microsoft Technology Licensing, Llc | Bidirectional cross-filtering in analysis service systems |
US10289707B2 (en) | 2015-08-10 | 2019-05-14 | International Business Machines Corporation | Data skipping and compression through partitioning of data |
CN106569731B (zh) * | 2015-10-10 | 2020-08-04 | 阿里巴巴集团控股有限公司 | 极限存储方法、装置及设备 |
US11100073B2 (en) * | 2015-11-12 | 2021-08-24 | Verizon Media Inc. | Method and system for data assignment in a distributed system |
US10108632B2 (en) | 2016-05-02 | 2018-10-23 | Google Llc | Splitting and moving ranges in a distributed system |
US10437780B2 (en) | 2016-07-14 | 2019-10-08 | Snowflake Inc. | Data pruning based on metadata |
US20180095996A1 (en) | 2016-10-03 | 2018-04-05 | Ocient Llc | Database system utilizing forced memory aligned access |
KR101961562B1 (ko) * | 2016-10-20 | 2019-03-22 | 영남대학교 산학협력단 | 조인 방법, 이를 실행시키는 컴퓨터 프로그램 및 기록매체 |
EP3555774B8 (en) | 2016-12-14 | 2024-03-27 | Ocient Inc. | Efficient database management system utilizing silo and manifest |
US10761745B1 (en) | 2016-12-14 | 2020-09-01 | Ocient Inc. | System and method for managing parity within a database management system |
US10747765B2 (en) | 2017-05-30 | 2020-08-18 | Ocient Inc. | System and method for optimizing large database management systems with multiple optimizers |
CN107329983B (zh) * | 2017-06-01 | 2020-12-01 | 昆仑智汇数据科技(北京)有限公司 | 一种机器数据分布式存储、读取方法及系统 |
US11182125B2 (en) | 2017-09-07 | 2021-11-23 | Ocient Inc. | Computing device sort function |
US10585915B2 (en) | 2017-10-25 | 2020-03-10 | International Business Machines Corporation | Database sharding |
US11354310B2 (en) | 2018-05-23 | 2022-06-07 | Oracle International Corporation | Dual purpose zone maps |
US11157496B2 (en) | 2018-06-01 | 2021-10-26 | International Business Machines Corporation | Predictive data distribution for parallel databases to optimize storage and query performance |
US11163764B2 (en) | 2018-06-01 | 2021-11-02 | International Business Machines Corporation | Predictive data distribution for parallel databases to optimize storage and query performance |
US11249916B2 (en) | 2018-10-15 | 2022-02-15 | Ocient Holdings LLC | Single producer single consumer buffering in database systems |
US11880368B2 (en) | 2018-10-15 | 2024-01-23 | Ocient Holdings LLC | Compressing data sets for storage in a database system |
US11886436B2 (en) | 2018-10-15 | 2024-01-30 | Ocient Inc. | Segmenting a partition of a data set based on a data storage coding scheme |
US11256696B2 (en) | 2018-10-15 | 2022-02-22 | Ocient Holdings LLC | Data set compression within a database system |
US11709835B2 (en) | 2018-10-15 | 2023-07-25 | Ocient Holdings LLC | Re-ordered processing of read requests |
WO2020121359A1 (ja) * | 2018-12-09 | 2020-06-18 | 浩平 海外 | データベース・クエリ効率化のためのシステム、方法、および、プログラム |
CN109901948B (zh) * | 2019-02-18 | 2022-04-12 | 国家计算机网络与信息安全管理中心 | 无共享数据库集群异地双活容灾系统 |
FR3096799B1 (fr) * | 2019-05-29 | 2021-11-05 | Amadeus | Agrégation et mise à jour d’objets de donnée hétérogènes |
US11093500B2 (en) | 2019-10-28 | 2021-08-17 | Ocient Holdings LLC | Enforcement of minimum query cost rules required for access to a database system |
US11106679B2 (en) | 2019-10-30 | 2021-08-31 | Ocient Holdings LLC | Enforcement of sets of query rules for access to data supplied by a plurality of data providers |
US11609911B2 (en) | 2019-12-19 | 2023-03-21 | Ocient Holdings LLC | Selecting a normalized form for conversion of a query expression |
US11308090B2 (en) | 2019-12-26 | 2022-04-19 | Snowflake Inc. | Pruning index to support semi-structured data types |
US11372860B2 (en) | 2019-12-26 | 2022-06-28 | Snowflake Inc. | Processing techniques for queries where predicate values are unknown until runtime |
US11567939B2 (en) | 2019-12-26 | 2023-01-31 | Snowflake Inc. | Lazy reassembling of semi-structured data |
US10769150B1 (en) | 2019-12-26 | 2020-09-08 | Snowflake Inc. | Pruning indexes to enhance database query processing |
US11853364B2 (en) | 2020-01-31 | 2023-12-26 | Ocient Holdings LLC | Level-based queries in a database system and methods for use therewith |
US11061910B1 (en) | 2020-01-31 | 2021-07-13 | Ocient Holdings LLC | Servicing concurrent queries via virtual segment recovery |
US11238041B2 (en) | 2020-03-25 | 2022-02-01 | Ocient Holdings LLC | Facilitating query executions via dynamic data block routing |
US11599463B2 (en) | 2020-03-25 | 2023-03-07 | Ocient Holdings LLC | Servicing queries during data ingress |
US11580102B2 (en) | 2020-04-02 | 2023-02-14 | Ocient Holdings LLC | Implementing linear algebra functions via decentralized execution of query operator flows |
US11294916B2 (en) | 2020-05-20 | 2022-04-05 | Ocient Holdings LLC | Facilitating query executions via multiple modes of resultant correctness |
US11775529B2 (en) | 2020-07-06 | 2023-10-03 | Ocient Holdings LLC | Recursive functionality in relational database systems |
US11755589B2 (en) | 2020-08-05 | 2023-09-12 | Ocient Holdings LLC | Delaying segment generation in database systems |
US11880716B2 (en) | 2020-08-05 | 2024-01-23 | Ocient Holdings LLC | Parallelized segment generation via key-based subdivision in database systems |
US11321288B2 (en) | 2020-08-05 | 2022-05-03 | Ocient Holdings LLC | Record deduplication in database systems |
US11468099B2 (en) | 2020-10-12 | 2022-10-11 | Oracle International Corporation | Automatic creation and maintenance of zone maps |
US11822532B2 (en) | 2020-10-14 | 2023-11-21 | Ocient Holdings LLC | Per-segment secondary indexing in database systems |
US11507578B2 (en) | 2020-10-19 | 2022-11-22 | Ocient Holdings LLC | Delaying exceptions in query execution |
US11675757B2 (en) | 2020-10-29 | 2023-06-13 | Ocient Holdings LLC | Maintaining row durability data in database systems |
US11297123B1 (en) | 2020-12-11 | 2022-04-05 | Ocient Holdings LLC | Fault-tolerant data stream processing |
US11314743B1 (en) | 2020-12-29 | 2022-04-26 | Ocient Holdings LLC | Storing records via multiple field-based storage mechanisms |
US11645273B2 (en) | 2021-05-28 | 2023-05-09 | Ocient Holdings LLC | Query execution utilizing probabilistic indexing |
US11803544B2 (en) | 2021-10-06 | 2023-10-31 | Ocient Holdings LLC | Missing data-based indexing in database systems |
US11983172B2 (en) | 2021-12-07 | 2024-05-14 | Ocient Holdings LLC | Generation of a predictive model for selection of batch sizes in performing data format conversion |
US11880369B1 (en) | 2022-11-21 | 2024-01-23 | Snowflake Inc. | Pruning data based on state of top K operator |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101120340A (zh) * | 2004-02-21 | 2008-02-06 | 数据迅捷股份有限公司 | 超无共享并行数据库 |
US20080270363A1 (en) * | 2007-01-26 | 2008-10-30 | Herbert Dennis Hunt | Cluster processing of a core information matrix |
US20090006309A1 (en) * | 2007-01-26 | 2009-01-01 | Herbert Dennis Hunt | Cluster processing of an aggregated dataset |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7739224B1 (en) * | 1998-05-06 | 2010-06-15 | Infor Global Solutions (Michigan), Inc. | Method and system for creating a well-formed database using semantic definitions |
US8671091B2 (en) * | 2006-08-02 | 2014-03-11 | Hewlett-Packard Development Company, L.P. | Optimizing snowflake schema queries |
-
2010
- 2010-07-28 CN CN2010102396560A patent/CN101916261B/zh active Active
- 2010-10-01 WO PCT/CN2010/077565 patent/WO2012012968A1/zh active Application Filing
-
2011
- 2011-12-14 US US13/325,810 patent/US20120109888A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101120340A (zh) * | 2004-02-21 | 2008-02-06 | 数据迅捷股份有限公司 | 超无共享并行数据库 |
US20080270363A1 (en) * | 2007-01-26 | 2008-10-30 | Herbert Dennis Hunt | Cluster processing of a core information matrix |
US20090006309A1 (en) * | 2007-01-26 | 2009-01-01 | Herbert Dennis Hunt | Cluster processing of an aggregated dataset |
Cited By (87)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102043726B (zh) * | 2010-12-29 | 2012-08-15 | 北京播思软件技术有限公司 | 一种大规模时序数据的存储管理方法 |
CN102043726A (zh) * | 2010-12-29 | 2011-05-04 | 北京播思软件技术有限公司 | 一种大规模时序数据的存储管理方法 |
CN103384878A (zh) * | 2011-02-25 | 2013-11-06 | 数创株式会社 | 分布式数据库系统和分布式数据库的数据结构 |
CN103782293A (zh) * | 2011-08-26 | 2014-05-07 | 惠普发展公司,有限责任合伙企业 | 用于数据分区的多维集群 |
CN103186651A (zh) * | 2011-12-31 | 2013-07-03 | 中国移动通信集团公司 | 一种分布式关系数据库及其建立、查询方法和装置 |
CN103186651B (zh) * | 2011-12-31 | 2016-12-14 | 中国移动通信集团公司 | 一种分布式关系数据库及其建立、查询方法和装置 |
CN102662968A (zh) * | 2012-03-09 | 2012-09-12 | 浪潮通信信息系统有限公司 | 一种对于Oracle大数据量存储的优化方法 |
CN103309902A (zh) * | 2012-03-16 | 2013-09-18 | 多玩娱乐信息技术(北京)有限公司 | 一种社交网络中用户信息存储和查找的方法和装置 |
CN103488645A (zh) * | 2012-06-13 | 2014-01-01 | 镇江华扬信息科技有限公司 | 一种用于物联网数据更新的结构设计方法 |
WO2014015492A1 (zh) * | 2012-07-26 | 2014-01-30 | 华为技术有限公司 | 数据分布的方法、装置及系统 |
CN103748578A (zh) * | 2012-07-26 | 2014-04-23 | 华为技术有限公司 | 数据分布的方法、装置及系统 |
CN103748578B (zh) * | 2012-07-26 | 2017-10-10 | 华为技术有限公司 | 数据分布的方法、装置及系统 |
WO2014059927A1 (en) * | 2012-10-16 | 2014-04-24 | Huawei Technologies Co., Ltd. | System and Method for Flexible Distributed Massively Parallel Processing (MPP) |
US9239741B2 (en) | 2012-10-16 | 2016-01-19 | Futurewei Technologies, Inc. | System and method for flexible distributed massively parallel processing (MPP) |
CN104903887A (zh) * | 2012-10-16 | 2015-09-09 | 华为技术有限公司 | 灵活的分布式大规模并行处理(mpp)系统和方法 |
CN104903887B (zh) * | 2012-10-16 | 2019-05-10 | 华为技术有限公司 | 灵活的分布式大规模并行处理(mpp)系统和方法 |
CN104871153A (zh) * | 2012-10-29 | 2015-08-26 | 华为技术有限公司 | 用于灵活的分布式大规模并行处理(mpp)数据库的系统和方法 |
US9195701B2 (en) | 2012-10-29 | 2015-11-24 | Futurewei Technologies, Inc. | System and method for flexible distributed massively parallel processing (MPP) database |
CN109388638A (zh) * | 2012-10-29 | 2019-02-26 | 华为技术有限公司 | 用于分布式大规模并行处理数据库的方法及系统 |
CN109388638B (zh) * | 2012-10-29 | 2022-04-05 | 华为技术有限公司 | 用于分布式大规模并行处理数据库的方法及系统 |
CN104871153B8 (zh) * | 2012-10-29 | 2019-02-01 | 华为技术有限公司 | 用于分布式大规模并行处理数据库的方法和系统 |
WO2014067449A1 (en) * | 2012-10-29 | 2014-05-08 | Huawei Technologies Co., Ltd. | System and method for flexible distributed massively parallel processing (mpp) database |
CN104871153B (zh) * | 2012-10-29 | 2018-10-30 | 华为技术有限公司 | 用于分布式大规模并行处理数据库的方法和系统 |
CN103838787A (zh) * | 2012-11-27 | 2014-06-04 | 阿里巴巴集团控股有限公司 | 一种对分布式数据仓库进行更新的方法和设备 |
CN103838787B (zh) * | 2012-11-27 | 2018-07-10 | 阿里巴巴集团控股有限公司 | 一种对分布式数据仓库进行更新的方法和设备 |
US8799284B2 (en) | 2012-11-30 | 2014-08-05 | Futurewei Technologies, Inc. | Method for automated scaling of a massive parallel processing (MPP) database |
CN104077724A (zh) * | 2013-03-28 | 2014-10-01 | 北京东方道迩信息技术股份有限公司 | 一种面向物联网综合应用的基础空间信息架构方法 |
WO2014154016A1 (zh) * | 2013-03-29 | 2014-10-02 | 深圳市并行科技有限公司 | 并行数据库管理系统及设计方案 |
CN103412897B (zh) * | 2013-07-25 | 2017-03-01 | 中国科学院软件研究所 | 一种基于分布式结构的并行数据处理方法 |
CN103412897A (zh) * | 2013-07-25 | 2013-11-27 | 中国科学院软件研究所 | 一种基于分布式结构的并行数据处理方法 |
US11086833B2 (en) | 2013-08-16 | 2021-08-10 | Huawei Technologies Co., Ltd. | Data storage method and apparatus for distributed database |
CN104376025B (zh) * | 2013-08-16 | 2017-10-10 | 华为技术有限公司 | 分布式数据库的数据存储方法和装置 |
CN104376025A (zh) * | 2013-08-16 | 2015-02-25 | 华为技术有限公司 | 分布式数据库的数据存储方法和装置 |
WO2015021828A1 (zh) * | 2013-08-16 | 2015-02-19 | 华为技术有限公司 | 分布式数据库的数据存储方法和装置 |
CN105874453B (zh) * | 2013-12-30 | 2019-08-27 | 微软技术许可有限责任公司 | 为多承租者数据库提供一致的承租者体验 |
CN105874453A (zh) * | 2013-12-30 | 2016-08-17 | 微软技术许可有限责任公司 | 为多承租者数据库提供一致的承租者体验 |
US10574752B2 (en) | 2014-01-26 | 2020-02-25 | Huawei Technologies Co., Ltd. | Distributed data storage method, apparatus, and system |
CN105264521B (zh) * | 2014-02-18 | 2018-10-30 | 华为技术有限公司 | 一种数据表的导入方法、数据管理器以及服务器 |
WO2015123809A1 (zh) * | 2014-02-18 | 2015-08-27 | 华为技术有限公司 | 一种数据表的导入方法、数据管理器以及服务器 |
CN105517644B (zh) * | 2014-03-05 | 2020-04-21 | 华为技术有限公司 | 一种数据分区方法和设备 |
CN105517644A (zh) * | 2014-03-05 | 2016-04-20 | 华为技术有限公司 | 一种数据分区方法和设备 |
US10360199B2 (en) | 2014-10-21 | 2019-07-23 | Microsoft Technology Licensing, Llc | Partitioning and rebalancing data storage |
US9875263B2 (en) | 2014-10-21 | 2018-01-23 | Microsoft Technology Licensing, Llc | Composite partition functions |
CN104391948B (zh) * | 2014-12-01 | 2017-11-21 | 广东电网有限责任公司清远供电局 | 数据仓库的数据标准化构建方法及系统 |
CN104391948A (zh) * | 2014-12-01 | 2015-03-04 | 广东电网有限责任公司清远供电局 | 数据仓库的数据标准化构建方法及系统 |
CN107209768A (zh) * | 2014-12-31 | 2017-09-26 | 华为技术有限公司 | 用于数据集的可扩展排序的方法和设备 |
WO2016107497A1 (en) * | 2014-12-31 | 2016-07-07 | Huawei Technologies Co., Ltd. | Method and apparatus for scalable sorting of data set |
CN107735781B (zh) * | 2015-01-14 | 2020-03-10 | 华为技术有限公司 | 存储查询结果的方法和装置、计算设备 |
CN107735781A (zh) * | 2015-01-14 | 2018-02-23 | 华为技术有限公司 | 存储查询结果的方法和装置、计算设备 |
CN106156168B (zh) * | 2015-04-16 | 2019-10-22 | 华为技术有限公司 | 在跨分区数据库中查询数据的方法及跨分区查询装置 |
WO2016165525A1 (zh) * | 2015-04-16 | 2016-10-20 | 华为技术有限公司 | 在跨分区数据库中查询数据的方法及跨分区查询装置 |
CN106156168A (zh) * | 2015-04-16 | 2016-11-23 | 华为技术有限公司 | 在跨分区数据库中查询数据的方法及跨分区查询装置 |
CN104794249A (zh) * | 2015-05-15 | 2015-07-22 | 乐得科技有限公司 | 一种数据库的实现方法和设备 |
CN104794249B (zh) * | 2015-05-15 | 2018-08-28 | 网易乐得科技有限公司 | 一种数据库的实现方法和设备 |
US10831737B2 (en) | 2015-05-31 | 2020-11-10 | Huawei Technologies Co., Ltd. | Method and device for partitioning association table in distributed database |
CN106415534A (zh) * | 2015-05-31 | 2017-02-15 | 华为技术有限公司 | 一种分布式数据库中关联表分区的方法和设备 |
WO2016191995A1 (zh) * | 2015-05-31 | 2016-12-08 | 华为技术有限公司 | 一种分布式数据库中关联表分区的方法和设备 |
CN106415534B (zh) * | 2015-05-31 | 2019-09-20 | 华为技术有限公司 | 一种分布式数据库中关联表分区的方法和设备 |
CN105740365A (zh) * | 2016-01-27 | 2016-07-06 | 北京掌阔移动传媒科技有限公司 | 一种数据仓库快速查询方法和装置 |
CN107229635A (zh) * | 2016-03-24 | 2017-10-03 | 华为技术有限公司 | 一种数据处理的方法、存储节点及协调节点 |
CN107229635B (zh) * | 2016-03-24 | 2020-06-02 | 华为技术有限公司 | 一种数据处理的方法、存储节点及协调节点 |
WO2018010527A1 (zh) * | 2016-07-13 | 2018-01-18 | 腾讯科技(深圳)有限公司 | 数据处理方法、装置、系统及存储介质 |
US10915550B2 (en) | 2016-07-13 | 2021-02-09 | Tencent Technology (Shenzhen) Company Limited | Data processing method, apparatus, system, and storage medium |
CN110168517A (zh) * | 2016-12-15 | 2019-08-23 | 华为技术有限公司 | 用于自适应分区数据以加快分布式并行数据库系统中连接查询的系统和方法 |
CN108205571A (zh) * | 2016-12-20 | 2018-06-26 | 航天信息股份有限公司 | 键值数据表的连接方法及装置 |
CN107066495B (zh) * | 2016-12-29 | 2020-04-21 | 北京瑞卓喜投科技发展有限公司 | 沿纵向拓展的区块链的生成方法及系统 |
CN107066495A (zh) * | 2016-12-29 | 2017-08-18 | 北京瑞卓喜投科技发展有限公司 | 沿纵向拓展的区块链的生成方法及系统 |
CN110019544A (zh) * | 2017-09-30 | 2019-07-16 | 北京国双科技有限公司 | 数据查询方法及系统 |
CN110109951A (zh) * | 2017-12-29 | 2019-08-09 | 华为软件技术有限公司 | 一种关联查询的方法、数据库应用系统及服务器 |
CN110109951B (zh) * | 2017-12-29 | 2022-12-06 | 华为技术有限公司 | 一种关联查询的方法、数据库应用系统及服务器 |
CN108482429A (zh) * | 2018-03-09 | 2018-09-04 | 南京南瑞继保电气有限公司 | 一种轨道交通综合监控系统架构 |
WO2020042813A1 (zh) * | 2018-08-31 | 2020-03-05 | 阿里巴巴集团控股有限公司 | 一种分布式数据连接处理方法、装置、设备及存储介质 |
US11188535B2 (en) | 2018-08-31 | 2021-11-30 | Beijing Oceanbase Technology Co., Ltd. | Distributed join operation processing method, apparatus, device, and storage medium |
TWI716016B (zh) * | 2018-08-31 | 2021-01-11 | 開曼群島商創新先進技術有限公司 | 分散式資料連接處理方法、裝置、設備及儲存媒體 |
CN109299191A (zh) * | 2018-09-18 | 2019-02-01 | 新华三大数据技术有限公司 | 一种数据分布方法、装置、服务器及计算机存储介质 |
CN109871415A (zh) * | 2019-01-21 | 2019-06-11 | 武汉光谷信息技术股份有限公司 | 一种基于图数据库的用户画像构建方法、系统及存储介质 |
CN111522641A (zh) * | 2020-04-21 | 2020-08-11 | 北京嘀嘀无限科技发展有限公司 | 任务调度方法、装置、计算机设备和存储介质 |
CN112256698B (zh) * | 2020-10-16 | 2023-09-05 | 美林数据技术股份有限公司 | 一种基于多哈希函数的表关系自动关联方法 |
CN112256698A (zh) * | 2020-10-16 | 2021-01-22 | 美林数据技术股份有限公司 | 一种基于多哈希函数的表关系自动关联方法 |
CN112650738B (zh) * | 2020-12-31 | 2021-09-21 | 广西中科曙光云计算有限公司 | 一种开放数据库的构建方法 |
CN112650738A (zh) * | 2020-12-31 | 2021-04-13 | 广西中科曙光云计算有限公司 | 一种开放数据库的构建方法 |
CN112800085B (zh) * | 2021-04-13 | 2021-09-14 | 成都四方伟业软件股份有限公司 | 一种基于布隆过滤器识别表间主外键字段的方法及装置 |
CN112800085A (zh) * | 2021-04-13 | 2021-05-14 | 成都四方伟业软件股份有限公司 | 一种基于布隆过滤器识别表间主外键字段的方法及装置 |
CN113468178A (zh) * | 2021-07-07 | 2021-10-01 | 武汉达梦数据库股份有限公司 | 一种关联表的数据分区装载方法与装置 |
CN113468178B (zh) * | 2021-07-07 | 2022-07-29 | 武汉达梦数据库股份有限公司 | 一种关联表的数据分区装载方法与装置 |
CN114595294A (zh) * | 2022-03-11 | 2022-06-07 | 北京梦诚科技有限公司 | 一种数据仓库建模和抽取方法及系统 |
CN115617817A (zh) * | 2022-12-14 | 2023-01-17 | 深圳迅策科技有限公司 | 一种基于全链路的全域资产报表生成方法 |
Also Published As
Publication number | Publication date |
---|---|
US20120109888A1 (en) | 2012-05-03 |
CN101916261B (zh) | 2013-07-17 |
WO2012012968A1 (zh) | 2012-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101916261B (zh) | 一种分布式并行数据库系统的数据分区方法 | |
US11461356B2 (en) | Large scale unstructured database systems | |
US11537635B2 (en) | Hadoop OLAP engine | |
US20210240735A1 (en) | System and method for supporting large queries in a multidimensional database environment | |
US20230084389A1 (en) | System and method for providing bottom-up aggregation in a multidimensional database environment | |
US9805079B2 (en) | Executing constant time relational queries against structured and semi-structured data | |
US11042569B2 (en) | System and method for load, aggregate and batch calculation in one scan in a multidimensional database environment | |
CN103299267B (zh) | 用于执行多租户存储中的交叉存储连接的方法和系统 | |
US8782075B2 (en) | Query handling in databases with replicated data | |
CN108369587B (zh) | 创建用于交换的表 | |
US20130110873A1 (en) | Method and system for data storage and management | |
CN103678520A (zh) | 一种基于云计算的多维区间查询方法及其系统 | |
US11200223B2 (en) | System and method for dependency analysis in a multidimensional database environment | |
US9898501B2 (en) | Method and system for performing transactional updates in a key-value store | |
US20160048572A1 (en) | Building a Distributed Dwarf Cube using Mapreduce Technique | |
CN102890678A (zh) | 一种基于格雷编码的分布式数据布局方法及查询方法 | |
WO2015041731A1 (en) | Interest-driven business intelligence systems including segment data | |
US11036709B2 (en) | Single-level, multi-dimension, hash-based table partitioning | |
CN102495834A (zh) | 基于内存映像的增量数据清洗方法 | |
CN104731969A (zh) | 分布式环境下海量数据连接聚集查询方法、装置和系统 | |
CN113934713A (zh) | 一种订单数据索引方法、系统、计算机设备以及存储介质 | |
US10019472B2 (en) | System and method for querying a distributed dwarf cube | |
CN110569310A (zh) | 一种云计算环境下的关系大数据的管理方法 | |
CN117216333A (zh) | 基于图数据优化的深层多跳查询方法、装置、设备及介质 | |
CN114254166A (zh) | 联邦式图数据库架构 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
ASS | Succession or assignment of patent right |
Owner name: BEIJING BORQS SOFTWARE TECHNOLOGY CO., LTD. WUHAN Effective date: 20131114 Owner name: BORQS COMMUNICATION TECHNOLOGY (BEIJING) CO., LTD. Free format text: FORMER OWNER: BEIJING BORQS SOFTWARE TECHNOLOGY CO., LTD. Effective date: 20131114 |
|
C41 | Transfer of patent application or patent right or utility model | ||
COR | Change of bibliographic data |
Free format text: CORRECT: ADDRESS; FROM: 100102 CHAOYANG, BEIJING TO: 100015 CHAOYANG, BEIJING |
|
TR01 | Transfer of patent right |
Effective date of registration: 20131114 Address after: 100015, B23 building, A, Hengtong business garden, No. 10 Jiuxianqiao Road, Beijing, Chaoyang District Patentee after: Borqs Beijing Ltd. Patentee after: Beijing Borqs Software Technology Co., Ltd. Patentee after: Wuhan Borqs Technology Co., Ltd. Address before: 100102 D building, building 9, South Central Road, Chaoyang District, Wangjing, Beijing, Wangjing Patentee before: Beijing Borqs Software Technology Co., Ltd. |