JP2012123790A - 仮想パーティションを用いたデータベース再分配 - Google Patents
仮想パーティションを用いたデータベース再分配 Download PDFInfo
- Publication number
- JP2012123790A JP2012123790A JP2011245173A JP2011245173A JP2012123790A JP 2012123790 A JP2012123790 A JP 2012123790A JP 2011245173 A JP2011245173 A JP 2011245173A JP 2011245173 A JP2011245173 A JP 2011245173A JP 2012123790 A JP2012123790 A JP 2012123790A
- Authority
- JP
- Japan
- Prior art keywords
- partition
- data
- database
- virtual
- data storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【解決手段】 いくつかの実施形態において、区分データベースは、少なくとも論理的又は物理的な第1データ・ストレージ・ノード上の複数の論理又は物理パーティション内に格納され、複数の論理パーティションの中の第1のパーティションのサブセットは、仮想パーティションとして構成される。区分データベースを格納するように第2の物理データ・ストレージ・ノードの割り付けを指示する入力を受け取る。第2のパーティションが、第2のデータ・ストレージ・ノード上で構成される。入力に応答して、区分データベースは、第1のパーティション上の仮想パーティション内のデータを第2のパーティションに移動させることにより、第1及び第2のデータ・ストレージ・ノードにわたって再分配される。
【選択図】 図9
Description
さらに、データベース・マネージャ340は、パーティション・マップ354を上記の表IIにまとめられた状態から下記の表IVに示される状態に更新する。
202:データベース・パーティション
300:データ処理環境
400、800:データ・ストレージ・ノード
352:パーティション構成データ構造体
354:パーティション・マップ
500:構成エントリ
Claims (15)
- 区分データベースを、データ処理システムの少なくとも第1のデータ・ストレージ・ノード上の複数のパーティション内に格納するステップと、
前記複数のパーティションの中の第1のパーティションのサブセットを、仮想パーティションとして構成するステップと、
前記区分データベースを格納するように第2のデータ・ストレージ・ノードの割り付けを指示する入力を受け取るステップと、
前記第2のデータ・ストレージ・ノード上で、前記区分データベースの第2のパーティションを構成するステップと、
前記入力に応答して、前記第1のパーティション上の前記仮想パーティション内のデータを前記第2のパーティションに移動させることによって、前記区分データベースを前記第1及び第2のデータ・ストレージ・ノードにわたって再分配するステップと
を含む、データ処理方法。 - 前記仮想パーティションが、前記第1のパーティションの1つ又は複数のデータ・ブロックを含む、請求項1に記載の方法。
- 前記仮想パーティションが、前記第1のパーティション内のデータのみを含む、請求項2に記載の方法。
- 前記方法が、前記仮想パーティションと前記第1のパーティションとを関連付けるパーティション構成データ構造体を確立するステップを含み、
前記再分配するステップが、前記第2のパーティションに移動された前記データが仮想パーティション内に存在しないことを示すように、前記パーティション構成データ構造体を更新するステップを含む、
請求項1に記載の方法。 - 前記方法が、前記区分データベース内のデータを、複数のパーティション及び前記仮想パーティションのうちの特定の1つにマッピングする、パーティション・マップを確立するステップを含み、
前記再分配するステップが、前記第2のパーティションに移動されたデータが仮想パーティションにマッピングされないことを示すように、前記パーティション・マップを更新するステップを含む、
請求項1に記載の方法。 - 前記再分配するステップが、
前記仮想パーティション内のデータのバックアップを作成するステップと、
前記データを前記バックアップから前記第2のパーティションに復元するステップと
を含む、請求項1に記載の方法。 - 前記仮想パーティション内の前記データが、第1のデータであり、
前記再分配の前に、前記第1のパーティションが、前記第1のデータと、前記仮想パーティション内に存在しない第2のデータとを格納し、
前記バックアップを作成するステップが、前記第1のデータを含み、かつ前記第2のデータを除外するバックアップを作成するステップを含む、
請求項6に記載の方法。 - 請求項1〜7の何れか1項に記載の方法の各ステップをコンピュータに実行させる、コンピュータ・プログラム。
- データ処理システムであって、
プロセッサと、
前記プロセッサに結合されたデータ・ストレージと、
前記データ・ストレージ内に格納されたプログラム・コードであって、前記プロセッサによって実行されたときに、前記データ処理システムに、
区分データベースを、前記データ・ストレージの少なくとも第1のデータ・ストレージ・ノード上の複数のパーティション内に格納することと、
前記複数のパーティションの中の第1のパーティションのサブセットを、仮想パーティションとして構成することと、
前記区分データベースを格納するように前記データ・ストレージの第2のデータ・ストレージ・ノードの割り付けを指示する入力を受け取ることと、
前記第2のデータ・ストレージ・ノード上で、前記区分データベースの第2のパーティションを構成することと、
前記入力に応答して、前記第1のパーティション上の前記仮想パーティション内のデータを前記第2のパーティションに移動させることによって、前記区分データベースを前記第1及び第2のデータ・ストレージ・ノードにわたって再分配することと
を行わせる、プログラム・コードと
を含む、データ処理システム。 - 前記仮想パーティションが、前記第1のパーティションの1つ又は複数のデータ・ブロックを含む、請求項9に記載のデータ処理システム。
- 前記仮想パーティションが、前記第1のパーティション内のデータのみを含む、請求項10に記載のデータ処理システム。
- 前記プログラムがさらに、前記コンピュータに、前記仮想パーティションと前記パーティションとを関連付けるパーティション構成データ構造体を確立することを行わせ、
前記再分配することが、前記第2のパーティションに移動された前記データが仮想パーティション内に存在しないことを示すように、前記パーティション構成データ構造体を更新することを含む、
請求項9に記載のデータ処理システム。 - 前記プログラムがさらに、前記コンピュータに、前記区分データベース内のデータを、複数のパーティション及び前記仮想パーティションのうちの特定の1つにマッピングする、パーティション・マップを確立することを行わせ、
前記再分配することが、前記第2のパーティションに移動されたデータが仮想パーティションにマッピングされないことを示すように、前記パーティション・マップを更新することを含む、
請求項9に記載のデータ処理システム。 - 前記再分配することが、
前記仮想パーティション内のデータのバックアップを作成することと、
前記データを前記バックアップから前記第2のパーティションに復元することと
を含む、
請求項9に記載のデータ処理システム。 - 前記仮想パーティション内の前記データが、第1のデータであり、
前記再分配の前に、前記第1のパーティションが、前記第1のデータと、前記仮想パーティション内に存在しない第2のデータとを格納し、
前記バックアップを作成することが、前記第1のデータを含み、かつ前記第2のデータを除外するバックアップを作成することを含む、
請求項14に記載のデータ処理システム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US12/961,544 US9684702B2 (en) | 2010-12-07 | 2010-12-07 | Database redistribution utilizing virtual partitions |
US12/961544 | 2010-12-07 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012123790A true JP2012123790A (ja) | 2012-06-28 |
JP5792594B2 JP5792594B2 (ja) | 2015-10-14 |
Family
ID=46163197
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011245173A Expired - Fee Related JP5792594B2 (ja) | 2010-12-07 | 2011-11-09 | 仮想パーティションを用いたデータベース再分配 |
Country Status (3)
Country | Link |
---|---|
US (2) | US9684702B2 (ja) |
JP (1) | JP5792594B2 (ja) |
CN (1) | CN102541990B (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150091161A (ko) * | 2012-12-27 | 2015-08-07 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 파티션 확장 방법 및 장치 |
JP2017507378A (ja) * | 2013-12-13 | 2017-03-16 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | オンライン・シェアード・ナッシング・データベースを拡張するためのインクリメンタルで、かつ、連結された再分散 |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9645943B2 (en) * | 2011-02-22 | 2017-05-09 | Infinidat Ltd. | Storage arrangement and method using a plurality of storage spaces which have separate control layers and separate mapping structures |
US9189503B2 (en) * | 2012-12-06 | 2015-11-17 | Microsoft Technology Licensing, Llc | Database scale-out |
CN102968503B (zh) * | 2012-12-10 | 2015-10-07 | 曙光信息产业(北京)有限公司 | 数据库系统的数据处理方法以及数据库系统 |
CN103049355B (zh) * | 2012-12-25 | 2015-06-17 | 华为技术有限公司 | 一种数据库系统恢复方法及设备 |
US9053167B1 (en) | 2013-06-19 | 2015-06-09 | Amazon Technologies, Inc. | Storage device selection for database partition replicas |
CN103473321A (zh) * | 2013-09-12 | 2013-12-25 | 华为技术有限公司 | 数据库管理方法与系统 |
US10860562B1 (en) | 2014-09-12 | 2020-12-08 | Amazon Technologies, Inc. | Dynamic predicate indexing for data stores |
US9785516B2 (en) * | 2014-11-25 | 2017-10-10 | Sap Se | Method and system to remove a service from a distributed database system |
US11829349B2 (en) * | 2015-05-11 | 2023-11-28 | Oracle International Corporation | Direct-connect functionality in a distributed database grid |
US9888127B2 (en) | 2015-07-30 | 2018-02-06 | At&T Intellectual Property I, L.P. | Methods, systems, and computer readable storage devices for adjusting the use of virtual resources providing communication services based on load |
US10277736B2 (en) | 2015-07-30 | 2019-04-30 | At&T Intellectual Property I, L.P. | Methods, systems, and computer readable storage devices for determining whether to handle a request for communication services by a physical telephone number mapping service or a virtual telephone number mapping service |
US9866521B2 (en) | 2015-07-30 | 2018-01-09 | At&T Intellectual Property L.L.P. | Methods, systems, and computer readable storage devices for determining whether to forward requests from a physical telephone number mapping service server to a virtual telephone number mapping service server |
US9851999B2 (en) | 2015-07-30 | 2017-12-26 | At&T Intellectual Property I, L.P. | Methods, systems, and computer readable storage devices for handling virtualization of a physical telephone number mapping service |
US10095738B1 (en) | 2015-12-22 | 2018-10-09 | Amazon Technologies, Inc. | Dynamic assignment of logical partitions according to query predicate evaluations |
CN107220259A (zh) * | 2016-03-22 | 2017-09-29 | 北京京东尚科信息技术有限公司 | 一种数据库扩展系统、设备和用于扩展数据库的方法 |
US11138178B2 (en) * | 2016-11-10 | 2021-10-05 | Futurewei Technologies, Inc. | Separation of computation from storage in database for better elasticity |
CN107315663B (zh) * | 2017-03-10 | 2020-06-09 | 秦皇岛市第一医院 | 双机群集架构 |
US10503714B2 (en) | 2017-06-02 | 2019-12-10 | Facebook, Inc. | Data placement and sharding |
CN107315544A (zh) * | 2017-06-29 | 2017-11-03 | 郑州云海信息技术有限公司 | 一种固态盘逻辑分区管理方法和装置 |
CN111104057B (zh) * | 2018-10-25 | 2022-03-29 | 华为技术有限公司 | 存储系统中的节点扩容方法和存储系统 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001142752A (ja) * | 1999-11-15 | 2001-05-25 | Hitachi Ltd | データベース管理方法 |
US6330653B1 (en) * | 1998-05-01 | 2001-12-11 | Powerquest Corporation | Manipulation of virtual and live computer storage device partitions |
US6397308B1 (en) * | 1998-12-31 | 2002-05-28 | Emc Corporation | Apparatus and method for differential backup and restoration of data in a computer storage system |
US6574705B1 (en) * | 2000-11-16 | 2003-06-03 | International Business Machines Corporation | Data processing system and method including a logical volume manager for storing logical volume data |
JP2004178253A (ja) * | 2002-11-27 | 2004-06-24 | Hitachi Ltd | 記憶デバイス制御装置および記憶デバイス制御装置の制御方法 |
JP2005056077A (ja) * | 2003-08-01 | 2005-03-03 | Hitachi Ltd | データベース制御方法 |
JP2005196602A (ja) * | 2004-01-09 | 2005-07-21 | Hitachi Ltd | 無共有型データベース管理システムにおけるシステム構成変更方法 |
JP2010079624A (ja) * | 2008-09-26 | 2010-04-08 | Hitachi Ltd | 計算機システム及びストレージシステム |
US20110208784A1 (en) * | 2006-05-18 | 2011-08-25 | Butcher David L | Database Partitioning by Virtual Partitions |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4853843A (en) * | 1987-12-18 | 1989-08-01 | Tektronix, Inc. | System for merging virtual partitions of a distributed database |
GB9811574D0 (en) | 1998-05-30 | 1998-07-29 | Ibm | Indexed file system and a method and a mechanism for accessing data records from such a system |
US6745207B2 (en) * | 2000-06-02 | 2004-06-01 | Hewlett-Packard Development Company, L.P. | System and method for managing virtual storage |
CN101128827A (zh) | 2005-02-24 | 2008-02-20 | 塞朗德系统有限公司 | 用于交换网络中分布式数据管理的方法和装置 |
EP2317450A1 (en) | 2005-02-24 | 2011-05-04 | Xeround Inc. | Method and apparatus for distributed data management in a switching network |
DK177245B1 (da) | 2008-06-27 | 2012-08-06 | Guldmann V As | Håndbetjening til hejsesystem |
US8078825B2 (en) * | 2009-03-11 | 2011-12-13 | Oracle America, Inc. | Composite hash and list partitioning of database tables |
US8386529B2 (en) | 2010-02-21 | 2013-02-26 | Microsoft Corporation | Foreign-key detection |
-
2010
- 2010-12-07 US US12/961,544 patent/US9684702B2/en not_active Expired - Fee Related
-
2011
- 2011-11-09 JP JP2011245173A patent/JP5792594B2/ja not_active Expired - Fee Related
- 2011-11-15 CN CN201110360026.3A patent/CN102541990B/zh not_active Expired - Fee Related
-
2012
- 2012-08-27 US US13/595,566 patent/US20120323852A1/en not_active Abandoned
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6330653B1 (en) * | 1998-05-01 | 2001-12-11 | Powerquest Corporation | Manipulation of virtual and live computer storage device partitions |
US6397308B1 (en) * | 1998-12-31 | 2002-05-28 | Emc Corporation | Apparatus and method for differential backup and restoration of data in a computer storage system |
JP2001142752A (ja) * | 1999-11-15 | 2001-05-25 | Hitachi Ltd | データベース管理方法 |
US6574705B1 (en) * | 2000-11-16 | 2003-06-03 | International Business Machines Corporation | Data processing system and method including a logical volume manager for storing logical volume data |
JP2004178253A (ja) * | 2002-11-27 | 2004-06-24 | Hitachi Ltd | 記憶デバイス制御装置および記憶デバイス制御装置の制御方法 |
JP2005056077A (ja) * | 2003-08-01 | 2005-03-03 | Hitachi Ltd | データベース制御方法 |
JP2005196602A (ja) * | 2004-01-09 | 2005-07-21 | Hitachi Ltd | 無共有型データベース管理システムにおけるシステム構成変更方法 |
US20110208784A1 (en) * | 2006-05-18 | 2011-08-25 | Butcher David L | Database Partitioning by Virtual Partitions |
JP2010079624A (ja) * | 2008-09-26 | 2010-04-08 | Hitachi Ltd | 計算機システム及びストレージシステム |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150091161A (ko) * | 2012-12-27 | 2015-08-07 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 파티션 확장 방법 및 장치 |
JP2016507813A (ja) * | 2012-12-27 | 2016-03-10 | ▲ホア▼▲ウェイ▼技術有限公司Huawei Technologies Co.,Ltd. | パーティション拡張方法および装置 |
KR101677946B1 (ko) * | 2012-12-27 | 2016-11-21 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 파티션 확장 방법 및 장치 |
US9665284B2 (en) | 2012-12-27 | 2017-05-30 | Huawei Technologies Co., Ltd. | Partition extension method and apparatus |
JP2017507378A (ja) * | 2013-12-13 | 2017-03-16 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | オンライン・シェアード・ナッシング・データベースを拡張するためのインクリメンタルで、かつ、連結された再分散 |
US10387422B2 (en) | 2013-12-13 | 2019-08-20 | International Business Machines Corporation | Incremental and collocated redistribution for expansion of online shared nothing database |
US11341139B2 (en) | 2013-12-13 | 2022-05-24 | International Business Machines Corporation | Incremental and collocated redistribution for expansion of online shared nothing database |
Also Published As
Publication number | Publication date |
---|---|
US20120323852A1 (en) | 2012-12-20 |
JP5792594B2 (ja) | 2015-10-14 |
US9684702B2 (en) | 2017-06-20 |
CN102541990A (zh) | 2012-07-04 |
CN102541990B (zh) | 2015-05-20 |
US20120143823A1 (en) | 2012-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5792594B2 (ja) | 仮想パーティションを用いたデータベース再分配 | |
US11288267B2 (en) | Pluggable storage system for distributed file systems | |
US11573978B2 (en) | Cloning catalog objects | |
US10901796B2 (en) | Hash-based partitioning system | |
JP7053682B2 (ja) | データベーステナントマイグレーションのシステム及び方法 | |
US9251183B2 (en) | Managing tenant-specific data sets in a multi-tenant environment | |
US8200705B2 (en) | Method and apparatus for applying database partitioning in a multi-tenancy scenario | |
US10671606B2 (en) | Materialized query tables with shared data | |
US10650013B2 (en) | Access operation request management | |
US11151081B1 (en) | Data tiering service with cold tier indexing | |
US10489356B1 (en) | Truncate and append database operation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140529 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150203 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150721 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150806 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5792594 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |