JPWO2015111152A1 - データベース管理システム及び方法 - Google Patents
データベース管理システム及び方法 Download PDFInfo
- Publication number
- JPWO2015111152A1 JPWO2015111152A1 JP2015558634A JP2015558634A JPWO2015111152A1 JP WO2015111152 A1 JPWO2015111152 A1 JP WO2015111152A1 JP 2015558634 A JP2015558634 A JP 2015558634A JP 2015558634 A JP2015558634 A JP 2015558634A JP WO2015111152 A1 JPWO2015111152 A1 JP WO2015111152A1
- Authority
- JP
- Japan
- Prior art keywords
- log
- database
- transaction
- order
- checkpoint
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 20
- 238000011084 recovery Methods 0.000 claims description 27
- 238000007726 management method Methods 0.000 claims 21
- 230000003247 decreasing effect Effects 0.000 claims 1
- 238000005192 partition Methods 0.000 description 108
- 230000008569 process Effects 0.000 description 13
- 230000000052 comparative effect Effects 0.000 description 8
- 230000007246 mechanism Effects 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 238000002955 isolation Methods 0.000 description 2
- 241001522296 Erithacus rubecula Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2365—Ensuring data consistency and integrity
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2358—Change logging, detection, and notification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Debugging And Monitoring (AREA)
Abstract
Description
Claims (15)
- データベースを管理するデータベース管理システムであって、
前記データベースへのクエリをクエリ発行元から受け付けるクエリ受付部と、
前記受け付けたクエリに関する情報を基に、複数のトランザクションを実行し、トランザクション毎に、トランザクションのログを生成し、前記生成したログをログ格納領域に書き込むためのログ書込み要求を発行するクエリ実行部と
を有し、
前記クエリ実行部は、トランザクション実行順序によって結果が異なるトランザクションの集合である第1種トランザクション集合に属するトランザクション毎に、トランザクションのログに、ログの順番を記録する、
データベース管理システム。 - 分割された前記データベースである複数のデータベース部分、の各々について、ログの順番を管理する順番管理部を有し、
各順番管理部により管理される順番は、その順番管理部に対応したデータベース部分を更新したトランザクションのログの生成の都度に更新され、
前記複数のデータベース部分のうちN個のデータベース部分を更新したトランザクションのログとして(Nは2以上の整数)、M個のログが生成され(MはN以下であり1以上の整数)、
前記M個のログのうちの少なくとも1つが、前記N個のデータベース部分にそれぞれ対応したN個の順番のうちの2以上の順番を含む、
請求項1記載のデータベース管理システム。 - 前記N個のデータベース部分にそれぞれ対応したN個のログ格納領域があり、
1つの順番を含んだログは、その順番に対応したログ格納領域に書き込まれ、
前記2以上の順番を含んだログは、前記2以上の順番にそれぞれ対応した2以上のログ格納領域のうちのいずれかに書き込まれる、
請求項2記載のデータベース管理システム。 - M=1である、
請求項2記載のデータベース管理システム。 - 前記複数のデータベース部分にそれぞれ対応した複数のI/O(Input/Output)リソースがあり、
1つの順番を含んだログは、その順番に対応したI/Oリソースを通じて、そのI/Oリソースに対応したログ格納領域に書き込まれ、
前記2以上の順番を含んだログは、前記2以上の順番にそれぞれ対応した2以上のI/Oリソースのいずれかを通じて、そのI/Oリソースに対応したログ格納領域に書き込まれる、
請求項2記載のデータベース管理システム。 - 前記クエリ実行部は、トランザクション実行順序が結果に影響を与えないトランザクションの集合である第2種トランザクション集合に属するトランザクションのログには、順番を記録しない、
請求項1記載のデータベース管理システム。 - 前記クエリ実行部は、前記クエリに関する情報を基に、実行対象のトランザクションが、前記第1トランザクション集合と前記第2種トランザクション集合とのどちらに属するかを判断する、
請求項6記載のデータベース管理システム。 - 前記受け付けたクエリに基づいて前記受け付けたクエリを実行するために必要な1以上のデータベースオペレーションと前記1以上のデータベースオペレーションの実行手順とを表す情報を含んだクエリ実行プランを生成するクエリ実行プラン生成部を更に有し、
前記クエリに関する情報は、前記クエリ実行プランを表す情報である、
請求項7記載のデータベース管理システム。 - 前記クエリ実行部は、チェックポイント毎に、全ての順番管理部にそれぞれ対応した全ての順番を含んだ1以上のチェックポイントログを生成する、
請求項1記載のデータベース管理システム。 - チェックポイント毎に、チェックポイントログの数は、データベース部分の数よりも少ない、
請求項9記載のデータベース管理システム。 - 指定された第1のチェックポイントの時点におけるデータベースをリカバリーするリカバリー実行部を更に有し、
前記クエリ実行部は、複数のチェックポイントのうちの少なくとも1つのチェックポイントにおいてデータベースをバックアップし、
前記リカバリー実行部は、
バックアップされたデータベースのうち、前記第1のチェックポイントと同じ、又は、前記第1のチェックポイントよりも過去のチェックポイントである第2のチェックポイントに対応したデータベースをロードし、
前記第2のチェックポイントに対応したチェックポイントログ中の各順番を、その順番に対応する順番管理部に設定する、
請求項9記載のデータベース管理システム。 - 前記リカバリー実行部は、前記第2のチェックポイントと前記第1のチェックポイントが異なっていれば、ロードされたデータベースのデータベース部分毎に、データベース部分に対応したログ格納領域に格納されている、前記第2のチェックポイントから前記第1のチェックポイントまでの1以上のログを、ログ中の順番の小さい順に用いて、データベース部分をリカバリーし、
前記リカバリー実行部は、データベース部分毎のリカバリーにおいて、そのデータベース部分に対応した順番である該当順番と該当順番以外の1以上の順番である1以上の非該当順番とを含んだログについては、そのログに従う更新を、そのデータベース部分と、前記1以上の非該当順番にそれぞれ対応する1以上のデータベース部分とに対して実行し、
前記リカバリー実行部は、データベース部分毎のリカバリーにおいて、そのデータベース部分に対応したログ中の順番が、直前回に用いたログ中の順番の次の番号でなければ、前記次の番号を含んだログを待つ、
請求項11記載のデータベース管理システム。 - 前記データベースは、メインメモリ上に存在する、
請求項2記載のデータベース管理システム。 - データベースを管理する計算機システムであって、
ログ格納領域に接続されたインターフェイスデバイスと、
前記インターフェイスデバイスに接続されたプロセッサと
を有し、
前記プロセッサは、複数のトランザクションを実行し、複数のトランザクションの実行において、トランザクション毎に、トランザクションのログを生成し、生成したログをログ格納領域に格納し、
前記プロセッサは、少なくとも、トランザクション実行順序によって結果が異なるトランザクションの集合に属するトランザクションのログには、ログの順番を記録する、
計算機システム。 - データベースを管理するデータベース管理方法であって、
複数のトランザクションの実行において、トランザクション毎に、トランザクションのログを生成し、
生成したログをログ格納領域に格納し、
少なくとも、トランザクション実行順序によって結果が異なるトランザクションの集合に属するトランザクションについて生成されたログには、ログの順番が記録される、
データベース管理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2014/051263 WO2015111152A1 (ja) | 2014-01-22 | 2014-01-22 | データベース管理システム及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2015111152A1 true JPWO2015111152A1 (ja) | 2017-03-23 |
JP6152431B2 JP6152431B2 (ja) | 2017-06-21 |
Family
ID=53680984
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015558634A Active JP6152431B2 (ja) | 2014-01-22 | 2014-01-22 | データベース管理システム及び方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10366075B2 (ja) |
JP (1) | JP6152431B2 (ja) |
DE (1) | DE112014002275T5 (ja) |
GB (1) | GB2537446A (ja) |
WO (1) | WO2015111152A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016183539A1 (en) | 2015-05-14 | 2016-11-17 | Walleye Software, LLC | Data partitioning and ordering |
US10747753B2 (en) | 2015-08-28 | 2020-08-18 | Swirlds, Inc. | Methods and apparatus for a distributed database within a network |
US9390154B1 (en) | 2015-08-28 | 2016-07-12 | Swirlds, Inc. | Methods and apparatus for a distributed database within a network |
JP2017097639A (ja) * | 2015-11-25 | 2017-06-01 | 富士通株式会社 | データベース制御プログラム、データベース制御装置及びデータベース制御方法 |
US10452491B2 (en) * | 2016-04-14 | 2019-10-22 | Sap Se | Scalable log partitioning system |
KR102454779B1 (ko) * | 2016-12-19 | 2022-10-13 | 스월즈, 인크. | 이벤트들의 삭제를 가능하게 하는 분산 데이터베이스를 위한 방법 및 장치 |
JP6390748B1 (ja) * | 2017-04-19 | 2018-09-19 | 富士通株式会社 | 情報処理装置、情報処理方法および情報処理プログラム |
US10241965B1 (en) | 2017-08-24 | 2019-03-26 | Deephaven Data Labs Llc | Computer data distribution architecture connecting an update propagation graph through multiple remote query processors |
US11334439B2 (en) | 2018-08-29 | 2022-05-17 | International Business Machines Corporation | Checkpointing for increasing efficiency of a blockchain |
US11196542B2 (en) | 2018-08-29 | 2021-12-07 | International Business Machines Corporation | Checkpointing for increasing efficiency of a blockchain |
US10901957B2 (en) * | 2018-08-29 | 2021-01-26 | International Business Machines Corporation | Checkpointing for increasing efficiency of a blockchain |
US11086840B2 (en) | 2018-12-07 | 2021-08-10 | Snowflake Inc. | Transactional streaming of change tracking data |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001249903A (ja) * | 2000-03-07 | 2001-09-14 | Toshiba Corp | 情報処理システム |
JP2012069031A (ja) * | 2010-09-27 | 2012-04-05 | Nec Corp | データベースシステム |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2581141B2 (ja) * | 1988-03-29 | 1997-02-12 | 株式会社日立製作所 | ディレイド・ジャーナル・マージ方式 |
US5878414A (en) * | 1997-06-06 | 1999-03-02 | International Business Machines Corp. | Constructing a transaction serialization order based on parallel or distributed database log files |
US6366915B1 (en) * | 1998-11-04 | 2002-04-02 | Micron Technology, Inc. | Method and system for efficiently retrieving information from multiple databases |
JP2001229063A (ja) * | 2000-02-17 | 2001-08-24 | Mitsubishi Electric Corp | データ管理システム |
JP4437650B2 (ja) * | 2003-08-25 | 2010-03-24 | 株式会社日立製作所 | ストレージシステム |
JP4452533B2 (ja) * | 2004-03-19 | 2010-04-21 | 株式会社日立製作所 | システムおよび記憶装置システム |
JP4998549B2 (ja) * | 2007-02-28 | 2012-08-15 | 富士通株式会社 | メモリミラー化制御プログラム、メモリミラー化制御方法およびメモリミラー化制御装置 |
JP4912973B2 (ja) * | 2007-07-11 | 2012-04-11 | 株式会社日立製作所 | 端末及びデータ配信システム |
JP4870190B2 (ja) * | 2009-04-27 | 2012-02-08 | 株式会社日立製作所 | データ処理方法、計算機、及びデータ処理プログラム |
US8964849B2 (en) * | 2011-11-01 | 2015-02-24 | Blackberry Limited | Multi-level significance maps for encoding and decoding |
-
2014
- 2014-01-22 WO PCT/JP2014/051263 patent/WO2015111152A1/ja active Application Filing
- 2014-01-22 DE DE112014002275.6T patent/DE112014002275T5/de not_active Withdrawn
- 2014-01-22 US US14/894,042 patent/US10366075B2/en active Active
- 2014-01-22 GB GB1521129.5A patent/GB2537446A/en not_active Withdrawn
- 2014-01-22 JP JP2015558634A patent/JP6152431B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001249903A (ja) * | 2000-03-07 | 2001-09-14 | Toshiba Corp | 情報処理システム |
JP2012069031A (ja) * | 2010-09-27 | 2012-04-05 | Nec Corp | データベースシステム |
Also Published As
Publication number | Publication date |
---|---|
US10366075B2 (en) | 2019-07-30 |
GB201521129D0 (en) | 2016-01-13 |
GB2537446A (en) | 2016-10-19 |
WO2015111152A1 (ja) | 2015-07-30 |
DE112014002275T5 (de) | 2016-01-28 |
JP6152431B2 (ja) | 2017-06-21 |
US20160125018A1 (en) | 2016-05-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6152431B2 (ja) | データベース管理システム及び方法 | |
US10977124B2 (en) | Distributed storage system, data storage method, and software program | |
CN114341792B (zh) | 存储集群之间的数据分区切换 | |
EP2731013B1 (en) | Backing up method, device, and system for virtual machine | |
US9251233B2 (en) | Merging an out of synchronization indicator and a change recording indicator in response to a failure in consistency group formation | |
US8495313B2 (en) | Transferring learning metadata between storage servers having clusters via copy services operations on a shared virtual logical unit that stores the learning metadata | |
JP6445049B2 (ja) | ログの管理方法及び計算機システム | |
CN107656834B (zh) | 用于基于事务日志恢复主机访问的系统和方法及存储介质 | |
US20100180093A1 (en) | Rapid defragmentation of storage volumes | |
JP6479186B2 (ja) | 計算機システム及びデータベース管理方法 | |
US20160098324A1 (en) | Dynamic protection of storage resources for disaster recovery | |
US9495253B2 (en) | Virtual snapshot system and method | |
KR100819022B1 (ko) | 하나의 타겟 볼륨과 하나의 소스 볼륨 사이의 관계 관리 | |
US20220066786A1 (en) | Pre-scanned data for optimized boot | |
JP6272556B2 (ja) | 共有リソース更新装置及び共有リソース更新方法 | |
JP2007323657A (ja) | 過渡状態情報を格納するための方法、システムおよびコンピュータ・プログラム | |
US20160171021A1 (en) | Recovering from a pending uncompleted reorganization of a data set | |
CN112748865B (zh) | 用于存储管理的方法、电子设备和计算机程序产品 | |
US9547450B2 (en) | Method and apparatus to change tiers | |
JP6210501B2 (ja) | データベース管理システム、計算機、データベース管理方法 | |
US11586466B2 (en) | Centralized high-availability flows execution framework | |
JP6263673B2 (ja) | 計算機システム及びデータベース管理方法 | |
US8738823B2 (en) | Quiescing input/output (I/O) requests to subsets of logical addresses in a storage for a requested operation | |
WO2016120988A1 (ja) | データベースシステム及びデータベース管理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161220 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170529 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6152431 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |