JP4589427B2 - データベース管理方法、データベース管理装置及びデータベース管理プログラム - Google Patents
データベース管理方法、データベース管理装置及びデータベース管理プログラム Download PDFInfo
- Publication number
- JP4589427B2 JP4589427B2 JP2008202920A JP2008202920A JP4589427B2 JP 4589427 B2 JP4589427 B2 JP 4589427B2 JP 2008202920 A JP2008202920 A JP 2008202920A JP 2008202920 A JP2008202920 A JP 2008202920A JP 4589427 B2 JP4589427 B2 JP 4589427B2
- Authority
- JP
- Japan
- Prior art keywords
- memory
- backup
- database
- pointer
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1466—Management of the backup or restore process to make the backup process non-disruptive
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/217—Database tuning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1456—Hardware arrangements for backup
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/80—Database-specific techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
110 プロセッサ
120 メモリ
121 DBアクセス要求解析部
122 DBアクセス処理部
123 インメモリ要求解析部
124 インメモリ処理部
125 DB運用処理部
126 DBバックアップ処理部
127 DB再編成処理部
128 DB最適化情報取得処理部
131 インメモリ管理テーブル
132 インメモリデータバッファ
133 グローバルバッファ
134 ログ用バッファ
135 ワークエリア
140 インターフェース
150 ストレージ装置
151 DB定義情報
152 データベース
153 ログ
160 ネットワーク
170 端末
180 バックアップ装置
Claims (3)
- ストレージ装置に格納されたデータベースを管理するデータベース管理装置におけるデータベース管理方法であって、
前記データベース管理装置は、
前記ストレージ装置に接続されるインターフェース、前記インターフェースに接続されるプロセッサ及び前記プロセッサに接続されるメモリを備え、
前記データベースに格納されたデータの複製を格納するバックアップ装置に接続され、
前記方法は、前記データベース管理装置が、
前記ストレージ装置の前記データベースに格納されたデータを前記メモリに順次記憶するロード処理を実行し、
前記ストレージ装置にアクセスすることなく、前記メモリに記憶されたデータを読み書きすることによってバッチ業務を実行し、
前記バッチ業務の終了後に、前記メモリに記憶されたデータを前記ストレージ装置に順次書き込むアンロード処理を実行し、
前記ロード処理及び前記アンロード処理を実行する少なくともいずれか一方のタイミングで、前記メモリに記憶されたデータを利用して、前記データベースの運用処理を実行し、
前記運用処理として、前記ロード処理実行時に前記データベースに格納されたデータを前記バックアップ装置に格納する第1バックアップ処理を実行する場合には、前記ストレージ装置から読み出されたデータを書き込む前記メモリ上の位置を示すポインタを第1のカレントポインタとし、前記バックアップ装置に書き込むデータを前記メモリから読み出す位置を示すポインタを第1のバックアップポインタとし、当該第1のカレントポインタを当該第1のバックアップポインタが追い越さないように制御しながら、前記ロード処理と前記第1のバックアップ処理とを並行して実行し、
前記運用処理として、前記アンロード処理実行時に前記データベースに格納されたデータを前記バックアップ装置に格納する第2バックアップ処理を実行する場合には、前記ストレージ装置に格納するデータを前記メモリから読み出す位置を示すポインタを第2のカレントポインタとし、前記バックアップ装置に書き込むデータを前記メモリから読み出す位置を示すポインタを第2のバックアップポインタとし、当該第2のカレントポインタを当該第2のバックアップポインタが追い越さないように制御しながら、前記アンロード処理と前記第2のバックアップ処理とを並行して実行し、
前記運用処理として、前記アンロード処理実行時に前記データベースに格納されたデータを再配置する再編成処理を実行する場合には、前記メモリに格納されたデータをレコード単位で順次読み出し、前記メモリに割り当てられた詰め替えバッファに格納し、当該詰め替えバッファに格納されたデータをページ単位で前記ストレージ装置に格納することを特徴とするデータベース管理方法。 - データベースを格納するストレージ装置及び前記データベースに格納されたデータの複製を格納するバックアップ装置に接続され、前記データベースを管理するデータベース管理装置であって、
前記データベースを記憶するメモリと、
前記メモリに格納されたデータを処理するインメモリ処理部と、
前記データベースの運用処理を行うデータベース運用処理部と、を備え、
前記インメモリ処理部は、
前記ストレージ装置の前記データベースに格納されたデータを前記メモリに順次記憶するロード処理を実行し、
前記ストレージ装置にアクセスすることなく、前記メモリに記憶されたデータを読み書きすることによってバッチ業務を実行し、
前記バッチ業務の終了後に、前記メモリに記憶されたデータを前記ストレージ装置に順次書き込むアンロード処理を実行し、
前記データベース運用処理部は、
前記ロード処理実行時に前記データベースに格納されたデータを前記バックアップ装置に格納する第1バックアップ処理を実行する場合には、前記ストレージ装置から読み出されたデータを書き込む前記メモリ上の位置を示すポインタを第1のカレントポインタとし、前記バックアップ装置に書き込むデータを前記メモリから読み出す位置を示すポインタを第1のバックアップポインタとし、当該第1のカレントポインタを当該第1のバックアップポインタが追い越さないように制御しながら、前記ロード処理と前記第1のバックアップ処理とを並行して実行し、
前記アンロード処理実行時に前記データベースに格納されたデータを前記バックアップ装置に格納する第2バックアップ処理を実行する場合には、前記ストレージ装置に格納するデータを前記メモリから読み出す位置を示すポインタを第2のカレントポインタとし、前記バックアップ装置に書き込むデータを前記メモリから読み出す位置を示すポインタを第2のバックアップポインタとし、当該第2のカレントポインタを当該第2のバックアップポインタが追い越さないように制御しながら、前記アンロード処理と前記第2のバックアップ処理とを並行して実行し、
前記アンロード処理実行時に前記データベースに格納されたデータを再配置する再編成処理を実行する場合には、前記メモリに格納されたデータをレコード単位で順次読み出し、前記メモリに割り当てられた詰め替えバッファに格納し、当該詰め替えバッファに格納されたデータをページ単位で前記ストレージ装置に格納することを特徴とするデータベース管理装置。 - ストレージ装置に格納されたデータベースを管理するデータベース管理装置で実行されるデータベース管理プログラムであって、
前記ストレージ装置の前記データベースに格納されたデータを前記データベース管理装置に備えられたメモリに順次記憶するロード処理を実行する手順と、
前記ストレージ装置にアクセスすることなく、前記メモリに記憶されたデータを読み書きすることによってバッチ業務を実行する手順と、
前記バッチ業務の終了後に、前記メモリに記憶されたデータを前記ストレージ装置に順次書き込むアンロード処理を実行する手順と、
前記ロード処理及び前記アンロード処理を実行する少なくともいずれか一方のタイミングで、前記メモリに記憶されたデータを利用して、前記データベースの運用処理を実行する手順と、
前記運用処理として、前記ロード処理実行時に前記データベースに格納されたデータを前記バックアップ装置に格納する第1バックアップ処理を実行する場合には、前記ストレージ装置から読み出されたデータを書き込む前記メモリ上の位置を示すポインタを第1のカレントポインタとし、前記バックアップ装置に書き込むデータを前記メモリから読み出す位置を示すポインタを第1のバックアップポインタとし、当該第1のカレントポインタを当該第1のバックアップポインタが追い越さないように制御しながら、前記ロード処理と前記第1のバックアップ処理とを並行して実行する手順と、
前記運用処理として、前記アンロード処理実行時に前記データベースに格納されたデータを前記バックアップ装置に格納する第2バックアップ処理を実行する場合には、前記ストレージ装置に格納するデータを前記メモリから読み出す位置を示すポインタを第2のカレントポインタとし、前記バックアップ装置に書き込むデータを前記メモリから読み出す位置を示すポインタを第2のバックアップポインタとし、当該第2のカレントポインタを当該第2のバックアップポインタが追い越さないように制御しながら、前記アンロード処理と前記第2のバックアップ処理とを並行して実行する手順と、
前記運用処理として、前記アンロード処理実行時に前記データベースに格納されたデータを再配置する再編成処理を実行する場合には、前記メモリに格納されたデータをレコード単位で順次読み出し、前記メモリに割り当てられた詰め替えバッファに格納し、当該詰め替えバッファに格納されたデータをページ単位で前記ストレージ装置に格納する手順と、を含むことを特徴とするデータベース管理プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008202920A JP4589427B2 (ja) | 2008-08-06 | 2008-08-06 | データベース管理方法、データベース管理装置及びデータベース管理プログラム |
US12/370,942 US8161006B2 (en) | 2008-08-06 | 2009-02-13 | Database management method, database management apparatus, and database management program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008202920A JP4589427B2 (ja) | 2008-08-06 | 2008-08-06 | データベース管理方法、データベース管理装置及びデータベース管理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010039819A JP2010039819A (ja) | 2010-02-18 |
JP4589427B2 true JP4589427B2 (ja) | 2010-12-01 |
Family
ID=41653887
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008202920A Expired - Fee Related JP4589427B2 (ja) | 2008-08-06 | 2008-08-06 | データベース管理方法、データベース管理装置及びデータベース管理プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US8161006B2 (ja) |
JP (1) | JP4589427B2 (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8180728B2 (en) * | 2009-09-21 | 2012-05-15 | Bmc Software, Inc. | Area-specific reload of database |
US8266125B2 (en) * | 2009-10-01 | 2012-09-11 | Starcounter Ab | Systems and methods for managing databases |
US9251214B2 (en) * | 2010-04-08 | 2016-02-02 | Microsoft Technology Licensing, Llc | In-memory database system |
US8938480B2 (en) * | 2011-12-29 | 2015-01-20 | Teradata Us, Inc. | Techniques for fast loading of data from an external distributed file system to a database management system |
CN104137100B (zh) * | 2013-03-04 | 2017-11-24 | 株式会社东芝 | 数据库装置、程序及数据处理方法 |
JP5836422B2 (ja) * | 2014-04-14 | 2015-12-24 | 株式会社Tkc | データ一致化のための方法およびシステム |
US9984118B2 (en) * | 2014-07-10 | 2018-05-29 | Sap Se | Data loading techniques for an in-memory database |
JP2016184272A (ja) * | 2015-03-26 | 2016-10-20 | 日本電気株式会社 | データベース管理システム、そのバッファリング方法およびコンピュータ・プログラム |
US11086832B2 (en) * | 2015-10-16 | 2021-08-10 | Sap Se | Out of memory error handling for data definition language operations |
US10013214B2 (en) * | 2015-12-29 | 2018-07-03 | International Business Machines Corporation | Adaptive caching and dynamic delay scheduling for in-memory data analytics |
US11163616B2 (en) | 2017-03-07 | 2021-11-02 | Polyjuice Ab | Systems and methods for enabling interoperation of independent software applications |
JP2019191909A (ja) * | 2018-04-25 | 2019-10-31 | 東芝メモリ株式会社 | メモリシステムおよび制御方法 |
JP7421078B2 (ja) * | 2020-01-20 | 2024-01-24 | 富士通株式会社 | 情報処理装置、情報処理システムおよびデータ再配置プログラム |
CN113656362B (zh) * | 2021-08-20 | 2024-02-23 | 中国银行股份有限公司 | Spark流文件存储方法及装置 |
WO2023218541A1 (ja) * | 2022-05-10 | 2023-11-16 | ファナック株式会社 | 情報記録装置及び情報記録方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04163638A (ja) * | 1990-10-29 | 1992-06-09 | Toshiba Corp | 二重化ディスク制御方式 |
JPH086829A (ja) * | 1994-06-17 | 1996-01-12 | Hitachi Ltd | データベースの同時全件検索方法 |
JPH0926906A (ja) * | 1995-07-10 | 1997-01-28 | Hitachi Ltd | メモリデータベースの回復方法 |
JP2004178035A (ja) * | 2002-11-25 | 2004-06-24 | Hitachi Ltd | データベース運用管理方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004164318A (ja) * | 2002-11-13 | 2004-06-10 | Hitachi Ltd | バックアップデータの世代管理方法およびこの方法に用いる記憶制御装置 |
US7958091B2 (en) * | 2006-02-16 | 2011-06-07 | Ingrian Networks, Inc. | Method for fast bulk loading data into a database while bypassing exit routines |
-
2008
- 2008-08-06 JP JP2008202920A patent/JP4589427B2/ja not_active Expired - Fee Related
-
2009
- 2009-02-13 US US12/370,942 patent/US8161006B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04163638A (ja) * | 1990-10-29 | 1992-06-09 | Toshiba Corp | 二重化ディスク制御方式 |
JPH086829A (ja) * | 1994-06-17 | 1996-01-12 | Hitachi Ltd | データベースの同時全件検索方法 |
JPH0926906A (ja) * | 1995-07-10 | 1997-01-28 | Hitachi Ltd | メモリデータベースの回復方法 |
JP2004178035A (ja) * | 2002-11-25 | 2004-06-24 | Hitachi Ltd | データベース運用管理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2010039819A (ja) | 2010-02-18 |
US20100036890A1 (en) | 2010-02-11 |
US8161006B2 (en) | 2012-04-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4589427B2 (ja) | データベース管理方法、データベース管理装置及びデータベース管理プログラム | |
US8316065B2 (en) | Data migration system and data migration method | |
US7325110B2 (en) | Method for acquiring snapshot | |
JP7050034B2 (ja) | ストレージシステム及びノード管理方法 | |
US7765189B2 (en) | Data migration apparatus, method, and program for data stored in a distributed manner | |
US9355098B2 (en) | Restore of full system backup and incremental backups using multiple simultaneous device streams | |
US7827368B2 (en) | Snapshot format conversion method and apparatus | |
US9632949B2 (en) | Storage management method, storage management system, computer system, and program | |
US20140040331A1 (en) | Computer system, file management method and metadata server | |
US8682941B2 (en) | Database apparatus | |
JP4916892B2 (ja) | トランザクション処理のためのログ情報管理システムおよび方法 | |
US20070233753A1 (en) | Database system management method, database system, database device, and backup program | |
JP2010134522A (ja) | データベース管理方法、データベース管理プログラム、および、データベース管理装置 | |
US6658541B2 (en) | Computer system and a database access method thereof | |
US10599359B2 (en) | Data migration system and method thereof | |
JP5547814B2 (ja) | 計算機システム、仮想サーバへのボリューム割り当て方法及び計算機読み取り可能な記憶媒体 | |
CN108475201A (zh) | 一种虚拟机启动过程中的数据获取方法和云计算系统 | |
US11442663B2 (en) | Managing configuration data | |
JP2000330729A (ja) | オンラインバックアップ機能を持つディスクアレイシステム | |
JP2013088920A (ja) | 計算機システム及びデータ管理方法 | |
JP6707754B2 (ja) | データベース管理システム及び方法 | |
WO2016001959A1 (ja) | ストレージシステム | |
JP2004062781A (ja) | 情報管理装置 | |
US12007842B2 (en) | Database node soft restart | |
US20210034580A1 (en) | Method, apparatus and computer program product for maintaining metadata |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100215 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100514 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100525 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100726 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100817 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100909 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4589427 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130917 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |