JP4390618B2 - データベース再編成プログラム、データベース再編成方法、及びデータベース再編成装置 - Google Patents
データベース再編成プログラム、データベース再編成方法、及びデータベース再編成装置 Download PDFInfo
- Publication number
- JP4390618B2 JP4390618B2 JP2004132350A JP2004132350A JP4390618B2 JP 4390618 B2 JP4390618 B2 JP 4390618B2 JP 2004132350 A JP2004132350 A JP 2004132350A JP 2004132350 A JP2004132350 A JP 2004132350A JP 4390618 B2 JP4390618 B2 JP 4390618B2
- Authority
- JP
- Japan
- Prior art keywords
- page
- database
- record
- copy
- copy source
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000008521 reorganization Effects 0.000 title claims description 90
- 238000000034 method Methods 0.000 title claims description 64
- 238000012545 processing Methods 0.000 claims description 72
- 230000004044 response Effects 0.000 claims description 23
- 230000006870 function Effects 0.000 claims description 16
- 230000007704 transition Effects 0.000 claims description 4
- 230000008569 process Effects 0.000 description 37
- 238000010586 diagram Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 9
- 230000001174 ascending effect Effects 0.000 description 2
- 230000005012 migration Effects 0.000 description 2
- 238000013508 migration Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000013467 fragmentation Methods 0.000 description 1
- 238000006062 fragmentation reaction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009940 knitting Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1466—Management of the backup or restore process to make the backup process non-disruptive
Description
・ページ内のレコード間にある空き領域の統合(フラグメンテーション解消)
・オーバフローページにあるレコードをプライムページに格納することによるアクセス性能向上
・データベース内においてレコードが満杯状態になる前の領域の拡張
従来の一般的な再編成処理では、まず、データベース中にある全てのレコードが中間ファイルに退避される。そこで、データベースの容量拡張等を実施した後、退避したデータが復元される。
まず、実施の形態に適用される発明の概要について説明し、その後、実施の形態の具体的な内容を説明する。
図2は、本発明の実施の形態のシステム構成例を示す図である。本発明の実施の形態では、複数のホストコンピュータ100,200,300,400と複数の端末装置21,22,・・・とがネットワーク10を介して接続されている。ホストコンピュータ100,200,300,400には、ストレージデバイス500,600が接続されている。また、ホストコンピュータ100と他のホストコンピュータ200,300,400とは、高速の通信回線で互いに接続されている。ホストコンピュータ200,300,400は、その通信回線を介して、ホストコンピュータ100内の共有メモリにアクセスできる。
図4は、本実施の形態を実現するための機能を示すブロック図である。図4には、ストレージデバイス500内に構築されているデータベースを、ストレージデバイス600内に再編成する場合の例が示されている。
複写トランザクション処理部110は、データベースの再編成処理を行う。具体的には、複写トランザクション処理部110は、データベース520の再編成要求を受け付けると、ストレージデバイス600内に、前述のインデックス610、複写先のデータベース620、更新前ログ630、及び更新後ログ640を生成する。このとき、複写先のデータベース620の記憶容量が複写元のデータベース520の記憶容量よりも大きくなるように、インデックス610内の情報を設定する。そして、複写トランザクション処理部110は、データベース520内のレコードをページ単位でデータベース620に複写する。その際の各ページの状態は、ページ状態管理テーブル120に設定される。
図5は、インデックスとデータベースとのデータ構造を示す図である。インデックス510には、各ページのページ番号に対応付けて、そのページに格納すべきレコードのレコード番号が定義されている(ページ番号をPm、レコード番号をRnで表している)。
[ステップS11]複写トランザクション処理部110は、ストレージデバイス600にインデックス610を作成する。このインデックス610では、プライムページの数を増加させる。すなわち、データベース520のプライムページよりも多数のプライムページ格納領域621について定義される。プライムページの数が増加することにより、データベースの容量が増加する。
[ステップS13]複写トランザクション処理部110は、ページ状態管理テーブル120の全てのページの状態を「未複写」にする。
[ステップS15]複写トランザクション処理部110は、ページ状態管理テーブル120におけるステップS14で選択したプライムページの状態を、「複写中」に変更する。
[ステップS21]オンライントランザクション処理部130は、インデックス510を参照し、処理対象のレコードが格納されているプライムページを判断する。そして、オンライントランザクション処理部130は、ページ状態管理テーブル120を参照し、該当するプライムページの状態が複写中か否かを判断する。複写中であれば、処理がステップS22に進められる。複写中でなければ、処理がステップS23に進められる。
[ステップS25]オンライントランザクション処理部130は、ページ状態管理テーブル120を参照し、更新対象のプライムページの状態が複写済か否かを判断する。複写済みであれば、処理がステップS26に進められる。複写済でなければ、処理が終了する。
[ステップS27]オンライントランザクション処理部130は、ステップS26でリードしたレコードの内容を更新し、データベース620にライトする。その後、処理が終了する。
プライムページ、及びそのプライムページからポインタで関連付けられたオーバフローページから、順次レコードが読み出される(ステップS32)。図9の例では、プライムページからレコード番号「R1」,「R2」のレコードが読み出され、オーバフローページからレコード番号「R3」のレコードが読み出される。
前記コンピュータを、
前記複写元データベースの再編成要求に応じて、複写元データベース内のページを順次選択し、選択した前記ページ内のレコードを複写先データベースに複写すると共に、前記複写元データベース内のページ毎の複写の進捗状況をページ状態管理テーブルに設定するレコード複写手段、
更新レコードの書き込み要求に応じて前記ページ状態管理テーブルを参照し、前記複写元データベース内の書き込み対象ページが未複写の状態であれば前記複写元データベース内の該当ページに対して前記更新レコードを書き込み、前記書き込み対象ページが複写済の状態であれば前記複写元データベースと前記複写先データベースとに前記更新レコードを書き込むレコード書き込み手段、
として機能させることを特徴とするデータベース再編成プログラム。
前記コンピュータを前記レコード複写手段として機能させる際、前記プライムページを順次選択し、選択された前記プライムページと、選択された前記プライムページに格納できなかったレコードが格納された前記オーバフローページとの複写処理を行うことを特徴とする付記1記載のデータベース再編成プログラム。
レコード複写手段が、前記複写元データベースの再編成要求に応じて、複写元データベース内のページを順次選択し、選択した前記ページ内のレコードを複写先データベースに複写すると共に、前記複写元データベース内のページ毎の複写の進捗状況をページ状態管理テーブルに設定し、
レコード書き込み手段が、更新レコードの書き込み要求に応じて前記ページ状態管理テーブルを参照し、前記複写元データベース内の書き込み対象ページが未複写の状態であれば前記複写元データベース内の該当ページに対して前記更新レコードを書き込み、前記書き込み対象ページが複写済の状態であれば前記複写元データベースと前記複写先データベースとに前記更新レコードを書き込む、
ことを特徴とするデータベース再編成方法。
前記複写元データベースの再編成要求に応じて、複写元データベース内のページを順次選択し、選択した前記ページ内のレコードを複写先データベースに複写すると共に、前記複写元データベース内のページ毎の複写の進捗状況をページ状態管理テーブルに設定するレコード複写手段と、
更新レコードの書き込み要求に応じて前記ページ状態管理テーブルを参照し、前記複写元データベース内の書き込み対象ページが未複写の状態であれば前記複写元データベース内の該当ページに対して前記更新レコードを書き込み、前記書き込み対象ページが複写済の状態であれば前記複写元データベースと前記複写先データベースとに前記更新レコードを書き込むレコード書き込み手段と、
を有することを特徴とするデータベース再編成装置。
前記コンピュータを、
前記複写元データベースの再編成要求に応じて、複写元データベース内のページを順次選択し、選択した前記ページ内のレコードを複写先データベースに複写すると共に、前記複写元データベース内のページ毎の複写の進捗状況をページ状態管理テーブルに設定するレコード複写手段、
更新レコードの書き込み要求に応じて前記ページ状態管理テーブルを参照し、前記複写元データベース内の書き込み対象ページが未複写の状態であれば前記複写元データベース内の該当ページに対して前記更新レコードを書き込み、前記書き込み対象ページが複写済の状態であれば前記複写元データベースと前記複写先データベースとに前記更新レコードを書き込むレコード書き込み手段、
として機能させることを特徴とするデータベース再編成プログラムを記録したコンピュータ読み取り可能な記録媒体。
1a 複写元データベース
1b インデックス
2 第2の記憶手段
2a 複写先データベース
2b インデックス
3 レコード複写手段
4 ページ状態管理テーブル
5 レコード書き込み手段
6a,6b,6c 更新レコード
Claims (5)
- コンピュータに、複数のページそれぞれに対して格納すべきレコードが決められているデータベースを再編成処理を行わせるデータベース再編成プログラムにおいて、
前記コンピュータを、
前記複写元データベースの再編成要求に応じて、複写元データベース内のページを順次選択し、選択した前記ページ内のレコードを複写先データベースに複写すると共に、前記複写元データベース内のページ毎の複写の進捗状況をページ状態管理テーブルに設定するレコード複写手段、
更新レコードの書き込み要求に応じて前記ページ状態管理テーブルを参照し、前記複写元データベース内の書き込み対象ページが未複写の状態であれば前記複写元データベース内の該当ページに対して前記更新レコードを書き込み、前記書き込み対象ページが複写済の状態であれば前記複写元データベースと前記複写先データベースとに前記更新レコードを書き込むレコード書き込み手段、
として機能させることを特徴とするデータベース再編成プログラム。 - 前記コンピュータを前記レコード書き込み手段として機能させる際、前記書き込み対象ページが複写中の状態であれば複写済に遷移するのを待ち、複写中から複写済の状態に遷移したときに、前記複写元データベースと前記複写先データベースとに前記更新レコードを書き込むことを特徴とする請求項1記載のデータベース再編成プログラム。
- 前記複写元データベースは、格納すべきレコードの番号が予め規定されている複数のプライムページと、前記プライムページに格納できなかったレコードが格納される複数のオーバフローページとを有しており、
前記コンピュータを前記レコード複写手段として機能させる際、前記プライムページを順次選択し、選択された前記プライムページと、選択された前記プライムページに格納できなかったレコードが格納された前記オーバフローページとの複写処理を行うことを特徴とする請求項1記載のデータベース再編成プログラム。 - 複数のページそれぞれに対して格納すべきレコードが決められているデータベースを再編成するデータベース再編成方法において、
レコード複写手段が、前記複写元データベースの再編成要求に応じて、複写元データベース内のページを順次選択し、選択した前記ページ内のレコードを複写先データベースに複写すると共に、前記複写元データベース内のページ毎の複写の進捗状況をページ状態管理テーブルに設定し、
レコード書き込み手段が、更新レコードの書き込み要求に応じて前記ページ状態管理テーブルを参照し、前記複写元データベース内の書き込み対象ページが未複写の状態であれば前記複写元データベース内の該当ページに対して前記更新レコードを書き込み、前記書き込み対象ページが複写済の状態であれば前記複写元データベースと前記複写先データベースとに前記更新レコードを書き込む、
ことを特徴とするデータベース再編成方法。 - 複数のページそれぞれに対して格納すべきレコードが決められているデータベースを再編成するデータベース再編成装置において、
前記複写元データベースの再編成要求に応じて、複写元データベース内のページを順次選択し、選択した前記ページ内のレコードを複写先データベースに複写すると共に、前記複写元データベース内のページ毎の複写の進捗状況をページ状態管理テーブルに設定するレコード複写手段と、
更新レコードの書き込み要求に応じて前記ページ状態管理テーブルを参照し、前記複写元データベース内の書き込み対象ページが未複写の状態であれば前記複写元データベース内の該当ページに対して前記更新レコードを書き込み、前記書き込み対象ページが複写済の状態であれば前記複写元データベースと前記複写先データベースとに前記更新レコードを書き込むレコード書き込み手段と、
を有することを特徴とするデータベース再編成装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004132350A JP4390618B2 (ja) | 2004-04-28 | 2004-04-28 | データベース再編成プログラム、データベース再編成方法、及びデータベース再編成装置 |
US10/990,270 US7949632B2 (en) | 2004-04-28 | 2004-11-16 | Database-rearranging program, database-rearranging method, and database-rearranging apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004132350A JP4390618B2 (ja) | 2004-04-28 | 2004-04-28 | データベース再編成プログラム、データベース再編成方法、及びデータベース再編成装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005316624A JP2005316624A (ja) | 2005-11-10 |
JP4390618B2 true JP4390618B2 (ja) | 2009-12-24 |
Family
ID=35188350
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004132350A Expired - Fee Related JP4390618B2 (ja) | 2004-04-28 | 2004-04-28 | データベース再編成プログラム、データベース再編成方法、及びデータベース再編成装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7949632B2 (ja) |
JP (1) | JP4390618B2 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4854973B2 (ja) | 2005-03-09 | 2012-01-18 | 富士通株式会社 | 記憶制御プログラム、記憶制御方法、記憶制御装置および記憶制御システム |
JP4693540B2 (ja) | 2005-08-04 | 2011-06-01 | 富士通株式会社 | データベース再構成装置、およびデータベース再構成プログラム |
JP4579998B2 (ja) | 2008-03-31 | 2010-11-10 | 富士通株式会社 | リストア管理プログラム、リストア管理方法およびリストア管理装置 |
IL191169A0 (en) * | 2008-04-30 | 2009-02-11 | Privacy Inside Ltd | A method and a system for data verification and/or authentication |
JP4870190B2 (ja) * | 2009-04-27 | 2012-02-08 | 株式会社日立製作所 | データ処理方法、計算機、及びデータ処理プログラム |
CN102004743B (zh) * | 2009-09-02 | 2013-08-14 | 中国银联股份有限公司 | 一种用于异构数据库之间数据复制的系统及方法 |
US10929359B2 (en) * | 2018-08-24 | 2021-02-23 | Ca, Inc. | Dynamically reorganizing a dataset using online migration while allowing concurrent user access to data in the dataset |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5193162A (en) * | 1989-11-06 | 1993-03-09 | Unisys Corporation | Cache memory with data compaction for use in the audit trail of a data processing system having record locking capabilities |
JPH05151037A (ja) | 1991-06-24 | 1993-06-18 | Nec Corp | 業務処理中データベース再編成処理方式 |
CA2285096C (en) * | 1991-11-12 | 2000-05-09 | Ibm Canada Limited-Ibm Canada Limitee | Logical mapping of data objects using data spaces |
JPH0667950A (ja) | 1992-08-13 | 1994-03-11 | Hitachi Ltd | データベース再編成方式 |
JP2708386B2 (ja) | 1994-03-18 | 1998-02-04 | インターナショナル・ビジネス・マシーンズ・コーポレイション | 同時更新及び複写手順を通して重複データベースを回復させる方法及び装置 |
JP3239924B2 (ja) | 1995-07-24 | 2001-12-17 | 日本電気株式会社 | リレーショナルデータベースアクセス制御方式 |
JPH10207754A (ja) * | 1997-01-16 | 1998-08-07 | Fujitsu Ltd | 更新系データベースの複製方式 |
US6029171A (en) * | 1997-02-10 | 2000-02-22 | Actioneer, Inc. | Method and apparatus for group action processing between users of a collaboration system |
JPH10333948A (ja) * | 1997-04-01 | 1998-12-18 | Kokusai Zunou Sangyo Kk | 仮想データベース空間システムおよびデータベースプログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP3598202B2 (ja) | 1997-05-30 | 2004-12-08 | 株式会社日立製作所 | オンラインシステム |
JP3667953B2 (ja) | 1997-09-26 | 2005-07-06 | 富士通株式会社 | データベース再編成装置及びコンピュータ読み取り可能な記録媒体 |
US6161109A (en) * | 1998-04-16 | 2000-12-12 | International Business Machines Corporation | Accumulating changes in a database management system by copying the data object to the image copy if the data object identifier of the data object is greater than the image identifier of the image copy |
US6289357B1 (en) * | 1998-04-24 | 2001-09-11 | Platinum Technology Ip, Inc. | Method of automatically synchronizing mirrored database objects |
US6393415B1 (en) * | 1999-03-31 | 2002-05-21 | Verizon Laboratories Inc. | Adaptive partitioning techniques in performing query requests and request routing |
US6622142B1 (en) * | 1999-04-13 | 2003-09-16 | Staktek Group, L.P. | Database utilities |
JP4046893B2 (ja) | 1999-05-28 | 2008-02-13 | 富士通株式会社 | データベース複写装置及びデータベース複写方法並びにデータベース複写プログラムを記録したコンピュータ読み取り可能な記録媒体 |
US6782387B1 (en) * | 1999-08-06 | 2004-08-24 | Ricoh Company, Ltd. | System for document management and information processing |
US6671680B1 (en) * | 2000-01-28 | 2003-12-30 | Fujitsu Limited | Data mining apparatus and storage medium storing therein data mining processing program |
US6801921B2 (en) * | 2000-09-08 | 2004-10-05 | Hitachi, Ltd. | Method and system for managing multiple database storage units |
US7765180B2 (en) | 2002-09-10 | 2010-07-27 | Annex Systems Incorporated | Database re-organizing system and database |
-
2004
- 2004-04-28 JP JP2004132350A patent/JP4390618B2/ja not_active Expired - Fee Related
- 2004-11-16 US US10/990,270 patent/US7949632B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20050246385A1 (en) | 2005-11-03 |
JP2005316624A (ja) | 2005-11-10 |
US7949632B2 (en) | 2011-05-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6708929B2 (ja) | ストレージ制御装置、ストレージシステムおよびストレージ制御プログラム | |
US5379412A (en) | Method and system for dynamic allocation of buffer storage space during backup copying | |
EP0786111B1 (en) | Snapshot of data stored on a mass storage system | |
US8074035B1 (en) | System and method for using multivolume snapshots for online data backup | |
US20060047926A1 (en) | Managing multiple snapshot copies of data | |
US6463573B1 (en) | Data processor storage systems with dynamic resynchronization of mirrored logical data volumes subsequent to a storage system failure | |
US7694087B2 (en) | Duplicate data storing system, duplicate data storing method, and duplicate data storing program for storage device | |
US7698319B2 (en) | Database system management method, database system, database device, and backup program | |
JP2005301497A (ja) | ストレージ管理装置、リストア方法及びそのプログラム | |
US7774316B2 (en) | Filesystem snapshot enhancement to improve system performance | |
US20150301758A1 (en) | Metadata for data storage array | |
US20070061540A1 (en) | Data storage system using segmentable virtual volumes | |
US7433902B2 (en) | Non-disruptive backup copy in a database online reorganization environment | |
JP2005529410A (ja) | 複数の同時にアクティブなファイルシステム | |
JP4402103B2 (ja) | データ記憶装置、そのデータ再配置方法、プログラム | |
JP2009116796A (ja) | データ読出し方法、データ管理システム及びストレージシステム | |
JP2006268139A (ja) | データ複製装置、方法及びプログラム並びに記憶システム | |
US8140886B2 (en) | Apparatus, system, and method for virtual storage access method volume data set recovery | |
US7093090B1 (en) | Method for creating a virtual data copy of a volume being restored | |
US20130198473A1 (en) | Backup copy enhancements to reduce primary version access | |
JP2005148854A (ja) | ファイルシステム及びプログラム | |
JP4854973B2 (ja) | 記憶制御プログラム、記憶制御方法、記憶制御装置および記憶制御システム | |
JP4390618B2 (ja) | データベース再編成プログラム、データベース再編成方法、及びデータベース再編成装置 | |
US7516133B2 (en) | Method and apparatus for file replication with a common format | |
JP4394467B2 (ja) | ストレージシステム、サーバ装置及び先行コピーデータ生成方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060925 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090427 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090512 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091006 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091006 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121016 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121016 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131016 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |