JP4518485B2 - データベースの再編成方法、ストレージ装置及びストレージシステム - Google Patents
データベースの再編成方法、ストレージ装置及びストレージシステム Download PDFInfo
- Publication number
- JP4518485B2 JP4518485B2 JP2004305680A JP2004305680A JP4518485B2 JP 4518485 B2 JP4518485 B2 JP 4518485B2 JP 2004305680 A JP2004305680 A JP 2004305680A JP 2004305680 A JP2004305680 A JP 2004305680A JP 4518485 B2 JP4518485 B2 JP 4518485B2
- Authority
- JP
- Japan
- Prior art keywords
- volume
- log
- database
- address
- index
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
次に、図11に示すDB再編成処理を実行する(ステップ1404)。具体的には、DB再編成制御部151が、ストレージ装置200に対して、DB再編成コマンドを送信する。
120 メモリ
130 DB管理システム
140 DBアクセス制御部
141 DB問合せ制御部
142 DBアクセス処理部
143 ログ出力処理部
150 DB運用操作制御部
151 DB再編成処理部
152 DBバックアップ制御部
153 DB回復制御部
154 DB状態回復制御部
160 ログバッファ
170 DBバッファ
210 ディスク制御部
211 キャッシュメモリ
213 DB再編成処理部
215 ディスクアクセス制御部
221 ログ
222 主DB
223 副DB
224 DB定義情報
225 DB−ディスクブロック変換テーブル
226 アドレス変換表
Claims (9)
- ホストコンピュータからの要求に基づいて、ストレージ装置のディスクドライブに保存されるデータベースの再編成方法であって、
前記ディスクドライブは、データベースを保存する第一のボリュームと、前記第一のボリュームとペアを構成し、前記データベースの複製を格納する第二のボリュームと、前記データベースへのアクセスによって生成されるログを保存する第三のボリュームと、前記第二のボリュームに保存されたデータベースの内容の複製を保存可能な第四のボリュームとを含み、
前記ホスト計算機は、
トランザクションを静止化し、
前記第一のボリュームと前記第二のボリュームのペアを分割して、前記第一のボリュームに対してのみ、前記データベースへアクセスするように設定し、
前記トランザクションの静止化を解除し、
前記ストレージ装置に、第二のボリュームを再編成させる要求を送り、
前記ストレージ装置は、
前記ホストコンピュータから前記第二のボリュームの再編成要求を受け付けると、
前記第二のボリュームに保存されたデータベースの内容を前記第四のボリュームに論理的に複写し、
前記複写が完了した第二のボリュームを初期化し、
前記第四のボリュームに保存されたデータベースの内容を前記第二のボリュームに物理的に複写し、
前記トランザクションの静止化以後のログを前記第三のボリュームから取得し、前記第二のボリュームの表ブロックの、再編成処理前のアドレスと再編成処理後のアドレスとを対応付けて保存するアドレス変換表を用いて、前記第二のボリュームに保存されたデータベースに当該ログを反映し、
前記ホスト計算機は、前記第二のボリュームの内容を前記第一のボリュームに複写して、前記第一のボリュームと前記第二のボリュームとのペアを再同期することを特徴とする再編成方法。 - 前記第二のボリュームに保存されたデータベースにログを反映する手順は、
前記取得したログのうち、データベースの表ブロックに関するログを前記第二のボリュームに保存されたデータベースに反映し、
取得したログのうち、データベースの索引ブロックに関するログを前記第二のボリュームに保存されたデータベースに反映することを特徴とする請求項1に記載の再編成方法。 - 前記第二のボリュームに保存されたデータベースにログを反映する手順は、
前記取得したログのうち、同一のアドレスに対応するログの最古のログと最新のログを参照して、1又は2のログに集約し、
その後、前記集約したログを前記第二のボリュームに保存されたデータベースに反映することを特徴とする請求項1に記載の再編成方法。 - 前記第二のボリュームに保存されたデータベースにログを反映する手順は、
前記取得したログから、所定の種別のログを抽出し、
前記抽出したログを、当該ログの対象である前記第二のボリュームに保存されたデータベースのアドレス毎にまとめ、
前記まとめられたログを、当該アドレス毎のログとして変換し;
前記変換されたログのアドレスが前記アドレス変換表に保存されている場合は、前記変換されたログのアドレスを、前記アドレス変換表に基づいて、再編成処理後のアドレスに変換し、
前記変換されたログを、変換後のアドレス毎に並び替えて、前記第二のボリュームに保存されたデータベースに反映し;
前記変換されたログのアドレスが前記アドレス変換表に保存されていない場合は、当該アドレスの領域を前記第二のボリュームに作成し、
前記ログを、前記第二のボリュームに保存されたデータベースの当該作成した領域のアドレスに反映することを特徴とする請求項3に記載の再編成方法。 - 前記アドレス変換表は、前記第二のボリュームの表ブロックの、再編成処理前の行アドレスと再編成処理後の行アドレスとが対応付けて保存され、
前記第二のボリュームに保存されたデータベースにログを反映する手順は、
前記取得した索引ログから、所定の種別の索引ログを抽出し、
前記抽出した索引ログを、当該索引の対象である前記第二のボリュームの表ブロックの行アドレス毎にまとめ、
前記まとめられた索引ログを、当該行アドレス毎のログとして変換し;
前記変換されたログのアドレスが前記アドレス変換表に保存されている場合は、前記変換された索引ログの行アドレスを、前記アドレス変換表に基づいて、再編成処理後の行アドレスに変換し、
前記変換された索引ログを、前記索引アドレス毎に並び替えて、前記第二のボリュームに保存されたデータベースに反映し;
前記変換されたログのアドレスが、前記アドレス変換表に保存されていない場合は、当該索引アドレスの領域を前記第二のボリュームに作成し、
前記索引ログを、前記第二のボリュームの当該作成した領域の索引アドレスに保存されたデータベースに反映することを特徴とする請求項3に記載の再編成方法。 - ホストコンピュータによってアクセスされるデータベースをディスクドライブに保存するストレージ装置であって、
前記ディスクドライブに保存されたデータベースを再編成するデータベース再編成処理部を備え、
前記ディスクドライブは、データベースを保存する第一のボリュームと、前記第一のボリュームとペアを構成し、前記データベースの複製を格納する第二のボリュームと、前記データベースに対するアクセスによって生成されるログを保存する第三のボリュームと、前記第二のボリュームに保存されたデータベースの内容の複製を保存可能な第四のボリュームとを含み、
前記データベース再編成処理部は、
前記ホストコンピュータからのトランザクションが静止化した状態で、前記第一のボリュームと前記第二のボリュームのペアを分割し、
前記第二のボリュームに保存されたデータベースの内容を前記第四のボリュームに論理的に複写し、
前記複写が完了した第二のボリュームを初期化し、
前記第四のボリュームに保存されたデータベースの内容を前記第二のボリュームに物理的に複写し、
前記トランザクションの静止化以後のログを前記第三のボリュームから取得し、前記第二のボリュームの表ブロックの、再編成処理前のアドレスと再編成処理後のアドレスとを対応付けて保存するアドレス変換表を用いて、前記第二のボリュームに保存されたデータベースに反映し、
前記第二のボリュームの内容を前記第一のボリュームに複写し、
前記第一のボリュームと前記第二のボリュームとのペアを再同期することを特徴とするストレージ装置。 - 前記データベース再編成処理部は、
取得したログのうち、データベースの表ブロックに関するログを前記第二のボリュームに保存されたデータベースに反映し、
取得したログのうち、データベースの索引ブロックに関するログを前記第二のボリュームに保存されたデータベースに反映することを特徴とする請求項6に記載のストレージ装置。 - 前記アドレス変換表は、前記第二のボリュームの表ブロックの、再編成処理前の行アドレスと再編成処理後の行アドレスとが対応付けて保存され、
前記データベース再編成処理部は、
前記取得したログから、所定の種別のログを抽出し、
前記抽出したログを、当該ログの対象である前記第二のボリュームのアドレス毎にまとめ、
前記まとめられたログを、当該アドレス毎のログとして変換し;
前記変換されたログのアドレスが前記アドレス変換表に保存されている場合は、前記変換された索引ログの行アドレスを、前記アドレス変換表に基づいて、再編成処理後の行アドレスに変換し、
前記変換された索引ログを、当該索引ログの前記第二のボリュームの索引アドレス毎に並び替え、
前記並び替えたログのうち、同一のアドレスに対応するログの最古のログと最新のログを参照して、1又は2のログに集約し、
前記集約したログを、前記第二のボリュームに保存されたデータベースに反映することを特徴とする請求項6に記載のストレージ装置。 - ホストコンピュータと、
前記ホストコンピュータによってアクセスされるデータベースをディスクドライブに保存するストレージ装置と、を備えるデータベースシステムにおいて、
前記ホストコンピュータは、データベースの運用操作を制御するデータベース運用操作制御部を備え、
前記ストレージ装置は、前記ホストコンピュータからの制御信号を受け付けるホストインタフェースと、前記ディスクドライブに保存されたデータベースを再編成するデータベース再編成処理部と、を備え、
前記ディスクドライブは、データベースを保存する第一のボリュームと、前記第一のボリュームとペアを構成し、前記データベースの複製を保存する第二のボリュームと、前記データベースに対するアクセスによって生成されるログを保存する第三のボリュームと、前記第二のボリュームに保存されたデータベースの内容の複製を保存可能な第四のボリュームとを含み、
前記データベース運用操作制御部は、
前記ホストコンピュータのトランザクションを静止化し、
前記ボリュームペアを分割させ、
前記データベースへのアクセスを前記第一のボリュームに対してのみ行うように設定し、
前記トランザクションの静止化を解除し、
前記ストレージ装置に、第二のボリュームを再編成させる要求を送り;
前記データベース再編成処理部は、
前記ホストコンピュータから前記第二のボリュームの再編成要求を受け付けると、
前記第二のボリュームに保存されたデータベースの内容を前記第四のボリュームに論理的に複写し、
前記複写が完了した第二のボリュームを初期化し、
前記第四のボリュームに保存されたデータベースの内容を前記第二のボリュームに物理的に複写し、
前記トランザクションの静止化以後のログを前記第三のボリュームから取得し、前記第二のボリュームの表ブロックの、再編成処理前のアドレスと再編成処理後のアドレスとを対応付けて保存するアドレス変換表を用いて、前記第二のボリュームに反映し、
前記データベース運用操作制御部は、
前記第二のボリュームの内容を前記第一のボリュームに複写し、
前記第一のボリュームと前記第二のボリュームとをボリュームペアとして再同期することを特徴とするストレージシステム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004305680A JP4518485B2 (ja) | 2004-10-20 | 2004-10-20 | データベースの再編成方法、ストレージ装置及びストレージシステム |
US11/080,648 US7421456B2 (en) | 2004-10-20 | 2005-03-16 | Method and system for data processing with database reorganization for the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004305680A JP4518485B2 (ja) | 2004-10-20 | 2004-10-20 | データベースの再編成方法、ストレージ装置及びストレージシステム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006119822A JP2006119822A (ja) | 2006-05-11 |
JP4518485B2 true JP4518485B2 (ja) | 2010-08-04 |
Family
ID=36182077
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004305680A Expired - Fee Related JP4518485B2 (ja) | 2004-10-20 | 2004-10-20 | データベースの再編成方法、ストレージ装置及びストレージシステム |
Country Status (2)
Country | Link |
---|---|
US (1) | US7421456B2 (ja) |
JP (1) | JP4518485B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101681237B (zh) | 2007-06-08 | 2011-09-21 | 富士通株式会社 | 加密装置及加密方法 |
US9430526B2 (en) * | 2008-09-29 | 2016-08-30 | Teradata Us, Inc. | Method and system for temporal aggregation |
US8180728B2 (en) * | 2009-09-21 | 2012-05-15 | Bmc Software, Inc. | Area-specific reload of database |
US20130238867A1 (en) * | 2012-03-06 | 2013-09-12 | Hitachi, Ltd. | Method and apparatus to deploy and backup volumes |
US8738823B2 (en) * | 2012-10-16 | 2014-05-27 | International Business Machines Corporation | Quiescing input/output (I/O) requests to subsets of logical addresses in a storage for a requested operation |
US10296235B2 (en) * | 2016-06-27 | 2019-05-21 | International Business Machines Corporation | Partial volume reorganization to increase data availability |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000507375A (ja) * | 1996-03-19 | 2000-06-13 | シーベル システムズ,インコーポレイティド | 部分的複製データベースシステムのネットワーク維持方法 |
JP2000347909A (ja) * | 1999-06-07 | 2000-12-15 | Hitachi Ltd | トランザクション処理向けストレージ方法および装置、トランザクショナルストレージ |
JP2001022620A (ja) * | 1999-07-06 | 2001-01-26 | Ricoh Co Ltd | データベース変更処理最適化方式 |
JP2001344138A (ja) * | 2000-05-30 | 2001-12-14 | Ricoh Co Ltd | データベースロギング方法及びデータベース回復方法 |
JP2001344136A (ja) * | 2000-05-31 | 2001-12-14 | Nec Corp | 複写ディスク装置群管理システム及びそれに用いる複写ディスク装置群管理方法 |
JP2004157637A (ja) * | 2002-11-05 | 2004-06-03 | Hitachi Ltd | ストレージ管理方法 |
JP2004199264A (ja) * | 2002-12-17 | 2004-07-15 | Hitachi Ltd | データベース処理方法及びその実施装置並びにその処理プログラム |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02212949A (ja) * | 1989-02-14 | 1990-08-24 | Nec Corp | オンライン中データベース再編成処理方式 |
US5544347A (en) * | 1990-09-24 | 1996-08-06 | Emc Corporation | Data storage system controlled remote data mirroring with respectively maintained data indices |
JPH06250794A (ja) * | 1993-02-24 | 1994-09-09 | Toshiba Corp | ディスクサブシステムの再構成が可能な部分的耐ディスク障害コンピュータ |
US5721915A (en) * | 1994-12-30 | 1998-02-24 | International Business Machines Corporation | Interaction between application of a log and maintenance of a table that maps record identifiers during online reorganization of a database |
JPH10207754A (ja) * | 1997-01-16 | 1998-08-07 | Fujitsu Ltd | 更新系データベースの複製方式 |
US6070170A (en) * | 1997-10-01 | 2000-05-30 | International Business Machines Corporation | Non-blocking drain method and apparatus used to reorganize data in a database |
US6289357B1 (en) * | 1998-04-24 | 2001-09-11 | Platinum Technology Ip, Inc. | Method of automatically synchronizing mirrored database objects |
JP4393762B2 (ja) | 2002-12-19 | 2010-01-06 | 株式会社日立製作所 | データベース処理方法及び装置並びにその処理プログラム |
JP4290975B2 (ja) | 2002-12-19 | 2009-07-08 | 株式会社日立製作所 | データベース処理方法及び装置並びにその処理プログラム及びディザスタリカバリ方法及びシステム |
-
2004
- 2004-10-20 JP JP2004305680A patent/JP4518485B2/ja not_active Expired - Fee Related
-
2005
- 2005-03-16 US US11/080,648 patent/US7421456B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000507375A (ja) * | 1996-03-19 | 2000-06-13 | シーベル システムズ,インコーポレイティド | 部分的複製データベースシステムのネットワーク維持方法 |
JP2000347909A (ja) * | 1999-06-07 | 2000-12-15 | Hitachi Ltd | トランザクション処理向けストレージ方法および装置、トランザクショナルストレージ |
JP2001022620A (ja) * | 1999-07-06 | 2001-01-26 | Ricoh Co Ltd | データベース変更処理最適化方式 |
JP2001344138A (ja) * | 2000-05-30 | 2001-12-14 | Ricoh Co Ltd | データベースロギング方法及びデータベース回復方法 |
JP2001344136A (ja) * | 2000-05-31 | 2001-12-14 | Nec Corp | 複写ディスク装置群管理システム及びそれに用いる複写ディスク装置群管理方法 |
JP2004157637A (ja) * | 2002-11-05 | 2004-06-03 | Hitachi Ltd | ストレージ管理方法 |
JP2004199264A (ja) * | 2002-12-17 | 2004-07-15 | Hitachi Ltd | データベース処理方法及びその実施装置並びにその処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2006119822A (ja) | 2006-05-11 |
US20060085488A1 (en) | 2006-04-20 |
US7421456B2 (en) | 2008-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4683546B2 (ja) | データベースの再編成方法及びデータベース再編成システム | |
US7765372B2 (en) | Storage controller and data management method | |
US8769227B2 (en) | Storage controller and data management method | |
US9665304B2 (en) | Storage system with fast snapshot tree search | |
US8566549B1 (en) | Synchronizing performance requirements across multiple storage platforms | |
US7644244B2 (en) | Storage system and snapshot management method | |
US7822939B1 (en) | Data de-duplication using thin provisioning | |
US7596713B2 (en) | Fast backup storage and fast recovery of data (FBSRD) | |
US7509467B2 (en) | Storage controller and data management method | |
US6678809B1 (en) | Write-ahead log in directory management for concurrent I/O access for block storage | |
US20070198604A1 (en) | Computer system, computer system management console, and data recovery management method | |
KR100317691B1 (ko) | 로그 구조화 목표 저장장치를 사전에 구성하여 볼륨을 효율적으로 복사하는 방법 및 장치 | |
JP4290975B2 (ja) | データベース処理方法及び装置並びにその処理プログラム及びディザスタリカバリ方法及びシステム | |
WO2007110931A1 (ja) | 名前空間複製プログラム、名前空間複製装置、名前空間複製方法 | |
JP2009543198A (ja) | ブロック指紋を読み出し、ブロック指紋を使用してデータ重複を解消するシステム、及び方法 | |
EP1636690B1 (en) | Managing a relationship between one target volume and one source volume | |
US7421456B2 (en) | Method and system for data processing with database reorganization for the same | |
US20230079621A1 (en) | Garbage collection from archival of storage snapshots | |
US10846012B2 (en) | Storage system for minimizing required storage capacity during remote volume replication pair duplication | |
US11875060B2 (en) | Replication techniques using a replication log | |
US20050223180A1 (en) | Accelerating the execution of I/O operations in a storage system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070730 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20070730 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20070730 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070928 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100112 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100308 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100427 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100514 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130528 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4518485 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130528 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |