JPH09171476A - ダンプファイル圧縮方式 - Google Patents
ダンプファイル圧縮方式Info
- Publication number
- JPH09171476A JPH09171476A JP7331311A JP33131195A JPH09171476A JP H09171476 A JPH09171476 A JP H09171476A JP 7331311 A JP7331311 A JP 7331311A JP 33131195 A JP33131195 A JP 33131195A JP H09171476 A JPH09171476 A JP H09171476A
- Authority
- JP
- Japan
- Prior art keywords
- dump
- dump file
- file
- index table
- page
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Debugging And Monitoring (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
(57)【要約】
【課題】 圧縮されたダンプファイルの必要な部分だけ
を復元して参照できる。 【解決手段】 ダンプの採取にあたり、まずダンプ採取
開始処理１１にて、ページ数に対応するインデックステ
ーブルを作成する。次にページごとに圧縮を行いインデ
ックステーブルに圧縮後の情報を書き込むダンプ採取処
理１２を行う。ダンプ採取終了処理１３にて、インデッ
クステーブルをダンプファイルに反映させ、ダンプファ
イルをクローズする。ダンプ解析コマンドは、部分的に
圧縮されたダンプファイルから必要な圧縮されたページ
だけを取り出して復元する。 【効果】 ダンプファイルを用いた障害解析において、
ディスク容量を少なくすることができ、解析時間を短縮
できる。
を復元して参照できる。 【解決手段】 ダンプの採取にあたり、まずダンプ採取
開始処理１１にて、ページ数に対応するインデックステ
ーブルを作成する。次にページごとに圧縮を行いインデ
ックステーブルに圧縮後の情報を書き込むダンプ採取処
理１２を行う。ダンプ採取終了処理１３にて、インデッ
クステーブルをダンプファイルに反映させ、ダンプファ
イルをクローズする。ダンプ解析コマンドは、部分的に
圧縮されたダンプファイルから必要な圧縮されたページ
だけを取り出して復元する。 【効果】 ダンプファイルを用いた障害解析において、
ディスク容量を少なくすることができ、解析時間を短縮
できる。
Description
【０００１】
【発明の属する技術分野】本発明は、ダンプファイル圧
縮方式に関し、特に、障害発生時のダンプファイルの採
取と解析時の復元を行うダンプファイル圧縮方式に関す
る。
縮方式に関し、特に、障害発生時のダンプファイルの採
取と解析時の復元を行うダンプファイル圧縮方式に関す
る。
【０００２】
【従来の技術】従来の技術として、特開平０３―２７８
２４６号公報に示される「異常情報採取処理方法」、特
開平０３―２５２７４９号公報に示される「メモリダン
プデータ転送装置」、特開昭６３―０３９０５３号公報
に示される「メモリ圧縮ダンプ・展開表示方式」があ
る。
２４６号公報に示される「異常情報採取処理方法」、特
開平０３―２５２７４９号公報に示される「メモリダン
プデータ転送装置」、特開昭６３―０３９０５３号公報
に示される「メモリ圧縮ダンプ・展開表示方式」があ
る。
【０００３】障害発生時などに後日の解析のために保存
される情報処理装置のメモリイメージはダンプと呼ば
れ、通常は障害が発生した後に採取され情報処理装置の
磁気ディスク上に置かれる。ダンプ採取を確実に行うた
めには、障害が発生してからダンプファイルを置く場所
を割り当てる訳にはいかず、あらかじめ空き領域を確保
しておく必要がある。大型の情報処理装置の場合は実装
するメモリが非常に多いのでダンプファイルのサイズも
メモリに合わせて大きくなっていくが、通常の処理で全
く使わないディスク領域をダンプファイルのために使う
のは非効率であり、そのためにダンプファイルの大きさ
を小さくする工夫がなされている。よく行われる方法の
一つは、ダンプファイル作成時にメモリイメージを圧縮
したものを書き込むことである。
される情報処理装置のメモリイメージはダンプと呼ば
れ、通常は障害が発生した後に採取され情報処理装置の
磁気ディスク上に置かれる。ダンプ採取を確実に行うた
めには、障害が発生してからダンプファイルを置く場所
を割り当てる訳にはいかず、あらかじめ空き領域を確保
しておく必要がある。大型の情報処理装置の場合は実装
するメモリが非常に多いのでダンプファイルのサイズも
メモリに合わせて大きくなっていくが、通常の処理で全
く使わないディスク領域をダンプファイルのために使う
のは非効率であり、そのためにダンプファイルの大きさ
を小さくする工夫がなされている。よく行われる方法の
一つは、ダンプファイル作成時にメモリイメージを圧縮
したものを書き込むことである。
【０００４】図７を参照して説明すると、単純にダンプ
ファイルをオープンする処理（ステップ７１）を行い、
メモリイメージを圧縮しながらダンプファイルに書き込
む処理（ステップ７２）を行い、最後に、ダンプファイ
ルをクローズする処理（ステップ７３）を行う。またメ
モリイメージとダンプファイルの対応は図８に示すよう
になり、メモリイメージ全体を圧縮したものがダンプフ
ァイルとなっている。
ファイルをオープンする処理（ステップ７１）を行い、
メモリイメージを圧縮しながらダンプファイルに書き込
む処理（ステップ７２）を行い、最後に、ダンプファイ
ルをクローズする処理（ステップ７３）を行う。またメ
モリイメージとダンプファイルの対応は図８に示すよう
になり、メモリイメージ全体を圧縮したものがダンプフ
ァイルとなっている。
【０００５】この方法ではダンプ採取時にＣＰＵ資源を
使ってしまうものの、圧縮アルゴリズムによってはダン
プファイルの大きさを半分ぐらいにできることもある。
したがって、実装するメモリが多い情報処理装置ほど効
果がある。
使ってしまうものの、圧縮アルゴリズムによってはダン
プファイルの大きさを半分ぐらいにできることもある。
したがって、実装するメモリが多い情報処理装置ほど効
果がある。
【０００６】
【発明が解決しようとする課題】しかしこの方法の場
合、解析時にはもとのメモリイメージに戻す必要がある
ので以下のような問題点が存在している。
合、解析時にはもとのメモリイメージに戻す必要がある
ので以下のような問題点が存在している。
【０００７】第一の問題点は、障害解析を行う情報処理
装置ではメモリイメージと同じ大きさの磁気ディスク容
量を必要とすることである。
装置ではメモリイメージと同じ大きさの磁気ディスク容
量を必要とすることである。
【０００８】その理由は、復元するということはもとの
メモリイメージと同じ大きさの磁気ディスク容量を必要
とすることである。ダンプファイルを採取後に別の情報
処理装置にダンプファイルを移動するようにすれば、障
害を起こした情報処理装置の磁気ディスク容量は節約で
きるが、障害解析を行う情報処理装置では、やはりメモ
リイメージと同じ大きさの磁気ディスク容量を必要とす
る。
メモリイメージと同じ大きさの磁気ディスク容量を必要
とすることである。ダンプファイルを採取後に別の情報
処理装置にダンプファイルを移動するようにすれば、障
害を起こした情報処理装置の磁気ディスク容量は節約で
きるが、障害解析を行う情報処理装置では、やはりメモ
リイメージと同じ大きさの磁気ディスク容量を必要とす
る。
【０００９】第二の問題点は、障害解析が遅れることで
ある。
ある。
【００１０】その理由は、障害解析を行うためには全体
を復元する必要があり、そのために復元に時間がかかり
障害解析が遅れることである。
を復元する必要があり、そのために復元に時間がかかり
障害解析が遅れることである。
【００１１】
【課題を解決するための手段】本発明のダンプファイル
圧縮方式は、メモリイメージをページ単位で圧縮してダ
ンプファイルに書き込むことを特徴とする。
圧縮方式は、メモリイメージをページ単位で圧縮してダ
ンプファイルに書き込むことを特徴とする。
【００１２】ほとんどの障害では、その解析にあたって
メモリイメージのすべてを必要としない。そこで本発明
では、ダンプファイルの必要の部分だけを部分的に復元
することにより以下のことが可能になる。
メモリイメージのすべてを必要としない。そこで本発明
では、ダンプファイルの必要の部分だけを部分的に復元
することにより以下のことが可能になる。
【００１３】第１に、磁気ディスク容量が不足している
ときでも、必要の部分だけを復元してメモリイメージを
参照することができる。
ときでも、必要の部分だけを復元してメモリイメージを
参照することができる。
【００１４】第２に、すべて復元するのを待つことな
く、メモリイメージを参照することができる。
く、メモリイメージを参照することができる。
【００１５】すべての復元が終わるのを待ってダンプ解
析作業を開始する必要がないし、すべてを復元しないの
でダンプファイルをおくディスク容量が少なくて済む。
析作業を開始する必要がないし、すべてを復元しないの
でダンプファイルをおくディスク容量が少なくて済む。
【００１６】
【発明の実施の形態】次に、本発明の実施の形態につい
て図面を参照して説明する。
て図面を参照して説明する。
【００１７】最初に前提となる用語を説明する。情報処
理装置では、メモリ割り当てなどの管理を行うための最
小のメモリ管理単位（固定長）が存在する。多くの情報
処理装置で採用されている仮想記憶ではこれらの単位は
ページと呼ばれており、この『ページ』を使って説明し
ていく。説明から解るようにメモリイメージはページの
整数倍になっている。
理装置では、メモリ割り当てなどの管理を行うための最
小のメモリ管理単位（固定長）が存在する。多くの情報
処理装置で採用されている仮想記憶ではこれらの単位は
ページと呼ばれており、この『ページ』を使って説明し
ていく。説明から解るようにメモリイメージはページの
整数倍になっている。
【００１８】図１は本発明におけるダンプ採取処理全体
を示している。
を示している。
【００１９】ダンプ採取開始処理１１にて準備を行う
が、その詳細は図２に示される。ダンプファイルのオー
プン（ステップ２１）を行い、次にシステム情報の獲得
（ステップ２２）を行うが、このときに情報処理装置が
実装するメモリの大きさを得ておき、その情報を基にイ
ンデックステーブルの大きさを決定する。インデックス
テーブルの大きさは、インデックステーブル作成処理
（ステップ２３）にて作成される。インデックステーブ
ルの各要素は圧縮を行うページごとに１つ用意され、ダ
ンプファイル中の圧縮後のイメージの場所を示すための
情報（オフセット、サイズ）から構成される。インデッ
クステーブルはダンプファイルの先頭に置かれるが、こ
の時点ではダンププログラム自身の作業エリアに保持さ
れている。最後に、作業エリアであるｉｎｄｅｘをゼロ
に、ｍａｘにインデックステーブルの配列数を入れ初期
化しておく。
が、その詳細は図２に示される。ダンプファイルのオー
プン（ステップ２１）を行い、次にシステム情報の獲得
（ステップ２２）を行うが、このときに情報処理装置が
実装するメモリの大きさを得ておき、その情報を基にイ
ンデックステーブルの大きさを決定する。インデックス
テーブルの大きさは、インデックステーブル作成処理
（ステップ２３）にて作成される。インデックステーブ
ルの各要素は圧縮を行うページごとに１つ用意され、ダ
ンプファイル中の圧縮後のイメージの場所を示すための
情報（オフセット、サイズ）から構成される。インデッ
クステーブルはダンプファイルの先頭に置かれるが、こ
の時点ではダンププログラム自身の作業エリアに保持さ
れている。最後に、作業エリアであるｉｎｄｅｘをゼロ
に、ｍａｘにインデックステーブルの配列数を入れ初期
化しておく。
【００２０】次に図１のダンプ採取処理１２を実行す
る。ダンプ採取処理１２の詳細は図３に示される。この
処理は、インデックスの値をもとに一つのページだけを
獲得する処理（ステップ３１）を行い、そのページに対
して圧縮する処理（ステップ３２）を行い、ダンプファ
イルへの追加書き込み処理（ステップ３３）を行う。そ
の後、インデックスに対応するインデックステーブル
に、書き込んだ場所（ファイルの先頭からのオフセッ
ト）と書き込んだサイズを設定する処理（ステップ３
４）を行う。ｉｎｄｅｘの値を１だけ増加する処理（ス
テップ３５）を行ってから条件判断（ステップ３６）に
てｉｎｄｅｘとｍａｘの値を比較し、ｉｎｄｅｘの値が
ｍａｘ以上となった場合は処理を終了し、ｍａｘ未満の
場合はステップ３１〜３５を繰り返す。
る。ダンプ採取処理１２の詳細は図３に示される。この
処理は、インデックスの値をもとに一つのページだけを
獲得する処理（ステップ３１）を行い、そのページに対
して圧縮する処理（ステップ３２）を行い、ダンプファ
イルへの追加書き込み処理（ステップ３３）を行う。そ
の後、インデックスに対応するインデックステーブル
に、書き込んだ場所（ファイルの先頭からのオフセッ
ト）と書き込んだサイズを設定する処理（ステップ３
４）を行う。ｉｎｄｅｘの値を１だけ増加する処理（ス
テップ３５）を行ってから条件判断（ステップ３６）に
てｉｎｄｅｘとｍａｘの値を比較し、ｉｎｄｅｘの値が
ｍａｘ以上となった場合は処理を終了し、ｍａｘ未満の
場合はステップ３１〜３５を繰り返す。
【００２１】次に図１のダンプ採取終了処理１３が実行
される。ダンプ採取終了処理１３の詳細は図４に示さ
れ、作業エリアに保持されていたインデックステーブル
をダンプファイルに書き込む処理（ステップ４１）の
後、ダンプファイルをクローズする処理（ステップ４
２）を行う。
される。ダンプ採取終了処理１３の詳細は図４に示さ
れ、作業エリアに保持されていたインデックステーブル
をダンプファイルに書き込む処理（ステップ４１）の
後、ダンプファイルをクローズする処理（ステップ４
２）を行う。
【００２２】メモリイメージと最終的なダンプファイル
の対応を図５に示す。メモリイメージ中のページの並び
とインデックステーブルのオフセットサイズの並びは、
一対一に対応している。
の対応を図５に示す。メモリイメージ中のページの並び
とインデックステーブルのオフセットサイズの並びは、
一対一に対応している。
【００２３】次にダンプ解析時の動作例を図６を参照し
て説明する。ダンプ解析コマンドは圧縮されたダンプフ
ァイル６１を直接参照してメモリイメージを得る。作業
用ファイルとして途中まで復元したダンプファイル６４
を作成して利用する。最初、復元されたダンプファイル
６４は存在せず、一番最初にダンプ解析コマンドがメモ
リイメージの一部へのアクセスを試みたときに作成され
る。すなわち、ダンプ解析コマンドはメモリイメージへ
のアクセスが発生すると該当するページを特定し、イン
デックステーブルから得たオフセットとサイズをもとに
圧縮されたページを獲得して復元を行う。このとき、復
元されたダンプファイル６４が存在していないのでダン
プファイル６１のインデックステーブルを基に、復元さ
れたダンプファイル６４のインデックステーブルを作成
し、その後ろに復元されたページを追加する。復元され
たダンプファイル６４のインデックステーブルには、追
加したページへのオフセットを記録する。復元されたダ
ンプファイル６４のインデックステーブルの各要素はオ
フセットからのみ構成されている点がダンプファイル６
１と異なる点である。続いて別のページが必要となる
と、同じように復元を行い、復元されたダンプファイル
６４に追加する。図６は、２個のページが復元された状
態を示す。一番最初にアクセスされたのは６３であり、
復元されたページは６５に対応する。二番目にアクセス
されたのは６２であり、復元されたページは６６に対応
する。このようにすれば、必要な部分だけを復元してア
クセスすることができる。もしもダンプ解析作業が長引
いてダンプ解析コマンドを一旦終了しなければならない
ときでも、復元されたダンプファイル６４を保存してお
けば、以降のダンプ解析においてダンプファイル復元を
早くすることができる。
て説明する。ダンプ解析コマンドは圧縮されたダンプフ
ァイル６１を直接参照してメモリイメージを得る。作業
用ファイルとして途中まで復元したダンプファイル６４
を作成して利用する。最初、復元されたダンプファイル
６４は存在せず、一番最初にダンプ解析コマンドがメモ
リイメージの一部へのアクセスを試みたときに作成され
る。すなわち、ダンプ解析コマンドはメモリイメージへ
のアクセスが発生すると該当するページを特定し、イン
デックステーブルから得たオフセットとサイズをもとに
圧縮されたページを獲得して復元を行う。このとき、復
元されたダンプファイル６４が存在していないのでダン
プファイル６１のインデックステーブルを基に、復元さ
れたダンプファイル６４のインデックステーブルを作成
し、その後ろに復元されたページを追加する。復元され
たダンプファイル６４のインデックステーブルには、追
加したページへのオフセットを記録する。復元されたダ
ンプファイル６４のインデックステーブルの各要素はオ
フセットからのみ構成されている点がダンプファイル６
１と異なる点である。続いて別のページが必要となる
と、同じように復元を行い、復元されたダンプファイル
６４に追加する。図６は、２個のページが復元された状
態を示す。一番最初にアクセスされたのは６３であり、
復元されたページは６５に対応する。二番目にアクセス
されたのは６２であり、復元されたページは６６に対応
する。このようにすれば、必要な部分だけを復元してア
クセスすることができる。もしもダンプ解析作業が長引
いてダンプ解析コマンドを一旦終了しなければならない
ときでも、復元されたダンプファイル６４を保存してお
けば、以降のダンプ解析においてダンプファイル復元を
早くすることができる。
【００２４】
【発明の効果】第一の効果は、ダンプファイルを用いた
障害解析において磁気ディスク容量を少なくすることが
できる。
障害解析において磁気ディスク容量を少なくすることが
できる。
【００２５】その理由は、すべてを復元しないのでダン
プファイルをおくディスク容量が少なくて済むからであ
る。
プファイルをおくディスク容量が少なくて済むからであ
る。
【００２６】第二の効果は、ダンプ解析時間を短縮でき
る。
る。
【００２７】その理由は、すべての復元が終わるのを待
ってダンプ解析を開始する必要がないからである。
ってダンプ解析を開始する必要がないからである。
【図１】本発明の一実施の形態を示す流れ図である。
【図２】図１中のダンプ採取開始処理の詳細を示す流れ
図である。
図である。
【図３】図１中のダンプ採取処理の詳細を示す流れ図で
ある。
ある。
【図４】図１中のダンプ採取終了処理の詳細を示す流れ
図である。
図である。
【図５】メモリイメージとダンプファイルの対応を示す
図である。
図である。
【図６】解析途中のダンプファイルを示す図である。
【図７】従来例の流れ図である。
【図８】従来例におけるメモリイメージとダンプファイ
ルの対応を示す図である。
ルの対応を示す図である。
１１ ダンプ採取開始処理 １２ ダンプ採取処理 １３ ダンプ採取終了処理
Claims (1)
- 【請求項１】 メモリイメージをページ単位で圧縮して
ダンプファイルに書き込むことを特徴とするダンプファ
イル圧縮方式。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7331311A JPH09171476A (ja) | 1995-12-20 | 1995-12-20 | ダンプファイル圧縮方式 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7331311A JPH09171476A (ja) | 1995-12-20 | 1995-12-20 | ダンプファイル圧縮方式 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH09171476A true JPH09171476A (ja) | 1997-06-30 |
Family
ID=18242272
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP7331311A Pending JPH09171476A (ja) | 1995-12-20 | 1995-12-20 | ダンプファイル圧縮方式 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH09171476A (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010122759A (ja) * | 2008-11-17 | 2010-06-03 | Nec Corp | デバッグ装置、ダンプファイルの保存復元方法およびそのプログラム |
| US7783855B2 (en) | 2005-09-09 | 2010-08-24 | International Business Machines Corporation | Keymap order compression |
| JP2012141830A (ja) * | 2010-12-29 | 2012-07-26 | Yahoo Japan Corp | インデックス生成装置及び方法 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6339053A (ja) * | 1986-08-01 | 1988-02-19 | Nec Corp | メモリ圧縮ダンプ・展開表示方式 |
-
1995
- 1995-12-20 JP JP7331311A patent/JPH09171476A/ja active Pending
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6339053A (ja) * | 1986-08-01 | 1988-02-19 | Nec Corp | メモリ圧縮ダンプ・展開表示方式 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7783855B2 (en) | 2005-09-09 | 2010-08-24 | International Business Machines Corporation | Keymap order compression |
| US7840774B2 (en) | 2005-09-09 | 2010-11-23 | International Business Machines Corporation | Compressibility checking avoidance |
| JP2010122759A (ja) * | 2008-11-17 | 2010-06-03 | Nec Corp | デバッグ装置、ダンプファイルの保存復元方法およびそのプログラム |
| JP2012141830A (ja) * | 2010-12-29 | 2012-07-26 | Yahoo Japan Corp | インデックス生成装置及び方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6983296B1 (en) | System and method for tracking modified files in a file system | |
| JP2001502511A (ja) | デジタルカメラ装置内で処理データと画像データとを相関させるシステム及び方法 | |
| CN117156172B (zh) | 视频切片上报方法、系统、存储介质及计算机 | |
| US8161023B2 (en) | Inserting a PDF shared resource back into a PDF statement | |
| JPH09171476A (ja) | ダンプファイル圧縮方式 | |
| WO2006063331A2 (en) | Bit stream backup incorporating parallel processes | |
| JPH09325903A (ja) | 障害記録方式 | |
| JPH10333944A (ja) | メモリダンプ採取方式 | |
| JP3097076B2 (ja) | トレースデータ採取方式 | |
| JPH0381843A (ja) | ファイル退避復元処理装置 | |
| JPH06309209A (ja) | ファイルバックアップ方式 | |
| JPH039426A (ja) | ソフトウェア開発環境保管システム | |
| CN114880277B (zh) | 块设备快照方法、系统和存储介质 | |
| JPH09134300A (ja) | エラーログ編集システム | |
| JPH03156547A (ja) | メモリダンプ収集装置 | |
| JPH02242447A (ja) | メモリダンプ収集方式 | |
| CN118535093A (zh) | 一种基于flume系统的数据处理方法、装置、计算机设备和存储介质 | |
| CN115858482A (zh) | 一种基于文件系统的数据同步方法、系统及存储介质 | |
| JP3368378B2 (ja) | 記憶内容の管理方法およびデータ処理装置 | |
| JPS6316343A (ja) | 対話形式機能テスト時のバツチによるテスト方式 | |
| JPH0310331A (ja) | データ退避方式 | |
| JPH03122728A (ja) | 退避復元方式 | |
| JPH0563824B2 (ja) | ||
| JPH03103943A (ja) | 退避復元方式 | |
| JPH05173851A (ja) | メモリダンプ収集方式 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 19980120 |