JP2000029756A - ファイル圧縮管理方式 - Google Patents

ファイル圧縮管理方式

Info

Publication number
JP2000029756A
JP2000029756A JP10197813A JP19781398A JP2000029756A JP 2000029756 A JP2000029756 A JP 2000029756A JP 10197813 A JP10197813 A JP 10197813A JP 19781398 A JP19781398 A JP 19781398A JP 2000029756 A JP2000029756 A JP 2000029756A
Authority
JP
Japan
Prior art keywords
history
file
compression
access history
access
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP10197813A
Other languages
English (en)
Other versions
JP3216606B2 (ja
Inventor
Asayuki Osugi
朝之 大杉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP19781398A priority Critical patent/JP3216606B2/ja
Publication of JP2000029756A publication Critical patent/JP2000029756A/ja
Application granted granted Critical
Publication of JP3216606B2 publication Critical patent/JP3216606B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Debugging And Monitoring (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】 【課題】 使用頻度の低いファイルを圧縮することによ
り、副作用である処理パフォーマンスの低下を押さえな
がら、実容量以上の記憶容量でファイル管理可能にす
る。 【解決手段】 運用開始時にはファイル容量の多いもの
から順に圧縮し、運用開始後はファイルに対するアクセ
スを監視し、アクセスがあるごとにこのアクセス履歴を
記録し、ファイルの前回圧縮時からの履歴日数が予め設
定された履歴管理日数を経過したか否かを調べ、経過し
ていない場合には前記アクセス履歴の記録を継続させ、
前記履歴日数が履歴管理日数を経過した場合には履歴デ
ータに従って再圧縮する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】この発明は、コンピュータの
オペレーティングシステム上で、常駐アプリケーション
として、あるいはオペレーションシステムに組み込まれ
る形で実行されるファイル圧縮管理方式に関する。
【0002】
【従来の技術】パッケージソフトウェアの規模は肥大の
一途をたどり、記憶装置のコストパフォーマンスが飛躍
的に向上したとはいえ、記憶装置の容量的な制限によっ
て環境の構築を自由に行えないという現実が続いてい
る。このような現状にあって、記憶装置におけるファイ
ルの圧縮は有効な技術であり、この圧縮による記憶容量
の増大は恩恵をもたらす。
【0003】
【発明が解決しようとする課題】しかしながら、上記の
ように圧縮されたファイルは、使用時に展開処理を実行
する必要があり、このため、圧縮を行っていないファイ
ルを使用する場合に比べて、処理パフォーマンスの低下
が避けられないという課題があった。従って、この、圧
縮による記憶容量の増大の副作用である処理パフォーマ
ンスの低下さえなければさらに圧縮技術の有効性は増大
する。
【0004】この発明は前記課題を解決するものであ
り、使用頻度の低いファイルを圧縮することにより、副
作用である処理パフォーマンスの低下を押さえながら、
実容量以上の記憶容量でファイルを管理することができ
るファイル圧縮管理方式を得ることを目的とする。
【0005】
【課題を解決するための手段】前記目的達成のために、
請求項1の発明にかかるファイル圧縮管理方式は、運用
開始時にはファイル容量の多いものから順に圧縮し、運
用開始後はファイルに対するアクセスを監視し、アクセ
スがあるごとにこのアクセス履歴を記録し、前記ファイ
ルの前回圧縮時からの履歴日数が予め設定された履歴管
理日数を経過したか否かを調べ、経過していない場合に
は前記アクセス履歴の記録を継続させ、前記履歴日数が
履歴管理日数を経過した場合には履歴データに従ってフ
ァイルを再圧縮するようにしたものである。また、請求
項2の発明にかかるファイル圧縮管理方式は、前記アク
セス履歴の記録を、ファイルごとのアクセス回数および
このアクセス回数が多いものからの順位を一定順位まで
保持するアクセス履歴テーブルによって行うようにした
ものである。また、請求項3の発明にかかるファイル圧
縮管理方式は、前記アクセス履歴の記録を、短期アクセ
ス履歴テーブルに常に記録されるアクセス履歴の履歴デ
ータを、一定時間経過ごとに日次アクセス履歴テーブル
に転記することにより行うようにしたものである。ま
た、請求項4の発明にかかるファイル圧縮管理方式は、
前記ファイルの再圧縮を、前記日次アクセス履歴テーブ
ルの集計結果にもとづいて得られたアクセス履歴集計テ
ーブル外のファイルを容量の大きいものから順に圧縮
し、該アクセス履歴集計テーブル外のファイルをすべて
圧縮しても所定の圧縮条件を満たさない場合、アクセス
履歴集計テーブル内のファイルを前記順位の低いものか
ら前記圧縮条件を満たすまで圧縮することにより実行す
るようにしたものである。また、請求項5の発明にかか
るファイル圧縮管理方式は、前記日次アクセス履歴テー
ブルを所定の履歴管理日数分保持し、当日運用が開始さ
れた時点で、その履歴管理日数以前の日次アクセス履歴
管理テーブルを破棄するようにしたものである。また、
請求項6の発明にかかるファイル圧縮管理方式は、前記
圧縮条件を、記憶媒体のパーティションの使用領域に対
する割合、またはファイルの圧縮後の全体容量によって
設定するようにしたものである。
【0006】
【発明の実施の形態】以下、この発明の実施の一形態を
図について説明する。この発明は、コンピュータのオペ
レーテングシステム上で、常駐アプリケーションとして
動作するか、オペレーションシステムに組み込まれる形
で、履歴管理機能と、圧縮および再圧縮機能とを実現す
る。これらのうち、履歴管理機能は、ファイルのアクセ
ス履歴を管理/記録する機能であり、具体的には、アク
セス回数をカウントし、アクセス回数が多いものから順
に順位付けを行い、一定数これを保持する。この履歴管
理はテーブル化されて圧縮および再圧縮機能に於いて使
用される。一方、圧縮および再圧縮機能は、アクセス履
歴テーブル外のファイルから圧縮し、所定の圧縮条件を
満たすまで再圧縮する。この場合において、アクセス履
歴テーブル内のファイルは順位の低いファイルから圧縮
する。なお、前記圧縮条件は、ハードディスク等におけ
るパーティーションの使用領域に対する割合または圧縮
後の全体容量によって設定される。
【0007】そして、前記履歴管理においては、すべて
のファイルのアクセス履歴を記録することは、多くの記
憶容量を必要とするため、この発明の実効性を損なう。
よって、下記のアクセス履歴テーブルにアクセス履歴を
保持する。まず、このアクセス履歴テーブルは、アクセ
ス回数の順位,アクセスファイル識別データ,アクセス
回数をそれぞれ保持する。このアクセス履歴テーブルに
保持するファイルの数は有限で任意である。なお、この
発明ではアクセス履歴テーブルとして短期アクセス履歴
テーブルT1および日次圧縮テーブルT2の2種類をも
つが、テーブルの内容は同一である。これらのうち、図
2に示す日次アクセス履歴テーブルは、日毎のアクセス
回数などが記録され保存されている。この発明では、こ
の日次テーブルT2を設定された日数n分だけ、例えば
5日分だけ保持する。この日数を履歴管理日数と呼ぶ。
この履歴管理日数は、前回圧縮を行ってから、再圧縮を
行うまでのインターバルの日数でもある。
【0008】また、前記の短期アクセス履歴テーブルT
1には、図3(a)に示すように、常に一定時間ごとの
アクセス履歴が記録される。その一定の時間、例えば3
0分〜1時間程度が経過した時点で、図3(b)に示す
ように、短期アクセス履歴テーブルT1の履歴データを
日次アクセス履歴テーブルT2に転記する。このとき、
順位が低くなったファイルは、日次アクセス履歴テーブ
ルT2から脱落する。なお、この日次アクセス履歴テー
ブルT2は1日単位で保存され、履歴管理日数分保持さ
れる。このように、短期アクセス管理テーブルT1を設
け、日次アクセス管理テーブルT2に転記を行う方法を
採るのは、日次アクセス履歴テーブルT2が制限数一杯
まで登録された後も、新たなファイルをテーブルに追加
する必要があるためである。なお、前記転記後、短期ア
クセス履歴テーブルT1はクリアされ、新たなアクセス
の履歴の記録が開始され、さらに転記によって最大件数
分のレコードを日次アクセス履歴テーブルT2に登録し
てしまった以後も、アクセスが多くあったファイルを日
次アクセス履歴テーブルに新規に登録することができ
る。
【0009】従って、アクセス回数を正確に記録するた
めには、一般に、記憶装置中の既存ファイル数と同数の
レコードを持つテーブルが必要となるが、この方法を採
れば、より少ないレコード数のテーブルでアクセス回数
の履歴を保存することができる。また、前記のように、
日次アクセス履歴テーブルT2は、図4に示すように、
履歴管理日数n分保持する。この履歴管理日数nを5日
とした場合には、当日を含めて5日分のアクセス履歴管
理テーブルが保持される。なお、当日の運用が開始され
た時点で、5日前の日次アクセス履歴管理テーブルは破
棄される。
【0010】さらに、前記再圧縮処理は、前回圧縮を行
ってから履歴管理日数分運用が行われている場合、運用
終了時に再圧縮処理が行われる。この再圧縮処理では、
まず、図5に示すように、日次アクセス履歴テーブルT
2を集計し、アクセス履歴集計テーブルT3を作成し、
このアクセス履歴集計テーブルT3外のファイルを大き
いものから順に、前記圧縮条件を満たすまで圧縮する。
こうして、アクセス履歴集計テーブルT3外のファイル
をすべて圧縮しても条件を満たさない場合には、アクセ
ス履歴集計テーブルT3内のファイルを順位の低いもの
から条件を満たすまで圧縮する。
【0011】この再圧縮処理の詳細を図6のフローチャ
ートを参照しながら説明する。まず、アクセス履歴集計
テーブルT3外のファイル(アクセス頻度の低いファイ
ル)を容量の大きなものから順に圧縮し(ステップS
1)、続いて、前記圧縮条件を満たしているか否かをチ
ェックする(ステップS2)。この圧縮条件を満たして
いる場合は再圧縮を終了し、一方、満たしていない場合
は、アクセス履歴集計テーブルT3外のファイル(アク
セス頻度の低いファイル)をすべて圧縮したか否かをチ
ェックし(ステップS3)、すべて圧縮していない場合
には、ステップS1以下の処理を実行する(圧縮を行
う)。
【0012】一方、すべてを圧縮してしまった場合に
は、アクセス履歴集計テーブルT3内のファイル(アク
セス頻度の低いファイル)を順位の低いものから順に圧
縮する(ステップS4)。次に前記圧縮条件を満たして
いるか否かをチェックし(ステップS5)、その圧縮条
件を満たしている場合は、再圧縮を終了し、一方、満た
していない場合は、アクセス履歴集計テーブルT3内の
ファイル(アクセス頻度の低いファイル)をすべて圧縮
したか否かをチェックする(ステップS6)。すべて圧
縮してしまった場合には、圧縮条件を満たせなかった旨
を通知して(ステップS7)、終了する。一方、すべて
圧縮していない場合には、ステップS4の処理へもどっ
て、圧縮を行う。
【0013】このように、この発明は、前記のようなア
クセスの履歴管理とファイルの圧縮および再圧縮の処理
を行うことを中心として、図1のフローチャートに示す
手順にてファイルの圧縮管理を実行するものである。す
なわち、まず、運用開始時には、履歴データが存在しな
いので、ファイル容量の多いものから順に前記圧縮条件
を満たすまで圧縮する(圧縮ステップS11)。次に、
運用開始後は、システムに常駐し、システムのファイル
に対するアクセスを監視し、アクセスがある毎にこのア
クセスに履歴を記録する(アクセス履歴記録ステップS
12)。次に、ファイルの前回圧縮時から履歴日数が履
歴管理日数を経過したかどうかをチェックし、経過して
いない場合は運用を続け、アクセス履歴を記憶し続ける
(履歴日数判定ステップS13)。そして、前回圧縮時
から履歴管理日数が経過している場合に、履歴データに
従って再圧縮する(再圧縮ステップS14)。なお、こ
の場合における圧縮,アクセス履歴記録,履歴日数判定
および再圧縮の各処理は、図2乃至図5について詳述し
た方法および手順にて実行される。
【0014】
【発明の効果】以上のように、この発明によれば、運用
開始時にはファイル容量の多いものから順に圧縮し、運
用開始後はファイルに対するアクセスを監視し、アクセ
スがあるごとにこのアクセス履歴を記録し、前記ファイ
ルの前回圧縮時からの履歴日数が予め設定された履歴管
理日数を経過したか否かを調べ、経過していない場合に
は前記アクセス履歴の記録を継続させ、前記履歴日数が
履歴管理日数を経過した場合には履歴データに従って再
圧縮するようにしたので、日常の作業で統計的に使用頻
度の高いファイルは圧縮しないため、ファイルの展開に
要する作業時間を、全ファイルを圧縮する場合に比べて
大幅に減少でき、この結果として、処理パフォーマンス
の低下を防ぐことができるほか、使用頻度の低いファイ
ルの圧縮によって記憶装置の実容量以上の容量を使用で
きるという効果が得られる。
【図面の簡単な説明】
【図1】 この発明のファイル圧縮管理方式を実行する
手順を示すフローチャートである。
【図2】 この発明における日次アクセス履歴テーブル
を示す説明図である。
【図3】 この発明における短期アクセス履歴テーブル
の日次アクセス履歴テーブルへの転記方法を示す説明図
である。
【図4】 図2に示す日次アクセス履歴テーブルの管理
状態を示す説明図である。
【図5】 この発明におけるアクセス履歴集計テーブル
の内容を示す説明図である。
【図6】 この発明による再圧縮の処理手順を示すフロ
ーチャートである。
【符号の説明】
T1 短期アクセス履歴テーブル T2 日次アクセス履歴テーブル T3 アクセス履歴集計テーブル

Claims (6)

    【特許請求の範囲】
  1. 【請求項1】 運用開始時にはファイル容量の多いもの
    から順に圧縮する圧縮ステップと、 運用開始後はファイルに対するアクセスを監視し、アク
    セスがあるごとにこのアクセス履歴を記録するアクセス
    履歴記録ステップと、 前記ファイルの前回圧縮時からの履歴日数が予め設定さ
    れた履歴管理日数を経過したか否かを調べ、経過してい
    ない場合には前記アクセス履歴の記録を継続させる履歴
    日数判定ステップと、 前記履歴日数が履歴管理日数を経過した場合には履歴デ
    ータに従ってファイルを再圧縮する再圧縮ステップとを
    実行することを特徴とするファイル圧縮管理方式。
  2. 【請求項2】 前記アクセス履歴の記録が、ファイルご
    とのアクセス回数およびこのアクセス回数が多いものか
    らの順位を一定順位まで保持するアクセス履歴テーブル
    によってなされることを特徴とする請求項1に記載のフ
    ァイル圧縮管理方式。
  3. 【請求項3】 前記アクセス履歴の記録が、短期アクセ
    ス履歴テーブルに常に記録されるアクセス履歴の履歴デ
    ータを、一定時間経過ごとに日次アクセス履歴テーブル
    に転記することによりなされることを特徴とする請求項
    1に記載のファイル圧縮管理方式。
  4. 【請求項4】 前記ファイルの再圧縮が、前記日次アク
    セス履歴テーブルの集計結果にもとづいて得られたアク
    セス履歴集計テーブル外のファイルを容量の大きいもの
    から順に圧縮し、該アクセス履歴集計テーブル外のファ
    イルをすべて圧縮しても所定の圧縮条件を満たさない場
    合、アクセス履歴集計テーブル内のファイルを前記順位
    の低いものから前記圧縮条件を満たすまで圧縮すること
    により実行されることを特徴とする請求項3に記載のフ
    ァイル圧縮管理方式。
  5. 【請求項5】 前記日次アクセス履歴テーブルが所定の
    履歴管理日数分保持されて、当日運用が開始された時点
    で、その履歴管理日数以前の日次アクセス履歴管理テー
    ブルを破棄することを特徴とする請求項3に記載のファ
    イル圧縮管理方式。
  6. 【請求項6】 前記圧縮条件が、記憶媒体のパーティシ
    ョンの使用領域に対する割合、またはファイルの圧縮後
    の全体容量によって設定されていることを特徴とする請
    求項4に記載のファイル圧縮管理方式。
JP19781398A 1998-07-13 1998-07-13 ファイル圧縮管理方法 Expired - Fee Related JP3216606B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP19781398A JP3216606B2 (ja) 1998-07-13 1998-07-13 ファイル圧縮管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP19781398A JP3216606B2 (ja) 1998-07-13 1998-07-13 ファイル圧縮管理方法

Publications (2)

Publication Number Publication Date
JP2000029756A true JP2000029756A (ja) 2000-01-28
JP3216606B2 JP3216606B2 (ja) 2001-10-09

Family

ID=16380780

Family Applications (1)

Application Number Title Priority Date Filing Date
JP19781398A Expired - Fee Related JP3216606B2 (ja) 1998-07-13 1998-07-13 ファイル圧縮管理方法

Country Status (1)

Country Link
JP (1) JP3216606B2 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7257316B2 (en) 2001-03-07 2007-08-14 Nec Corporation Program recording device and method of recording program
CN100370752C (zh) * 2005-03-28 2008-02-20 华为技术有限公司 一种日志信息的存储方法
JP2008146267A (ja) * 2006-12-08 2008-06-26 Mitsubishi Electric Corp 発電プラントの運転履歴データ管理装置
JP2010182075A (ja) * 2009-02-05 2010-08-19 Nec Corp 情報処理システム、情報処理装置、データ格納方法およびプログラム
JP2012014236A (ja) * 2010-06-29 2012-01-19 Ntt Docomo Inc ファイル圧縮装置、方法、プログラム
US8526751B2 (en) 2001-08-24 2013-09-03 International Business Machines Corporation Managing image storage size
JP2014135699A (ja) * 2013-01-11 2014-07-24 Fujitsu Ltd ストレージ装置、およびデータ圧縮方法
CN103999061A (zh) * 2011-12-22 2014-08-20 国际商业机器公司 存储器件存取系统
JP2015141514A (ja) * 2014-01-28 2015-08-03 株式会社アイ・オー・データ機器 ファイル管理システム、ファイル管理方法およびファイル管理システム用のプログラム

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6757687B2 (en) * 2001-05-31 2004-06-29 Nokia Corporation Storage of data entries in digital devices and methods

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7257316B2 (en) 2001-03-07 2007-08-14 Nec Corporation Program recording device and method of recording program
US8526751B2 (en) 2001-08-24 2013-09-03 International Business Machines Corporation Managing image storage size
CN100370752C (zh) * 2005-03-28 2008-02-20 华为技术有限公司 一种日志信息的存储方法
JP2008146267A (ja) * 2006-12-08 2008-06-26 Mitsubishi Electric Corp 発電プラントの運転履歴データ管理装置
JP2010182075A (ja) * 2009-02-05 2010-08-19 Nec Corp 情報処理システム、情報処理装置、データ格納方法およびプログラム
JP2012014236A (ja) * 2010-06-29 2012-01-19 Ntt Docomo Inc ファイル圧縮装置、方法、プログラム
CN103999061A (zh) * 2011-12-22 2014-08-20 国际商业机器公司 存储器件存取系统
US9146933B2 (en) 2011-12-22 2015-09-29 International Business Machines Corporation Compressed storage access system with uncompressed frequent use data
DE112012005383B4 (de) 2011-12-22 2022-03-10 International Business Machines Corp. Speichereinheit-Zugriffssystem
JP2014135699A (ja) * 2013-01-11 2014-07-24 Fujitsu Ltd ストレージ装置、およびデータ圧縮方法
US9684665B2 (en) 2013-01-11 2017-06-20 Fujitsu Limited Storage apparatus and data compression method
JP2015141514A (ja) * 2014-01-28 2015-08-03 株式会社アイ・オー・データ機器 ファイル管理システム、ファイル管理方法およびファイル管理システム用のプログラム

Also Published As

Publication number Publication date
JP3216606B2 (ja) 2001-10-09

Similar Documents

Publication Publication Date Title
US20220004521A1 (en) Log file management
JP5087467B2 (ja) コンピュータストレージシステムにおいてデータ圧縮並びに整合性を管理する方法および装置
US11227635B2 (en) Recording device, readout device, recording method, recording program, readout method, readout program, and magnetic tape
US6449689B1 (en) System and method for efficiently storing compressed data on a hard disk drive
US8577844B2 (en) Systems and methods for performing storage operations using network attached storage
US10346364B2 (en) Efficient data storage utilization and recycling by gradual data degradation
US20110145494A1 (en) Virtual tape server and method for controlling tape mounting of the same
US20050165820A1 (en) Concurrent data recall in a hierarchical storage environment using plural queues
EP2997476A1 (en) Allocating data based on hardware faults
JP2000029756A (ja) ファイル圧縮管理方式
US20180052769A1 (en) Apparatus, system, and method for maintaining a context stack
JP2012133769A (ja) 順次バックアップ・デバイスから重複排除されたデータ・オブジェクトを復元するための、コンピュータ・プログラム、システム、および方法
US20030088747A1 (en) External storage device within a computer network
US20040153471A1 (en) Method and program for storing performance data, and system using the same
CN106980618A (zh) 基于MongoDB分布式集群架构的文件存储方法和系统
US6697813B1 (en) Data structures and methods for imaging computer readable media
WO2021181739A1 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
US11487430B2 (en) Reducing data using a plurality of compression operations in a virtual tape library
CN108197148A (zh) 一种文件清理方法、设备及计算机可读存储介质
JP2001125820A (ja) Webブラウザのキャッシュデータ管理装置
KR101469693B1 (ko) 로그 데이터 관리 방법 및 장치
US8972360B2 (en) Position invariant compression of files within a multi-level compression scheme
CN217985104U (zh) 一种网络终端运营维护及自动升级配置系统
CN117573703B (zh) 时序数据的通用检索方法、系统、设备及存储介质
WO2022168399A1 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20010703

LAPS Cancellation because of no payment of annual fees