JP2021052263A - データ圧縮装置およびデータ圧縮方法 - Google Patents

Abstract

【課題】データの欠落を生じさせずに、時系列のデータを効率的に圧縮することができるデータ圧縮装置を提供する。【解決手段】データ圧縮装置を、時刻データ圧縮部１と、統計データ圧縮部２と、データ格納部３とを備える構成とする。時刻データ圧縮部１は、時刻データを第１の圧縮方式で圧縮して第１の圧縮データとして出力する。統計データ圧縮部２は、時刻データと関連づけられて取得されたデータである統計データを、第１の圧縮方式とは異なる第２の圧縮方式で圧縮して第２の圧縮データとして出力する。データ格納部３は、第１の圧縮データと、第２の圧縮データを関連づけてデータベースに出力する。【選択図】 図１

Description

本発明は、データの圧縮技術に関するものであり、特に、時系列のデータの圧縮技術に関するものである。

情報システムの稼動状態等の履歴データを保存して解析等に用いる際に、例えば、一定時間ごとに稼動状態等の情報を取得し、時系列の履歴データとして保存するような場合に、保存されるデータ量は膨大な量となり得る。また、情報システムの構成の変更があった場合には、変更した状態に合わせて履歴データを保存し、解析時に必要なデータを容易に抽出できることが要求され得る。そのため、情報システムの稼動状態等の履歴データを保存する際に、保存するデータ量を抑制しつつ、解析等を行う際に必要なデータを容易に抽出できる形でデータが保存されていることが望ましい。

抽出しやすい形式で履歴データを保存する方法としては、例えば、特許文献１のように履歴データをデータベースとして保存する方法が開示されている。特許文献１では、時刻データと、情報システムの稼動状態等を示す統計データによる履歴データと、情報処理装置の情報とを関連づけたリレーショナルデータベースとして履歴データが保存されている。

また、時系列で保存されるデータ量を抑制する技術としては、例えば、特許文献２のようなデータ圧縮技術が開示されている。特許文献２は、時系列のデータを圧縮して保存するデータ圧縮装置に関するものである。特許文献２のデータ圧縮装置は、時系列の数値シーケンスデータの圧縮を行う際に、圧縮率があらかじめ設定された範囲になるように圧縮条件を変更することで、データ量を抑制している。

特開２００９−１９３１５３号公報 特開２０１２−１０３１９号公報

しかしながら、特許文献１および特許文献２の技術は次のような点で十分ではない。特許文献１のデータベースでは、情報システムの構成の変更と、各装置の稼動状態等の履歴データをデータの検索および抽出が容易な形式で保存することができる。しかし、特許文献１では、収集したデータを互いに関連づけてそのまま保存しているため、装置構成が複雑な場合や長期間のデータを保存する場合には、データ量が増大する恐れがある。また、特許文献２のデータ圧縮方法では、圧縮の際にデータの一部が間引かれているため、圧縮したデータの復元を行った際に、完全には元のデータには戻らないことがある。そのため、特許文献２では、保存した履歴データを解析に使用する際に、必要なデータが欠落している恐れがある。よって、特許文献１および特許文献２の技術は、解析等に必要な履歴データを時系列で保存しつつ、データ量を抑制する技術としては十分ではない。

本発明は、上記の課題を解決するため、データベースに履歴データとして保存される時系列のデータの圧縮率を向上することができるデータ圧縮装置を提供することを目的としている。

上記の課題を解決するため、本発明のデータ圧縮装置は、時刻データ圧縮手段と、統計データ圧縮手段と、データ格納手段を備えている。時刻データ圧縮手段は、時刻データを第１の圧縮方式で圧縮して第１の圧縮データとして出力する。統計データ圧縮手段は、時刻データと関連づけられて取得されたデータである統計データを、第１の圧縮方式とは異なる第２の圧縮方式で圧縮して第２の圧縮データとして出力する。データ格納手段は、第１の圧縮データと、第２の圧縮データを関連づけてデータベースに出力する。

本発明のデータ圧縮方法は、時刻データと、前記時刻データと関連づけられたデータとを統計データとして取得する。本発明のデータ圧縮方法は、時刻データを第１の圧縮方式で圧縮して第１の圧縮データとして出力する。本発明のデータ圧縮方法は、統計データを、第１の圧縮方式とは異なる第２の圧縮方式で圧縮して第２の圧縮データとして出力する。本発明のデータ圧縮方法は、第１の圧縮データと、第２の圧縮データを関連づけてデータベースに出力する。

本発明によると、データベースに保存される時系列のデータの圧縮率を向上することができる。

本発明の第１の実施形態の構成の概要を示す図である。 本発明の第２の実施形態の構成の概要を示す図である。 本発明の第２の実施形態の構成管理部の構成を示す図である。 本発明の第２の実施形態のデータ取得部の構成を示す図である。 本発明の第２の実施形態のデータ圧縮解凍部の構成を示す図である。 本発明の第２の実施形態の履歴情報データベースの構成の例を示す図である。 本発明の第２の実施形態の動作を示すフローチャートである。 本発明の第２の実施形態の統計データの例を示す図である。 本発明の第２の実施形態のデータ圧縮解凍部の他の構成の例を示す図である。 本発明の第２の実施形態の履歴情報管理システムの他の構成の例を示す図である。

（第１の実施形態）
本発明の第１の実施形態について図を参照して詳細に説明する。図１は、本実施形態のデータ圧縮装置の構成の概要を示したものである。本実施形態のデータ圧縮装置は、時刻データ圧縮部１と、統計データ圧縮部２と、データ格納部３とを備えている。時刻データ圧縮部１は、時刻データを第１の圧縮方式で圧縮して第１の圧縮データとして出力する。統計データ圧縮部２は、時刻データと関連づけられて取得されたデータである統計データを、第１の圧縮方式とは異なる第２の圧縮方式で圧縮して第２の圧縮データとして出力する。データ格納部３は、第１の圧縮データと、第２の圧縮データを関連づけてデータベースに出力する。

本実施形態のデータ圧縮装置は、時刻データと統計データをそれぞれ異なる圧縮方法で圧縮しデータベースに出力している。本実施形態のデータ圧縮装置は、時刻データと統計データそれぞれに応じた圧縮方法を用いることで、時刻データと統計データそれぞれの特性に適した圧縮方法でデータを圧縮することができる。そのため、本実施形態のデータ圧縮装置は、データベースに保存される時系列のデータの圧縮率を向上することができる。

（第２の実施形態）
本発明の第２の実施形態について図を参照して詳細に説明する。図２は、本実施形態の履歴情報管理システムの構成の概要を示した図である。本実施形態の履歴情報管理システムは、構成管理部１０と、データ取得部２０と、データ圧縮解凍部３０と、レポート作成部４０と、構成情報保存部５０と、履歴情報保存部６０を備えている。本実施形態の履歴情報管理システムは、例えば、一定時間ごとにサーバ７０から稼動状態等の情報を取得し、取得した情報をリレーショナルデータベースに時系列の履歴データとして保存するシステムである。

構成管理部１０の構成について説明する。図３は、本実施形態の構成管理部１０の構成を示した図である。構成管理部１０は、構成情報管理部１１と、データテーブル更新部１２を備えている。

構成情報管理部１１は、管理対象の情報システムの構成に関する情報を構成情報として収集する機能を有する。情報システムの構成に関する情報とは、サーバ７０の識別子（ＩＤ）、サーバ７０の構成、サーバ７０を構成する各ユニットの性能およびネットワーク構成などのことをいう。

データテーブル更新部１２は、構成情報管理部１１が収集した構成情報を基に、構成情報保存部５０に保存されている構成情報データベースのデータを更新する。構成情報データベースは、履歴データを収拾する対象となる情報システムの構成に関する情報が保存されているデータベースのことをいう。

データ取得部２０の構成について説明する。図４は、本実施形態のデータ取得部２０の構成を示した図である。データ取得部２０は、システム情報収集監視部２１と、履歴データ更新部２２を備えている。

システム情報収集監視部２１は、履歴データを保存する際、監視対象の情報システムの状態に関する情報を時刻データと関連づけて履歴データとして収集する。システム情報収集監視部２１は、サーバ７０の負荷率、エラー発生等のイベント発生数および構成の変更回数等を示すデータである統計データを、情報システムの状態に関する情報とし、時刻データと関連づけてサーバ７０から取得する。したがって、履歴データは、サーバ７０の状態を示す統計データと、統計データが取得された時刻を示す時刻データが関連づけられたデータである。

履歴データ更新部２２は、システム情報収集監視部２１が取得した履歴データをデータ圧縮解凍部３０に送る。

構成管理部１０およびデータ取得部２０における各処理は、それぞれ、コンピュータ上でコンピュータプログラムを実行することで行われる。また、構成管理部１０およびデータ取得部２０における各処理は、同一のコンピュータ上で行われてもよい。

データ圧縮解凍部３０の構成について説明する。図５は、本実施形態のデータ圧縮解凍部３０の構成を示した図である。データ圧縮解凍部３０は、データ圧縮部３１と、データ解凍部３２と、データキャッシュ部３３を備えている。

データ圧縮部３１の構成について説明する。データ圧縮部３１は、データ格納部３４と、時刻データ圧縮部３５と、統計データ圧縮部３６をさらに備えている。

データ格納部３４は、圧縮された時刻データおよび統計データを履歴情報保存部６０の履歴情報データベースに書き込むことで格納する。また、データ格納部３４は、圧縮が不可であったとき、時刻データおよび統計データを圧縮せずに履歴情報保存部６０の履歴情報データベースに格納する。時刻データおよび統計データの圧縮方法と、圧縮したデータの履歴情報データベースへの格納方法については後で説明する。

時刻データ圧縮部３５は、履歴データのうち時刻データの圧縮を行う。時刻データ圧縮部３５は、Ｄｏｕｂｌｅ−ｄｅｌｔａ圧縮方式よって時刻データの圧縮を行う。時刻データの圧縮方法については後で説明する。

統計データ圧縮部３６は、履歴データのうち統計データの圧縮を行う。統計データ圧縮部３６は、ＸＯＲ圧縮方式によって統計データの圧縮を行う。ここで、ＸＯＲ圧縮方式とは、浮動小数点形式の２個の統計データのＸＯＲ演算を行って圧縮を行うことをいう。統計データの圧縮方法については後で説明する。

データ解凍部３２は、履歴情報保存部６０の履歴情報データベースから履歴データを読み出し、圧縮された履歴データを復号して解凍する。データ解凍部３２は、解凍した履歴データをレポート作成部４０に出力する。また、データ解凍部３２は、読み出した履歴データが圧縮されていない場合は、解凍処理を行わずにレポート作成部４０に出力する。

データ圧縮部３１およびデータ解凍部３２は、ＦＰＧＡ（Field Programmable Gate Array）等の半導体装置を用いて構成されている。データ圧縮部３１およびデータ解凍部３２における各処理は、ＣＰＵ（Central Processing Unit）上でコンピュータプログラムを実行することで行われてもよい。また、各処理をＣＰＵ上でコンピュータプログラムを実行することで行う構成とする場合には、データ圧縮解凍部３０における各処理は、構成管理部１０およびデータ取得部２０の一方または両方と同一のコンピュータ上で行われてもよい。

データキャッシュ部３３は、履歴データ更新部２２から入力される履歴データを一時的に保存する。データキャッシュ部３３は、例えば、ＳＲＡＭ（Static Random Access Memory）等の半導体記憶装置を用いて構成されている。データキャッシュ部３３には、フラッシュメモリ等の不揮発性の半導体記憶装置を用いてもよい。

レポート作成部４０は、履歴データの解析時等に履歴データを出力する。レポート作成部４０は、データ圧縮解凍部３０を介して履歴情報データベースから履歴データの検索および取得を行って、履歴データのレポートを出力する。レポート作成部４０は、履歴データのレポートを情報システムの管理サーバ等に出力する。レポート作成部４０における各処理は、コンピュータ上でコンピュータプログラムを実行することで行われる。レポート作成部４０における各処理は、構成管理部１０およびデータ取得部２０の一方または両方と同一のコンピュータ上で行われてもよい。また、レポート作成部４０は、データ圧縮解凍部３０と同一の装置内に形成されていてもよい。

構成情報保存部５０は、情報システムの構成に関する情報を構成情報データベースとして保存している。構成情報データベースは、サーバ７０の構成、性能およびネットワーク構成等の情報によって構成されている。

履歴情報保存部６０は、情報システムの履歴データを履歴情報データベースとして保存している。図６は、本実施形態の履歴情報データベースの構成を模式的に示した図である。

履歴情報データベースは、スタースキーマと呼ばれるテーブル構成のリレーショナルデータベースとして構成されている。履歴情報データベースは、ファクトテーブルとして使用されるデータテーブルと、ファクトテーブルに紐付けられた複数の次元テーブルで構成されている。

ファクトテーブルは、サーバ７０の状態を示す統計情報である統計データと、そのデータを取得した日時を示す時刻データと、統計データ等と他のテーブルと関連付けるＩＤのデータで構成されている。ＩＤは、ファクトテーブル上のデータと紐付く他の次元テーブル上のデータのインデックスとして使用される。ＩＤは、ファクトテーブル上のデータテーブルに登録される統計情報の履歴データがどのようなデータかを示すキーとなる。

ファクトテーブルに登録される統計データには、負荷情報、イベントの発生情報、構成変更回数などのサーバの統計情報のデータが格納される。また、ファクトテーブルに登録される統計データには、サーバ数などの統計情報が格納されてもよい。

構成情報保存部５０および履歴情報保存部６０は、それぞれ、ハードディスクドライブや不揮発性の半導体記憶装置等の記憶装置またはそれらの記憶装置の組み合わせによって構成されている。また、構成情報保存部５０および履歴情報保存部６０は、同一の装置内に形成されていてもよい。

サーバ７０は、情報システムの用途に応じた各処理を行う情報処理装置である。履歴データの収集の対象となるサーバ７０は、単数であってもよい。

本実施形態の履歴情報管理システムの動作について説明する。図７は、本実施形態の履歴情報管理システムにおいて、サーバ７０の時系列の統計データを履歴データとして履歴情報データベースに格納する際の動作フローを示す図である。

始めに構成管理部１０が情報システムの構成についての情報を収集する動作について説明する。構成管理部１０の構成情報管理部１１は、履歴データを取得する対象の情報システムの構成の情報を収集する。構成管理部１０の構成情報管理部１１は、例えば、情報システムの立ち上げ時や構成の変化を検知したときに構成の情報を収集する。構成情報管理部１１は、情報システムを構成している各サーバ７０のＩＤと性能、ネットワーク構成等の情報を構成情報として収集する。情報システムの構成の情報を収集すると、構成情報管理部１１は、収集した構成情報を構成情報保存部５０の構成情報データテーブルに書き込む。

構成情報データテーブルのデータが更新されると、構成管理部１０のデータテーブル更新部１２は、構成情報データテーブルの情報を基に、履歴情報保存部６０の履歴情報データテーブルの次元テーブルのデータの更新または追加を行う。

次にデータ取得部２０およびデータ圧縮解凍部３０が、情報システムの履歴データの収集および履歴情報データベースへの履歴データの格納を行う際の動作について説明する。データ取得部２０のシステム情報収集監視部２１は、各サーバ７０から履歴データを収集する。システム情報収集監視部２１は、例えば、あらかじめ設定された時間ごとに各サーバ７０から履歴データを収集する。システム情報収集監視部２１は、履歴データとして、サーバ７０の負荷率、エラー発生等のイベント発生数およびサーバ７０の構成の変更回数等を示すデータである統計データを時刻データと関連づけて収集する。統計データとして、サーバ７０の総数やサーバ７０の分類ごとのサーバ７０の数が収集されてもよい。履歴データを収集すると、システム情報収集監視部２１は、履歴データを履歴データ更新部２２に出力する。

履歴データが入力されると、履歴データ更新部２２は、履歴データをデータ圧縮解凍部３０のデータ圧縮部３１に送る。

データ圧縮部３１に履歴データが入力されると、データ圧縮部３１のデータ格納部３４は、入力された履歴データをデータキャッシュ部３３に一時的に保存する（ステップＳ１０１）。

データキャッシュ部３３に履歴データを保存すると、データ格納部３４は、データキャッシュ部３３に一時的に保存した履歴データの圧縮可否を判断して、履歴情報保存部６０の履歴情報データベースに格納する動作を開始する。

データ格納部３４は、データキャッシュ部３３に保存されている履歴データが２個以上であるかを確認する。データキャッシュ部３３に保存されている格納対象の履歴データが１個のみのとき（ステップＳ１０２でＮｏ）、データ格納部３４は、履歴データの時刻データおよび統計データを圧縮しないで非圧縮のデータとして履歴情報保存部６０の履歴情報データベースに格納する（ステップＳ１１１）。履歴データを履歴情報データベースに格納すると、データ格納部３４は、履歴データを新たに受け取るまで待機する。

データキャッシュ部３３に保存されている履歴データが２個以上のとき（ステップＳ１０２でＹｅｓ）、データ格納部３４は、データキャッシュ部３３から読み出した履歴データを時刻データ圧縮部３５および統計データ圧縮部３６に送る。

時刻データを受け取ると、時刻データ圧縮部３５は、時刻データの圧縮を開始する。時刻データ圧縮部３５は、履歴データにおける時系列の時刻データが示す時刻がほぼ等間隔であることを利用してｄｏｕｂｌｅ−ｄｅｌｔａ圧縮方式によって、時刻データを符号化する。

時刻データを圧縮する際に、始めに時刻データ圧縮部３５は、時刻の間隔Ｄを算出する（ステップＳ１０３）。時刻の間隔Ｄは、以下の式によって算出される。
Ｄ＝（ｔ_ｎ−ｔ_ｎ−１）−（ｔ_ｎ−１−ｔ_ｎ−２）
上記の式のｔ_ｎは、ｎ番目の時刻データを示し、ｔ_ｎ−１およびｔ_ｎ−２は、ｎ−１番目およびｎ−２番目の時刻データをそれぞれ示している。圧縮可否および時刻データの格納方法は、間隔Ｄの値を基に決定される。間隔Ｄが所定の区間内のとき（ステップＳ１０４でＹｅｓ）、時刻データ圧縮部３５は、時刻データの圧縮を行う（ステップＳ１０５）。以下では、圧縮可能と判断する間隔Ｄの範囲を示す所定の間隔が−２０４７から２０４８として設定されている場合を例に説明する。

Ｄの値が０のとき、１ｂｉｔ目に「０」が書き込まれる。この場合、単一ビットの容量のみとなる。Ｄの値が［−６３，６４］の区間内の場合、「１０」の後にＤ（７ｂｉｔｓ）の値が格納される。Ｄの値が［−２５５，２５６］の区間内の場合、「１１０」の後にＤ（９ｂｉｔｓ）の値が格納される。また、Ｄの値が［−２０４７，２０４８］の区間内の場合、「１１１０」の後にＤ（１２ｂｉｔｓ）の値が格納される。履歴データの時刻データが全く同じ間隔で推移した場合には、Ｄの値は０で続くため、１ｂｉｔの容量での圧縮が可能となる。

時刻データの圧縮を行うと、統計データ圧縮部３６は、統計データの圧縮を行う（ステップＳ１０６）。統計データ圧縮部３６は、履歴データの統計データを以下のようにＸＯＲ圧縮方式よって符号化する。以下では、下記の時刻１、時刻２および時刻３のようなｆｌｏａｔ型のデータの場合を例に説明する。

時刻１、時刻２および時刻３が、
時刻１ ９．０（２進数表現は、０１０００００１０００１００００００００００００００００００００）、
時刻２ １３．０（２進数表現は、０１０００００１０１０１００００００００００００００００００００）、
時刻３ ７．０（２進数表現は、０１００００００１１１０００００００００００００００００００００）
であったとする。

このとき、９．０＾１３．０（９．０と１３．０のＸＯＲ）は、「０００００００００１００００００００００００００００００００００」、１３．０＾７．０（１３．０と１７．０のＸＯＲ）は、「００００００００１０１１００００００００００００００００００００」となる。

例えば、９．０＾１３．０は、先頭の９個の０の並びや、１の後に続く全ての０が符号化可能であるため、９．０＾１３．０の有意なビットは１のみとなる。同様に、１３．０＾７．０の有意なビットは１０１１の部分のみとなる。統計データはサーバの種類に依存するため、似た値で推移することが多い。また、近い２個の浮動小数点数のＸＯＲは、多くのｂｉｔが０になりやすい。そのため、統計データをＸＯＲ圧縮方式で符号化することで圧縮効率が高くなる。

上記の性質を利用し、格納する統計データは、次のように圧縮される。前の時刻の統計データの値とのＸＯＲが０、すなわち、前の値と同じであるとき、０が書き込まれる。前の時刻の統計データの値とのＸＯＲが０でないとき、１を書き込んだ後に、有意なビットについて次の３個の情報を書き込む。先頭の０の数を４ｂｉｔｓ表現で書き込こめる場合は、先頭の０の数を４ｂｉｔｓ表現で書き込む。次に有意なビットの長さを３ｂｉｔｓ表現で書き込める場合は意なビットの長さを３ｂｉｔｓ表現で書き込む。その次に、有意なビットの値を書き込む。有意なビットの値自体の書込みは、７ｂｉｔｓの長さまでで行われる。

時刻データおよび統計データが圧縮可能であるとき（ステップＳ１０７でＹｅｓ）、データ格納部３４は、履歴情報データベースに書き込みを行うことで圧縮データを格納する（ステップＳ１０８）。

統計データのカラムの１ｂｉｔ目は、圧縮データかどうかの区別に使用される。１ｂｉｔの値は、「１」の場合は、圧縮ＯＮ、「０」の場合は、圧縮ＯＦＦを示す。１ｂｉｔの値は、符号を示すため、圧縮を行った場合は、履歴データの統計データは浮動小数点数のマイナス値として保存される。圧縮を行わない場合は、統計データは通常の浮動小数点数のデータとして格納される。

図８は、カラムに格納される統計データの例を示したものである。図８の例において、先頭のビットが「０」のときは、非圧縮のデータであることを示し、先頭のビットが「１」のときは、圧縮データであることを示している。

統計データのカラムの２ｂｉｔ目以降には、以下のように履歴データの時刻データと統計データが格納される。

１個目の統計データの符号化データが、ＸＯＲ圧縮で生成されて格納される。次に、２個目以降の格納データの数が格納される。２個目以降の格納データの数の格納には、４ｂｉｔ用いられる。その次に、２個目の時刻データの符号化データが、Ｄｏｕｂｌｅ−ｄｅｌｔａ圧縮で生成されて格納される。さらにその次には、２個目の統計データの符号化データが、ＸＯＲ圧縮で生成されて格納される。３個目以降の履歴データも２個目と同様に格納される。２個目以降は、最小で２ｂｉｔのため、最大１３個の履歴データを格納することができる。

履歴データを履歴情報データベースに格納すると、データ格納部３４は、データキャッシュ部３３に履歴データが保存されていないかを確認する。データキャッシュ部３３に履歴データがないとき（ステップＳ１０９でＮｏ）、データ格納部３４は、履歴データを新たに受け取るまで待機する。データキャッシュ部３３に履歴データが残っているとき（ステップＳ１０９でＹｅｓ）、データ格納部３４は、時刻データ圧縮部３５および統計データ圧縮部３６に履歴データを送る。時刻データ圧縮部３５および統計データ圧縮部３６に履歴データが送られると、ステップＳ１０３の時刻の間隔Ｄからの動作が繰り返される。

間隔Ｄが所定の間隔外のとき（ステップＳ１０４でＮｏ）、データ格納部３４は、履歴データの時刻データおよび統計データを圧縮しないで非圧縮のデータとして履歴情報保存部６０の履歴情報データベースに保存する（ステップＳ１１０）。履歴データを履歴情報データベースに格納すると、データ格納部３４は、データキャッシュ部３３に履歴データが保存されていないかを確認する。データキャッシュ部３３に履歴データがないとき（ステップＳ１０９でＮｏ）、データ格納部３４は、履歴データを新たに受け取るまで待機する。データキャッシュ部３３に履歴データが残っているとき（ステップＳ１０９でＹｅｓ）、データ格納部３４は、時刻データ圧縮部３５および統計データ圧縮部３６に履歴データを送る。時刻データ圧縮部３５および統計データ圧縮部３６に履歴データが送られると、ステップＳ１０３の時刻の間隔Ｄからの動作が繰り返される。

次に履歴情報データベースからのデータを読み出す際の動作について説明する。レポート作成部４０は、情報システムの管理システム等から履歴データの要求を受け取ると、データ圧縮解凍部３０に履歴データを要求する。履歴データの要求を受け取ると、データ圧縮解凍部３０のデータ解凍部３２は、履歴情報データベースを検索し要求の対象となっている履歴データを読み出す。

履歴データを読み出すと、履歴データを読み出すと、データ解凍部３２は、統計データの先頭のｂｉｔを参照しデータの圧縮の有無を判断する。データが圧縮されているときデータ解凍部３２は、圧縮されている時刻データおよび統計データを解凍する。データが圧縮されていないときデータ解凍部３２は、時刻データおよび統計データをそのまま出力用のデータに加える。履歴データの読み出しが終わると、データ解凍部３２は、履歴情報データベースから読み出して解凍した履歴データと非圧縮の履歴データをレポート作成部４０に出力する。

履歴データを受けとると、レポート作成部４０は、あらかじめ設定された形式で、履歴データを情報システムの管理システム等に送る。レポート作成部４０は、あらかじめ設定された時間ごとに、データ解凍部３２を介して履歴情報データベースから履歴データ読み出して、情報システムの管理システム等に履歴データを出力してもよい。

本実施形態の履歴情報管理システムは、履歴データのうち時刻データをＤｏｕｂｌｅ−ｄｅｌｔａ圧縮方式、統計データをＸＯＲ圧縮方式で圧縮して、履歴情報データベースに保存している。時系列の履歴データにおいて時刻データでは、前後のデータの間隔がほぼ等間隔であるため、Ｄｏｕｂｌｅ−ｄｅｌｔａ圧縮方式を用いることで圧縮率が高くなる。また、統計データでは、２個のデータのＸＯＲで０のｂｉｔが多くなるため、ＸＯＲ圧縮方式を用いることで圧縮率が高くなる。そのため、本実施形態の履歴情報管理システムは、時刻データと統計データの圧縮を行う際に、それぞれ適した圧縮方式を用いて圧縮を行うことで、データベースに保存される時系列のデータの圧縮率を向上することができる。

第２の実施形態の履歴情報管理システムは、次のような構成とすることもできる。図１０は、履歴情報管理システムの他の構成の例を示した図である。図１０の履歴情報管理システムは、サーバ７０と、データ取得部９１と、データ圧縮装置９２備えている。サーバ７０は、複数台、備えられている。サーバ７０は、１台であってもよい。

図１０の履歴情報管理システムは、図２に示す履歴情報管理システムのうち、構成管理部１０、レポート作成部４０、構成情報保存部５０および履歴情報保存部６０をシステムの外部の装置として備えていてよい。これらの外部の装置とは、ネットワークを介して通信可能に接続されていてもよい。

データ取得部９１は、データ取得部２０に相当する。データ取得部９１は、サーバ７０からサーバ７０の状態を示す情報を統計データとして、統計データが取得された時刻に対応する時刻データと関連づけて取得する。

データ圧縮装置９２は、第１の実施形態のデータ圧縮装置および第２の実施形態のデータ圧縮解凍部３０に相当する。

図１０の履歴情報管理システムにおいて、データ圧縮装置９２は、データ取得部９１がサーバ７０から取得した時刻データおよび統計データを圧縮したデータをデータベースに出力する。このような構成とすることで、図１０のような履歴情報管理システムにおいても、データベースに履歴データとして保存される時系列のデータの圧縮率を向上することができる。

第１の実施形態のデータ圧縮装置、第２の実施形態のデータ圧縮解凍部３０および図１０のデータ圧縮装置９２における各処理は、コンピュータプログラムをコンピュータで実行することによって行われてもよい。図９は、データ圧縮解凍部３０における各処理を行うコンピュータプログラムを実行するコンピュータ８０の構成の例を示したものである。コンピュータ８０は、ＣＰＵ８１と、メモリ８２と、記憶装置８３と、Ｉ／Ｆ（Interface）部８４を備えている。また、第１の実施形態のデータ圧縮装置および図１０のデータ圧縮装置９２も同様の構成を備えている。

ＣＰＵ８１は、記憶装置８３から各処理を行うコンピュータプログラムを読み出して実行する。メモリ８２は、ＤＲＡＭ（Dynamic Random Access Memory）等によって構成され、ＣＰＵ８１が実行するコンピュータプログラムや処理中のデータが一時保存される。記憶装置８３は、ＣＰＵ８１が実行するコンピュータプログラムを保存している。記憶装置８３は、例えば、不揮発性の半導体記憶装置によって構成されている。記憶装置８３には、ハードディスクドライブ等の他の記憶装置が用いられてもよい。Ｉ／Ｆ部８４は、履歴情報管理システムの他のユニットや管理システム等との間でデータの入出力を行うインタフェースである。コンピュータ８０は、通信ネットワークを介して他の情報処理装置と通信を行う通信モジュールをさらに備えていてもよい。

また、各処理に行うコンピュータプログラムは、記録媒体に格納して頒布することもできる。記録媒体としては、例えば、データ記録用磁気テープや、ハードディスクなどの磁気ディスクを用いることができる。また、記録媒体としては、ＣＤ-ＲＯＭ（Compact Disc Read Only Memory）等の光ディスクを用いることもできる。不揮発性の半導体記憶装置を記録媒体として用いてもよい。

第１の実施形態および第２の実施形態に示したデータ圧縮技術は、工場等における各装置の稼動状態の履歴等の時系列データをＩｏＴ（Internet of Things）技術や専用の通信ネットワークを介し収集し、保存する際に用いることもできる。また、第１の実施形態および第２の実施形態に示したデータ圧縮技術は、装置やシステムの稼動状態だけでなく、時系列の観測データを収集して保存する際に用いることもできる。

１ 時刻データ圧縮部
２ 統計データ圧縮部
３ データ格納部
１０ 構成管理部
１１ 構成情報管理部
１２ データテーブル更新部
２０ データ取得部
２１ システム情報収集監視部
２２ 履歴データ更新部
３０ データ圧縮解凍部
３１ データ圧縮部
３２ データ解凍部
３３ データキャッシュ部
３４ データ格納部
３５ 時刻データ圧縮部
３６ 統計データ圧縮部
４０ レポート作成部
５０ 構成情報保存部
６０ 履歴情報保存部
７０ サーバ
８０ コンピュータ
８１ ＣＰＵ
８２ メモリ
８３ 記憶装置
８４ Ｉ／Ｆ部
９１ データ取得部
９２ データ圧縮装置

Claims (10)

1. 時刻データを第１の圧縮方式で圧縮して第１の圧縮データとして出力する時刻データ圧縮手段と、
   前記時刻データと関連づけられて取得されたデータである統計データを、前記第１の圧縮方式とは異なる第２の圧縮方式で圧縮して第２の圧縮データとして出力する統計データ圧縮手段と、
   前記第１の圧縮データと、前記第２の圧縮データを関連づけてデータベースに出力するデータ格納手段と
   を備えることを特徴とするデータ圧縮装置。
2. 前記時刻データ圧縮手段は、前記時刻データをＤｏｕｂｌｅ−ｄｅｌｔａ圧縮方式で圧縮し、前記統計データ圧縮手段は、前記統計データを浮動小数点形式の２個の前記統計データのＸＯＲ演算を行って圧縮することを特徴とする請求項１に記載のデータ圧縮装置。
3. 前記データ格納手段は、前記第２の圧縮データを保存する領域に圧縮の有無を示す情報を格納したデータを出力することを特徴とする請求項２に記載のデータ圧縮装置。
4. 前記データベースから前記第１の圧縮データおよび前記第２の圧縮データを読み出し、前記第２の圧縮データを保存する領域に圧縮を示す情報が格納されているとき、前記第１の圧縮データおよび前記第２の圧縮データを解凍するデータ解凍手段をさらに備えることを特徴とする請求項３に記載のデータ圧縮装置。
5. 前記データ格納手段は、前記時刻データと前記統計データの圧縮が不可であったとき、前記時刻データと前記統計データを圧縮せずに前記データベースに出力することを特徴とする請求項１から４いずれかに記載のデータ圧縮装置。
6. 少なくとも１台のサーバと、
   前記サーバから前記サーバの状態を示す情報を統計データとして、前記統計データが取得された時刻に対応する時刻データと関連づけて取得するデータ取得手段と、
   請求項１から５いずれかに記載のデータ圧縮装置と
   を備え、
   前記データ圧縮装置は、前記データ取得手段が取得した前記時刻データおよび前記統計データを圧縮して、前記第１の圧縮データおよび前記第２の圧縮データを前記データベースに出力することを特徴とする履歴情報管理システム。
7. 時刻データと、前記時刻データと関連づけられたデータとを統計データとして取得し、
   前記時刻データを第１の圧縮方式で圧縮して第１の圧縮データとして出力し、
   前記統計データを、前記第１の圧縮方式とは異なる第２の圧縮方式で圧縮して第２の圧縮データとして出力し、
   前記第１の圧縮データと、前記第２の圧縮データを関連づけてデータベースに出力することを特徴とするデータ圧縮方法。
8. 前記時刻データをＤｏｕｂｌｅ−ｄｅｌｔａ圧縮方式で圧縮し、
   前記統計データを浮動小数点形式の２個の前記統計データのＸＯＲ演算を行って圧縮することを特徴とする請求項７に記載のデータ圧縮方法。
9. 前記第２の圧縮データを保存する領域に圧縮の有無を示す情報を格納したデータを出力することを特徴とする請求項７または８に記載のデータ圧縮方法。
10. 時刻データを第１の圧縮方式で圧縮して第１の圧縮データとして出力する処理と、
    前記時刻データと関連づけられて取得されたデータである統計データを、前記第１の圧縮方式とは異なる第２の圧縮方式で圧縮して第２の圧縮データとして出力する処理と、
    前記第１の圧縮データと、前記第２の圧縮データを関連づけてデータベースに出力する処理と
    をコンピュータに実行させることを特徴とするデータ圧縮プログラム。

Images