JP2018173915A - Backup system, storage device, data transfer method and program - Google Patents
Backup system, storage device, data transfer method and program Download PDFInfo
- Publication number
- JP2018173915A JP2018173915A JP2017073036A JP2017073036A JP2018173915A JP 2018173915 A JP2018173915 A JP 2018173915A JP 2017073036 A JP2017073036 A JP 2017073036A JP 2017073036 A JP2017073036 A JP 2017073036A JP 2018173915 A JP2018173915 A JP 2018173915A
- Authority
- JP
- Japan
- Prior art keywords
- data
- cloud
- storage
- compression
- master
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、バックアップシステム、ストレージ装置、データ転送方法及びプログラムに関する。 The present invention relates to a backup system, a storage device, a data transfer method, and a program.
ホスト計算機とストレージ装置を含んで構成される業務システムにおいて、ディザスタリカバリシステムが構築されることがある。ディザスタリカバリシステムでは、メインサイトのデータをリモートサイトに転送することでバックアップを行い、メインサイトの被災時等では、当該リモートサイトからデータを取得して業務を遂行する。例えば、特許文献1には、マスタサーバの障害発生時、他のスレーブサーバが中断時間を可能な限り短く、かつ、適切にマスタサーバのサービスを引き継ぐ、と記載されている。
In a business system that includes a host computer and a storage device, a disaster recovery system may be constructed. In the disaster recovery system, backup is performed by transferring data at the main site to the remote site, and in the event of a disaster at the main site, the data is acquired from the remote site and the work is performed. For example,
また、装置間のデータ授受において、データ転送量及びデータ格納量を抑制する目的で、データを圧縮した後にデータを転送する又は圧縮することが行われる。例えば、特許文献2には、データを共有メモリに転送する前に、データをローカルに圧縮する。メモリは圧縮されたデータを、このデータが圧縮されていない場合の配置と同じ配置で格納する、と記載されている。また、特許文献3には、ある圧縮レベルで圧縮した結果、所望の圧縮率が得られない場合には、圧縮レベルを上げ、そのレベルでの圧縮パラメータを使用して再圧縮することにより、より高い圧縮率を得ることができる、と記載されている。 In data exchange between devices, data is transferred or compressed after the data is compressed for the purpose of suppressing the data transfer amount and the data storage amount. For example, in Patent Document 2, before data is transferred to the shared memory, the data is compressed locally. It is described that the memory stores the compressed data in the same arrangement as when the data is not compressed. Further, in Patent Document 3, when a desired compression rate cannot be obtained as a result of compression at a certain compression level, the compression level is increased and recompression is performed by using a compression parameter at that level. It is described that a high compression ratio can be obtained.
一方、近年では、ネットワーク技術等の発達により、安価なクラウドサーバやクラウドストレージが利用可能な環境にある。そこで、ディザスタリカバリシステムでは、このような外部のサーバ・ストレージ(クラウドサーバ、クラウドストレージ)を利用し、データのバックアップの運用や災害発生時の復旧(ディザスタリカバリの運用)がなされることもある。 On the other hand, in recent years, due to the development of network technology and the like, there is an environment where inexpensive cloud servers and cloud storage can be used. Therefore, in a disaster recovery system, such external server storage (cloud server, cloud storage) may be used to perform data backup operation or recovery in the event of a disaster (disaster recovery operation).
なお、上記先行技術文献の各開示を、本書に引用をもって繰り込むものとする。以下の分析は、本発明者らによってなされたものである。 Each disclosure of the above prior art document is incorporated herein by reference. The following analysis was made by the present inventors.
上述のように、メインサイトにおけるストレージ装置のデータを、外部のクラウドサーバやクラウドストレージに転送し、メインサイトが被災した場合に業務の継続を可能とする災害対策運用が存在する。このような災害対策運用では、業務データを外部サイトに転送するため、データ転送量を抑え、ネットワーク負荷を削減することが要望される。また、使用するクラウドストレージの容量を削減することも必要となる。 As described above, there is a disaster countermeasure operation in which data in the storage device at the main site is transferred to an external cloud server or cloud storage, and operations can be continued when the main site is damaged. In such disaster countermeasure operation, since business data is transferred to an external site, it is desired to reduce the data transfer amount and reduce the network load. It is also necessary to reduce the capacity of the cloud storage used.
上述のように、装置間のデータ転送を抑制するためにデータを圧縮することが行われるが、当該方式を利用できるのはデータを送受信する装置間で同じ圧縮方式に対応していることが前提である。つまり、災害対策運用のデータ転送量を抑制するため、メインサイトから圧縮データをネットワークで接続されたリモートサイトのストレージに送り、リモートサイトにて圧縮データを展開することが考えられる。しかし、このような運用は、メインサイトとリモートサイトで同じ機能を持つストレージ装置が必要であり、同じ機能を有さないこともあるクラウドストレージには適用できない。 As described above, data is compressed in order to suppress data transfer between devices, but this method can be used on the premise that the same compression method is supported between devices that transmit and receive data. It is. In other words, in order to reduce the amount of data transferred for disaster countermeasure operation, it is conceivable that compressed data is sent from the main site to storage at a remote site connected via a network, and the compressed data is expanded at the remote site. However, such an operation is not applicable to cloud storage that requires storage devices having the same function at the main site and the remote site and may not have the same function.
本発明は、メインサイトのデータをリモートサイトにバックアップするバックアップシステムにおいて、メインサイトとリモートサイト間にて送受信されるデータ容量を低減することに寄与する、バックアップシステム、データ転送方法及びプログラムを提供することを目的とする。 The present invention provides a backup system, a data transfer method, and a program that contribute to reducing the data capacity transmitted and received between the main site and the remote site in a backup system that backs up data at the main site to the remote site. Objective.
本発明の第1の視点によれば、データを複数の圧縮方式のうちいずれかで圧縮し、前記圧縮されたデータをマスタボリュームに格納する、マスタストレージと、前記マスタストレージとは異なるサイトに設置され、各々がバックアップボリュームを備える、複数のクラウドストレージと、を含み、前記マスタストレージは、前記圧縮されたデータを前記複数のクラウドストレージのうちいずれかのクラウドストレージに送信し、前記クラウドストレージは、前記マスタストレージから取得したデータを前記バックアップボリュームに格納する、バックアップシステムが提供される。 According to a first aspect of the present invention, a master storage that compresses data by any one of a plurality of compression methods and stores the compressed data in a master volume, and is installed at a site different from the master storage A plurality of cloud storages each having a backup volume, the master storage sends the compressed data to any one of the plurality of cloud storages, the cloud storage, A backup system is provided that stores data acquired from the master storage in the backup volume.
本発明の第2の視点によれば、複数のクラウドストレージと接続され、前記複数のクラウドストレージとは異なるサイトに設置されたストレージ装置であって、データを複数の圧縮方式のうちいずれかで圧縮する圧縮部と、前記圧縮されたデータを前記複数のクラウドストレージのうちいずれかのクラウドストレージに送信する、データ出力部と、を備える、ストレージ装置が提供される。 According to the second aspect of the present invention, the storage device is connected to a plurality of cloud storages and installed at a site different from the plurality of cloud storages, and the data is compressed by any one of a plurality of compression methods. And a data output unit that transmits the compressed data to any one of the plurality of cloud storages.
本発明の第3の視点によれば、データを複数の圧縮方式のうちいずれかで圧縮し、前記圧縮されたデータをマスタボリュームに格納する、マスタストレージと、前記マスタストレージとは異なるサイトに設置され、各々がバックアップボリュームを備える、複数のクラウドストレージと、を含むバックアップシステムにおいて、前記圧縮されたデータを前記複数のクラウドストレージのうちいずれかのクラウドストレージに送信するステップと、前記マスタストレージから取得したデータを前記バックアップボリュームに格納する、ステップと、を含む、データ転送方法が提供される。 According to a third aspect of the present invention, the master storage that compresses data by any one of a plurality of compression methods and stores the compressed data in a master volume, and is installed at a site different from the master storage A plurality of cloud storages each having a backup volume, and transmitting the compressed data to any one of the plurality of cloud storages, and obtaining from the master storage Storing the processed data in the backup volume.
本発明の第4の視点によれば、複数のクラウドストレージと接続され、前記複数のクラウドストレージとは異なるサイトに設置されたストレージ装置に搭載されたコンピュータに、データを複数の圧縮方式のうちいずれかで圧縮する処理と、前記圧縮されたデータを前記複数のクラウドストレージのうちいずれかのクラウドストレージに送信する処理と、を実行させるプログラムが提供される。
なお、このプログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。記憶媒体は、半導体メモリ、ハードディスク、磁気記録媒体、光記録媒体等の非トランジェント(non-transient)なものとすることができる。本発明は、コンピュータプログラム製品として具現することも可能である。
According to the fourth aspect of the present invention, any of a plurality of compression methods can be used to store data in a computer connected to a plurality of cloud storages and installed in a storage device installed at a site different from the plurality of cloud storages. And a program for executing the process of transmitting the compressed data to any one of the plurality of cloud storages.
This program can be recorded on a computer-readable storage medium. The storage medium may be non-transient such as a semiconductor memory, a hard disk, a magnetic recording medium, an optical recording medium, or the like. The present invention can also be embodied as a computer program product.
本発明の各視点によれば、メインサイトのデータをリモートサイトにバックアップするバックアップシステムにおいて、メインサイトとリモートサイト間にて送受信されるデータ容量を低減することに寄与する、バックアップシステム、データ転送方法及びプログラムが、提供される。 According to each aspect of the present invention, in a backup system that backs up data at a main site to a remote site, the backup system, a data transfer method, and a program that contribute to reducing the data capacity transmitted and received between the main site and the remote site Is provided.
初めに、一実施形態の概要について説明する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、この概要の記載はなんらの限定を意図するものではない。また、各図におけるブロック間の接続線は、双方向及び単方向の双方を含む。一方向矢印については、主たる信号(データ)の流れを模式的に示すものであり、双方向性を排除するものではない。 First, an outline of one embodiment will be described. Note that the reference numerals of the drawings attached to the outline are attached to the respective elements for convenience as an example for facilitating understanding, and the description of the outline is not intended to be any limitation. In addition, the connection lines between the blocks in each drawing include both bidirectional and unidirectional directions. The unidirectional arrow schematically shows the main signal (data) flow and does not exclude bidirectionality.
一実施形態に係るバックアップシステムは、マスタストレージ101と、複数のクラウドストレージ102と、を含む(図1参照)。マスタストレージ101は、データを複数の圧縮方式のうちいずれかで圧縮し、圧縮されたデータをマスタボリュームに格納する。複数のクラウドストレージ102は、マスタストレージ101とは異なるサイトに設置され、各々がバックアップボリュームを備える。マスタストレージ101は、圧縮されたデータを複数のクラウドストレージ102のうちいずれかのクラウドストレージ102に送信する。クラウドストレージ102は、マスタストレージ101から取得したデータをバックアップボリュームに格納する。
The backup system according to an embodiment includes a
上述のように、一実施形態に係るバックアップシステムのマスタストレージ101は、異なる圧縮方式によりデータを圧縮する。その際、マスタストレージ101は、必要に応じて圧縮率の高い圧縮方式(例えば、ポストプロセス方式の圧縮方式)を用いてデータを圧縮してクラウドストレージ102に送信することで、マスタストレージ(メインサイト)からクラウドストレージ(リモートサイト)に送信されるデータ容量を削減することができる。
As described above, the
以下に具体的な実施の形態について、図面を参照してさらに詳しく説明する。なお、各実施形態において同一構成要素には同一の符号を付し、その説明を省略する。 Hereinafter, specific embodiments will be described in more detail with reference to the drawings. In addition, in each embodiment, the same code | symbol is attached | subjected to the same component and the description is abbreviate | omitted.
[第1の実施形態]
第1の実施形態について、図面を用いてより詳細に説明する。
[First Embodiment]
The first embodiment will be described in more detail with reference to the drawings.
図2は、第1の実施形態に係るバックアップシステムの概略構成の一例を示す図である。図2を参照すると、バックアップシステムにはメインサイトとリモートサイトが含まれる。図2に示すバックアップシステムは、災害対策運用のためにメインサイトのマスタストレージのデータを、ネットワークで接続されたリモートサイトのクラウドストレージに転送し、クラウドサーバから読み書き可能とするシステムである。 FIG. 2 is a diagram illustrating an example of a schematic configuration of the backup system according to the first embodiment. Referring to FIG. 2, the backup system includes a main site and a remote site. The backup system shown in FIG. 2 is a system that transfers master storage data at a main site to a cloud storage at a remote site connected via a network so that it can be read and written from a cloud server for disaster countermeasure operation.
図2に示すバックアップシステムでは、メインサイトにマスタストレージ20が配置され、遠隔地のリモートサイトにクラウドストレージ40−1、40−2が配置される。当該バックアップシステムでは、マスタストレージ20上のマスタボリュームに記憶されたデータをクラウドストレージ40に複製(コピー)することで、例えば、メインサイトが被災した際のデータロストを防止する。 In the backup system shown in FIG. 2, the master storage 20 is arranged at the main site, and the cloud storages 40-1 and 40-2 are arranged at the remote sites at remote locations. In the backup system, the data stored in the master volume on the master storage 20 is copied (copied) to the cloud storage 40 to prevent data loss when the main site is damaged, for example.
メインサイトには、メインサーバ10と、メインサーバ10とネットワークにより接続されたマスタストレージ20と、が含まれる。 The main site includes a main server 10 and a master storage 20 connected to the main server 10 via a network.
メインサーバ10は、ホスト端末(図示せず)等からの要求に応じてマスタストレージ20に記憶されたデータにアクセスし、ホスト端末にサービスを提供する装置である。 The main server 10 is a device that accesses data stored in the master storage 20 in response to a request from a host terminal (not shown) and provides services to the host terminal.
マスタストレージ20は、磁気ディスク(HDD;Hard Disk Drive)や半導体ディスク(SSD;Solid State Drive)の集合から仮想的な記憶領域であるプールを構成し、プールから複数の論理ディスクを切り出し、メインサーバ10から読み書き可能とするストレージ装置である。 The master storage 20 forms a pool that is a virtual storage area from a set of magnetic disks (HDD; Hard Disk Drive) and semiconductor disks (SSD: Solid State Drive), cuts out a plurality of logical disks from the pool, 10 is a storage device that can be read from and written to.
リモートサイト(メインサイトとは異なるサイト)には、複数のクラウドサーバ30−1、30−2と、これらのクラウドサーバとネットワークにより接続された複数のクラウドストレージ40−1、40−2と、が含まれる。なお、クラウドサーバ30−1はクラウドストレージ40−1にアクセス可能に構成されており、クラウドサーバ30−2はクラウドストレージ40−2にアクセス可能に構成されている。 The remote site (site different from the main site) includes a plurality of cloud servers 30-1 and 30-2 and a plurality of cloud storages 40-1 and 40-2 connected to these cloud servers via a network. It is. The cloud server 30-1 is configured to be accessible to the cloud storage 40-1, and the cloud server 30-2 is configured to be accessible to the cloud storage 40-2.
また、図2には2組のクラウドサーバとクラウドストレージが示されているが、リモートサイトに配置されるクラウドサーバ等の数は2に限定されない。2以上のクラウドサーバ等がリモートサイトに設置されていればよい。さらに、クラウドサーバ等の各装置は、同じリモートサイトに設置されている必要もない。 2 shows two sets of cloud servers and cloud storages, the number of cloud servers and the like arranged at the remote site is not limited to two. It is sufficient that two or more cloud servers or the like are installed at the remote site. Further, each device such as a cloud server does not need to be installed at the same remote site.
以降の説明において、クラウドサーバ30−1、30−2を区別する特段の理由が無い場合には、単に「クラウドサーバ30」と表記する。他の構成についても同様に、ハイフン(−)の前に記載された数字により当該構成を代表して表記する。 In the following description, when there is no particular reason for distinguishing between the cloud servers 30-1 and 30-2, it is simply expressed as “cloud server 30”. Similarly, other configurations are represented by the numbers described before the hyphen (-) as a representative.
メインサイトのマスタストレージ20には、メインサーバ10からアクセス(読み書き)可能なマスタボリューム21と、コントローラ22と、テーブル情報を記憶する記憶媒体と、が含まれる。なお、図2では、テーブル情報として圧縮管理テーブル23を図示している。
The master storage 20 at the main site includes a
コントローラ22は、マスタストレージ20の全体を制御するモジュール(手段)である。コントローラ22は、マスタボリューム21に対するアクセス制御を行う。また、コントローラ22は、マスタストレージ20に内蔵された通信インターフェイスであるNIC(Network Interface Card)を制御し、外部装置との間の相互通信を実現する。
The
コントローラ22には、第1の圧縮部201と、第2の圧縮部202と、データ出力部203の3つの処理モジュールが含まれる。
The
第1の圧縮部201は、種々存在する既存のデータ圧縮技術のうち、データ量の削減効果が低いが圧縮処理のスピードが高速なインライン方式の圧縮を行う手段である。第1の圧縮部201は、メインサーバ10から書き込まれる一定の単位(ブロック)のデータを、マスタボリューム21に書き込む際に圧縮して格納する、ディスク内圧縮手段である。
The
第2の圧縮部202は、データ量の削減効果が大きいが圧縮処理のスピードが遅いポストプロセス方式の圧縮を行う手段である。第2の圧縮部202は、第1の圧縮部201で圧縮されたデータであって、複数のディスク(論理ボリューム)間のブロックの集合からデータをさらに圧縮する、ディスク間圧縮手段である。このように、第2の圧縮部202が採用する圧縮方式は、第1の圧縮部201により圧縮された複数のデータをさらに圧縮(再圧縮)する方式である。なお、第1の圧縮部201及び第2の圧縮部202による圧縮アルゴリズムは任意のアルゴリズムを使用することができる。例えば、LZ法やzlib法等を使用することができる。
The second compression unit 202 is a unit that performs post-process compression that has a large data amount reduction effect but has a slow compression processing speed. The second compression unit 202 is data compressed by the
マスタストレージ20では、メインサーバ10から取得したデータが圧縮可能な場合には、上記2つの圧縮方式のいずれか一方又は両方を使用する。なお、データの特性(例えば、サイズ等)によってはデータの圧縮ができない場合がある。このような場合には、コントローラ22が非圧縮のデータをそのままマスタボリューム21に書き込むことになる。なお、以降の説明において、第1の圧縮部201による圧縮方式を圧縮方式1と、第2の圧縮部202による圧縮方式を圧縮方式2とそれぞれ表記する。
In the master storage 20, when the data acquired from the main server 10 can be compressed, either one or both of the two compression methods are used. Note that data compression may not be possible depending on data characteristics (for example, size). In such a case, the
このように、第1の圧縮部201は、圧縮方式1によりデータを圧縮する。つまり、メインサイトのインライン圧縮方式では、短期間に書き込まれた同一ボリューム内の複数ブロックの集合を圧縮対象として圧縮する。また、第2の圧縮部202は、複数のディスクにまたがる圧縮方式1のデータから圧縮方式2へデータを圧縮する。つまり、ポストプロセス圧縮方式では、複数ボリュームにまたがるブロックの集合を圧縮対象とし、インライン方式よりもさらに圧縮し、圧縮後は元の圧縮データを削除することで、ローカルストレージ(マスタボリューム21)のデータ容量を削減する。
As described above, the
データ出力部203は、第1の圧縮部201、第2の圧縮部202により圧縮されたデータ又は圧縮されていないデータ(非圧縮データ)をクラウドストレージ40に、非同期にて送信する手段である。データ出力部203は、マスタボリューム21からデータを読み出して、当該データをバックアップデータとしてクラウドストレージ40のバックアップボリューム41に格納する。その際、データ出力部203は、圧縮管理テーブル23に格納された情報に従って、マスタボリューム21に格納されたデータ(圧縮データ、非圧縮データ)を複数のクラウドストレージ40に振り分けて出力する。
The data output unit 203 is means for asynchronously transmitting the data compressed by the
また、データ出力部203は、バックアップデータの所在に関する情報を全てのクラウドストレージ40に送信する。バックアップデータの所在に関する情報には、マスタストレージ20がデータを圧縮した際の圧縮方式(非圧縮も含む)に関する情報と、送信された圧縮データ(非圧縮データも含む)のアドレスに関する情報と、送信された圧縮データの格納先に関する情報と、が含まれる。 In addition, the data output unit 203 transmits information regarding the location of the backup data to all the cloud storages 40. The information on the location of the backup data includes information on the compression method (including uncompressed) when the master storage 20 compresses the data, information on the address of the transmitted compressed data (including uncompressed data), and transmission And information on the storage location of the compressed data.
圧縮管理テーブル23は、マスタボリューム21に格納されたデータの圧縮状況を示すテーブル情報である。圧縮管理テーブル23は、マスタボリューム21のマッピング情報を管理し、各データの圧縮状況とデータの転送先を記録する。
The compression management table 23 is table information indicating the compression status of data stored in the
図3は、圧縮管理テーブルの一例を示す図である。マスタボリューム21の領域は、所定のブロックを単位として分割され、圧縮管理テーブル23においても当該ブロックを単位としてデータが管理される。図3を参照すると、アドレスフィールドは、マスタボリューム21を所定のブロック単位に分割したアドレス情報を示す。
FIG. 3 is a diagram illustrating an example of the compression management table. The area of the
コントローラ22は、メインサーバ10から取得したデータ(オリジナルデータ)を、オリジナルデータのまま書き込む(非圧縮データを書き込む)、又は、圧縮したデータを書き込む。さらに、コントローラ22は、圧縮方式1及び圧縮方式2を使い分けてデータを圧縮する。その際、コントローラ22(第1の圧縮部201、第2の圧縮部202)は、マスタボリューム21に書き込んだデータの圧縮状況(非圧縮、圧縮方式1、圧縮方式2)を圧縮管理テーブル23の対応する圧縮状況フィールドに書き込む。
The
また、コントローラ22は、データの圧縮状況を圧縮管理テーブル23に書き込む際、当該データの出力先(バックアップデータの転送先)となるクラウドストレージ40の識別情報を各データの対応する転送先フィールドに書き込む。
Further, when the
なお、図3では、クラウドストレージ40の識別子として図2に示す符号を用いているが、実際には各クラウドストレージ40のIP(Internet Protocol)アドレス等を用いることもできる。 In FIG. 3, the code shown in FIG. 2 is used as the identifier of the cloud storage 40. However, the IP (Internet Protocol) address or the like of each cloud storage 40 may actually be used.
第1の実施形態では、コントローラ22は、非圧縮データ及び圧縮方式1に係るデータは、クラウドストレージ40−1に転送されるように情報を書き込む。
In the first embodiment, the
一方、コントローラ22は、圧縮方式2に係るデータに関し、クラウドストレージ40−1又は40−2のいずれか一方に転送されるように情報を書き込む。例えば、図3を参照すると、1行目及び2行目の非圧縮データ及び圧縮方式1に係るデータは、クラウドストレージ40−1に転送されることが予定されるが、3行目及び4行目の圧縮方式2に係るデータは、クラウドストレージ40−1、40−2のいずれに転送されるか不明である。
On the other hand, the
つまり、非圧縮データや圧縮方式1に係るデータの場合、当該データのバックアップ先は1つのクラウドストレージ40に固定されているが、圧縮方式2に係るデータの場合には当該データの転送先候補は複数となる。圧縮方式2による圧縮データは、複数のディスクに関連付けされたデータとなるため(複数の記憶媒体に跨がったデータを用いるため)、転送先を任意に決めることができないためである。
That is, in the case of non-compressed data or data related to the
図2に説明を戻すと、クラウドサーバ30は、メインサーバ10に対応するリモートサイト側の装置である。 Returning to FIG. 2, the cloud server 30 is a device on the remote site side corresponding to the main server 10.
メインサイトが被災した場合等に、クラウドサーバ30はメインサーバ10に替わりメインサーバ10が提供していたサービスをホスト端末(図示せず)に提供することになる。なお、ホスト端末は、クラウドサーバ30−1及び30−2のいずれにアクセスしてもメインサーバ10が提供していたサービスと同等のサービス提供を受けることができる。 When the main site is damaged, the cloud server 30 provides the host terminal (not shown) with the service provided by the main server 10 instead of the main server 10. Note that the host terminal can receive service provision equivalent to the service provided by the main server 10 regardless of which of the cloud servers 30-1 and 30-2 is accessed.
クラウドサーバ30は、クラウドストレージ40からデータ(マスタストレージ20のバックアップデータ)を取得し、当該取得したデータを用いてサービスの提供等を行う。 The cloud server 30 acquires data (backup data of the master storage 20) from the cloud storage 40, and provides a service using the acquired data.
クラウドサーバ30には、コントローラ31が含まれる。コントローラ31は、クラウドサーバ30の全体を制御するモジュール(手段)である。コントローラ31は、クラウドサーバ30に内蔵された通信インターフェイスであるNIC(Network Interface Card)を制御し、外部装置との間の相互通信を実現する。 The cloud server 30 includes a controller 31. The controller 31 is a module (means) that controls the entire cloud server 30. The controller 31 controls a NIC (Network Interface Card) that is a communication interface built in the cloud server 30 to realize mutual communication with an external device.
コントローラ31には、リモート圧縮展開部301と、リモートアクセス部302と、が含まれる。
The controller 31 includes a remote compression / decompression unit 301 and a
リモート圧縮展開部301は、圧縮データを展開してクラウドサーバ30からクラウドストレージ40のボリュームに格納されたデータの読み書きを可能とする手段である。 The remote compression / decompression unit 301 is a unit that decompresses the compressed data and enables reading / writing of data stored in the volume of the cloud storage 40 from the cloud server 30.
具体的には、リモート圧縮展開部301は、クラウドストレージ40に格納された圧縮データを解凍し、オリジナルデータを取得する。あるいは、リモート圧縮展開部301は、クラウドサーバ30から取得したオリジナルデータを圧縮する。圧縮されたオリジナルデータは、リモートアクセス部302によりバックアップボリューム41に書き込まれる。
Specifically, the remote compression / decompression unit 301 decompresses the compressed data stored in the cloud storage 40 and acquires original data. Alternatively, the remote compression / decompression unit 301 compresses the original data acquired from the cloud server 30. The compressed original data is written to the
リモートアクセス部302は、リモート圧縮展開部301からの要求、又は、他のクラウドサーバ30に内蔵されたリモートアクセス部302からの要求に応じて、クラウドストレージ40に格納されたデータにアクセスする手段である。リモートアクセス部302は、自装置(クラウドサーバ30)に対応するクラウドストレージ40には必要なデータが存在しない場合、当該必要なデータを保有する他のクラウドサーバ30に対応するクラウドストレージ40に対してデータ出力(データ取得)を要求し、必要なデータを取得する。例えば、クラウドサーバ30−1がホスト端末からクラウドストレージ40−1に格納されていないデータを要求された場合には、当該データを格納するクラウドストレージ(例えば、クラウドストレージ40−2)に対応するクラウドサーバ30−2に当該データの取得を要求する。
The
なお、クラウドサーバ30−1とクラウドサーバ30−2は同一の構成とすることができる。また、クラウドサーバ30には、データを格納する記憶媒体等が含まれるが図2ではこれらの図示を省略している。 The cloud server 30-1 and the cloud server 30-2 can have the same configuration. The cloud server 30 includes a storage medium for storing data and the like, but these are not shown in FIG.
クラウドストレージ40は、マスタストレージ20のバックアップデータを保持する装置である。 The cloud storage 40 is a device that holds backup data of the master storage 20.
クラウドストレージ40には、バックアップボリューム41と、コントローラ42と、テーブル情報を記憶する記憶媒体と、が含まれる。なお、図2では、テーブル情報としてアドレス管理テーブル43と格納先管理テーブル44を図示している。
The cloud storage 40 includes a
バックアップボリューム41は、マスタボリューム21のバックアップデータを保持する。
The
コントローラ42は、クラウドストレージ40の全体を制御するモジュール(手段)である。コントローラ42は、クラウドストレージ40に内蔵された通信インターフェイスであるNIC(Network Interface Card)を制御し、外部装置との間の相互通信を実現する。コントローラ42には、アクセス制御部401、テーブル管理部402と、が含まれる。
The
アクセス制御部401は、マスタストレージ20やクラウドサーバ30からの要求を処理する手段である。具体的には、アクセス制御部401は、マスタストレージ20からバックアップデータを取得した場合には、当該データを自装置のバックアップボリューム41に格納する。その際、アクセス制御部401は、アドレス管理テーブル43を更新する。
The access control unit 401 is a means for processing requests from the master storage 20 and the cloud server 30. Specifically, when the access control unit 401 acquires backup data from the master storage 20, the access control unit 401 stores the data in the
図4は、アドレス管理テーブル43の一例を示す図である。上述のように、マスタストレージ20からデータが送信される。当該データには、マスタボリューム21におけるアドレス情報が含まれるので、当該マスタボリューム21内のアドレス(マスタデータアドレス)は、バックアップボリューム41のデータ格納先アドレスと対応づけられてアドレス管理テーブル43により管理される。アクセス制御部401は、アドレス管理テーブル43を参照することで、アクセスの対象となるバックアップデータがいずれのアドレスに格納されているか知ることができる。
FIG. 4 is a diagram illustrating an example of the address management table 43. As described above, data is transmitted from the master storage 20. Since the data includes address information in the
なお、図4(a)は、クラウドストレージ40−1内のアドレス管理テーブル43−1の一例を示し、図4(b)はクラウドストレージ40−2内のアドレス管理テーブル43−2の一例を示す。 4A shows an example of the address management table 43-1 in the cloud storage 40-1, and FIG. 4B shows an example of the address management table 43-2 in the cloud storage 40-2. .
また、アクセス制御部401は、自装置に対応するクラウドサーバ30からのアクセス要求(データの書き込み、読み出し)を処理する。例えば、アクセス制御部401は、読み出すバックアップデータのアドレス情報(即ち、マスタデータアドレス)により指定されたデータをバックアップボリューム41から読み出し、クラウドサーバ30に出力する。
Further, the access control unit 401 processes an access request (data write / read) from the cloud server 30 corresponding to the own device. For example, the access control unit 401 reads the data specified by the address information (that is, the master data address) of the backup data to be read from the
テーブル管理部402は、マスタストレージ20からバックアップデータの所在に関する情報を取得し、当該取得した情報により格納先管理テーブル44を更新する手段である。 The table management unit 402 is means for acquiring information related to the location of backup data from the master storage 20 and updating the storage location management table 44 with the acquired information.
格納先管理テーブル44は、バックアップデータのアドレス(マスタデータアドレス)と、該当データの圧縮状況と、該当データの格納場所と、を管理するテーブル情報である。 The storage location management table 44 is table information for managing the address of the backup data (master data address), the compression status of the relevant data, and the storage location of the relevant data.
図5は、格納先管理テーブル44の一例を示す図である。図5を参照すると、圧縮状況フィールドには、各データ(ブロック)の圧縮状況(非圧縮、圧縮方式1、圧縮方式2)が格納される。
FIG. 5 is a diagram illustrating an example of the storage location management table 44. Referring to FIG. 5, the compression status field stores the compression status (non-compression,
格納先フィールドは、各データ(ブロック)の格納先を示す。例えば、図5を参照すると、マスタボリューム21のアドレス「100」に格納されていたデータ(当該アドレスに対応するバックアップデータ)は、非圧縮でクラウドストレージ40−1に格納されていることを示す。 The storage destination field indicates the storage destination of each data (block). For example, referring to FIG. 5, data stored at the address “100” of the master volume 21 (backup data corresponding to the address) is stored in the cloud storage 40-1 without being compressed.
対して、アドレス「102」に格納されていたデータは、圧縮方式2により圧縮され、当該圧縮データはクラウドストレージ40−2に格納されていることを示す。 On the other hand, the data stored at the address “102” is compressed by the compression method 2 and indicates that the compressed data is stored in the cloud storage 40-2.
なお、上述のように、マスタストレージ20から全てのクラウドストレージ40に同じバックアップデータの所在に関する情報が送信されるため、各クラウドストレージ40に構築される格納先管理テーブル44の内容は同じとなる。 As described above, since the information regarding the location of the same backup data is transmitted from the master storage 20 to all the cloud storages 40, the contents of the storage location management table 44 constructed in each cloud storage 40 are the same.
続いて、図面を参照しつつ、第1の実施形態を構成する各装置の動作を説明する。 Subsequently, the operation of each device constituting the first embodiment will be described with reference to the drawings.
図6は、第1の圧縮部201の動作の一例を示すフローチャートである。
FIG. 6 is a flowchart illustrating an example of the operation of the
第1の圧縮部201は、メインサーバ10から書き込みデータを受け取った際に動作する。第1の圧縮部201は、オリジナルデータ(圧縮前のデータ)をマスタボリューム21の所定領域(所定のボリューム)に書き込む(ステップS01)。
The
その後、第1の圧縮部201は、ステップS01にて書き込んだ記憶媒体内のブロック集合から圧縮する箇所を特定する(ステップS02)。つまり、第1の圧縮部201は、データを書き込んだ記憶媒体を構成する複数のブロックのうち、ステップS01にてデータが書き込まれたブロックを特定する。
After that, the
その後、第1の圧縮部201は、特定したブロックにおけるデータを圧縮すると共に、圧縮管理テーブル23を更新する(ステップS03)。第1の圧縮部201は、オリジナルデータを受け取ったタイミング(インライン)にて、当該データを圧縮し、マスタボリューム21の所定ブロックに格納する。
Thereafter, the
図7は、第2の圧縮部202の動作の一例を示すフローチャートである。 FIG. 7 is a flowchart illustrating an example of the operation of the second compression unit 202.
第2の圧縮部202は、定期的に動作して圧縮方式2による圧縮データを作成する。 The second compression unit 202 periodically operates to create compressed data by the compression method 2.
第2の圧縮部202は、第1の圧縮部201により圧縮されたデータ(圧縮方式1によるデータ)について、複数のボリュームに記憶されたデータ間の関連性を照合する(ステップS11)。 The second compression unit 202 collates the relevance between the data stored in the plurality of volumes for the data compressed by the first compression unit 201 (data by the compression method 1) (step S11).
当該照合により、圧縮方式1の圧縮率よりもさらに圧縮率を高めることができるデータが存在するか否かが判定される。例えば、圧縮方式1により圧縮されたデータ(ブロック)間で共通する領域(同じバイナリデータを持つ領域)が所定の割合以上存在するか否かにより、上記判定を実施する。
Based on the collation, it is determined whether there is data that can further increase the compression rate of the
所定の関連性を有するデータ(圧縮方式1による複数のデータ)が発見されると、第2の圧縮部202は、当該複数のデータのアドレスを特定する(ステップS12)。 When data having a predetermined relationship (a plurality of data by the compression method 1) is found, the second compression unit 202 specifies addresses of the plurality of data (step S12).
第2の圧縮部202は、特定された複数のデータに対して圧縮方式2を適用しデータを圧縮すると共に、圧縮管理テーブル23を更新する。その際、第2の圧縮部202は、圧縮管理テーブルの出力先フィールドには、クラウドストレージ40−1又は40−2のいずれかを設定する。第2の圧縮部202は、再圧縮前の圧縮データ(圧縮方式1による複数のデータ)を削除する(ステップS13)。つまり、第2の圧縮部202は、圧縮方式1による複数のデータをさらに圧縮し、データ量を削減できると判断した場合には、当該複数のデータをさらに再圧縮する。
The second compression unit 202 compresses the data by applying the compression method 2 to the plurality of identified data, and updates the compression management table 23. At that time, the second compression unit 202 sets either the cloud storage 40-1 or 40-2 in the output destination field of the compression management table. The second compression unit 202 deletes the compressed data before re-compression (a plurality of data by the compression method 1) (step S13). That is, if the second compression unit 202 further compresses the plurality of data by the
図8は、データ出力部203の動作の一例を示すフローチャートである。 FIG. 8 is a flowchart showing an example of the operation of the data output unit 203.
データ出力部203は定期的に動作し、マスタボリューム21への書き込みとは非同期でマスタボリューム21のブロックに格納されたデータをバックアップ先であるクラウドストレージ40に向けて出力する。当該データの送信はブロック単位で行われる。データ出力部203は、データの種別(非圧縮、圧縮方式1、圧縮方式2)に応じて複数のクラウドストレージ40のうち、いずれかの一つを選択してデータを送信する。
The data output unit 203 operates periodically and outputs the data stored in the block of the
データ出力部203は、圧縮管理テーブル23を参照し、転送対象のマスタボリューム21のブロック(転送対象のブロック)を確認する(ステップS21)。 The data output unit 203 refers to the compression management table 23 and confirms the block (transfer target block) of the transfer target master volume 21 (step S21).
次に、データ出力部203は、転送対象のクラウドストレージ40を決定する(ステップS22)。具体的には、データ出力部203は、圧縮管理テーブル23の出力先フィールドを参照し、データの出力先を決定する。例えば、図3に示す圧縮管理テーブル23を参照すると、非圧縮、圧縮方式1によるデータの出力先はクラウドストレージ40−1の1つに絞られる。一方、圧縮方式2によるデータは、クラウドストレージ40−1かクラウドストレージ40−2のいずれかが出力先となる。つまり、圧縮方式2により圧縮されたデータに関しては、データ出力部203は、クラウドストレージ40−1及びクラウドストレージ40−2のいずれか1つを選択し、当該選択したクラウドストレージ40をデータの送信先に決定する。なお、当該決定は、極端な偏り等が発生しないように行われるのが望ましい。
Next, the data output unit 203 determines the cloud storage 40 to be transferred (step S22). Specifically, the data output unit 203 refers to the output destination field of the compression management table 23 and determines the data output destination. For example, referring to the compression management table 23 shown in FIG. 3, the output destination of data by the non-compression,
データ出力部203は、先に決定したクラウドストレージ40に対してデータを出力する(ステップS23)。 The data output unit 203 outputs data to the previously determined cloud storage 40 (step S23).
その後、データ出力部203は、バックアップデータの所在に関する情報を全てのクラウドストレージ40に向けて送信する(ステップS24)。具体的には、データ出力部203は、出力したデータ(ブロック)のアドレス情報、当該データの圧縮状況、当該データの出力先(データの格納先)に関する情報を全てのクラウドストレージ40に対して送信する。例えば、図3を参照すると、データ出力部203が、アドレス「100」に格納されたデータをクラウドストレージ40−1に送信した場合には、アドレス情報「100」、データ圧縮状況として「非圧縮」、出力先として「クラウドストレージ40−1」を含む情報がクラウドストレージ40−1及び40−2に送信される。 Thereafter, the data output unit 203 transmits information regarding the location of the backup data to all the cloud storages 40 (step S24). Specifically, the data output unit 203 transmits the address information of the output data (block), the compression status of the data, and information regarding the output destination (data storage destination) of the data to all the cloud storages 40. To do. For example, referring to FIG. 3, when the data output unit 203 transmits the data stored at the address “100” to the cloud storage 40-1, the address information “100” and the data compression status “uncompressed”. , Information including “cloud storage 40-1” as the output destination is transmitted to the cloud storages 40-1 and 40-2.
あるいは、データ出力部203が、アドレス「102」に格納されたデータをクラウドストレージ40−2に送信した場合には、アドレス情報「102」、データ圧縮状況として「圧縮方式2」、出力先として「クラウドストレージ40−2」を含む情報がクラウドストレージ40−1及び40−2に送信される。 Alternatively, when the data output unit 203 transmits the data stored at the address “102” to the cloud storage 40-2, the address information “102”, the data compression status “compression method 2”, and the output destination “ Information including “cloud storage 40-2” is transmitted to the cloud storages 40-1 and 40-2.
当該情報を受け取ったクラウドストレージ40のテーブル管理部402は、格納先管理テーブル44を更新する。 The table management unit 402 of the cloud storage 40 that has received the information updates the storage location management table 44.
図9は、リモート圧縮展開部301の動作の一例を示すフローチャートである。 FIG. 9 is a flowchart illustrating an example of the operation of the remote compression / decompression unit 301.
リモート圧縮展開部301は、クラウドサーバ30上にて動作し、クラウドサーバ30からクラウドストレージ40のバックアップボリューム41にアクセスする際に動作する。
The remote compression / decompression unit 301 operates on the cloud server 30 and operates when accessing the
リモート圧縮展開部301は、アクセスの対象となるブロックを特定する(ステップS31)。例えば、リモート圧縮展開部301は、クラウドサーバ30と接続されたホスト端末からのアクセス要求に基づき、取得が必要となるバックアップデータを特定する。 The remote compression / decompression unit 301 specifies a block to be accessed (step S31). For example, the remote compression / decompression unit 301 identifies backup data that needs to be acquired based on an access request from a host terminal connected to the cloud server 30.
その後、リモート圧縮展開部301は、特定したバックアップデータのアドレス情報(マスタデータアドレス)により必要なバックアップデータを指定して、当該データの取得をリモートアクセス部302に要求する(ステップS32)。
Thereafter, the remote compression / decompression unit 301 designates necessary backup data by the address information (master data address) of the identified backup data, and requests the
リモートアクセス部302は、要求されたデータをクラウドストレージ40から取得し、取得したデータをリモート圧縮展開部301に引き渡す。
The
その後、リモート圧縮展開部301は、取得したデータが圧縮されていれば、当該圧縮データを読み書き可能なオリジナルデータに展開する(ステップS33)。展開されたオリジナルデータは、ホスト端末に提供するサービスに利用される。 Thereafter, if the acquired data is compressed, the remote compression / decompression unit 301 expands the compressed data into readable / writable original data (step S33). The developed original data is used for a service provided to the host terminal.
図10は、リモートアクセス部302の動作の一例を示すフローチャートである。
FIG. 10 is a flowchart illustrating an example of the operation of the
リモートアクセス部302は、自装置内のリモート圧縮展開部301からの要求、又は、他のクラウドサーバ30内のリモートアクセス部302からの要求により動作する。なお、上記要求には、取得するデータのアドレス情報(マスタデータアドレス)が含まれる。
The
図10(a)は、自装置内のリモート圧縮展開部301からの要求により起動した場合の動作のリモートアクセス部302の動作の一例を示す。
FIG. 10A shows an example of the operation of the
リモートアクセス部302は、自装置(クラウドサーバ30)に対応するクラウドストレージ40のコントローラ42を介して格納先管理テーブル44を参照し、対象ブロックが存在するクラウドストレージ40を特定する(ステップS41)。
The
その後、リモートアクセス部302は、アクセス対象となるブロック(バックアップデータ)が自装置に対応するクラウドストレージ40に存在するか否かを判定する(ステップS42)。例えば、対象となるブロックが非圧縮データや圧縮方式1による圧縮データであれば、当該ブロックはクラウドストレージ40−1のバックアップボリューム41−1に存在する。一方、圧縮方式2による圧縮データの場合には、当該ブロックは自装置(クラウドサーバ30)に対応するクラウドストレージ40に存在するか、自装置に対応していないクラウドストレージ40に存在するか定かではない。
Thereafter, the
そこで、リモートアクセス部302は、格納先管理テーブル44を参照し、必要なデータが自装置に対応するクラウドストレージ40に存在するか、他のクラウドストレージ40に存在するかを確認する。図5の例では、リモートアクセス部302は、アドレス「103」の圧縮方式2による圧縮データはクラウドストレージ40−1に存在し、アドレス「102」の圧縮方式2による圧縮データはクラウドストレージ40−2に存在すると把握する。
Therefore, the
データが自装置に対応するクラウドストレージ40に存在する場合(ステップS42、Yes分岐)には、リモートアクセス部302は、取得するデータのアドレス情報を指定して当該データの取得を自装置に対応するクラウドストレージ40に要求する(ステップS43)。
When the data exists in the cloud storage 40 corresponding to the own device (step S42, Yes branch), the
当該要求を受けたクラウドストレージ40のコントローラ42は、アドレス管理テーブル43を参照し、指定されたアドレス情報(マスタデータアドレス)に対応するバックアップデータをバックアップボリューム41から読み出す。読み出したデータは、リモートアクセス部302に送信され、リモートアクセス部302はリモート圧縮展開部301から要求されたデータを取得する。
Upon receiving the request, the
データが自装置に対応するクラウドストレージ40に存在しない場合(ステップS42、No分岐)には、リモートアクセス部302は、他のクラウドサーバ30のリモートアクセス部302に対して、取得するデータのアドレス情報を指定して当該データの取得を要求する(ステップS44)。
When the data does not exist in the cloud storage 40 corresponding to its own device (step S42, No branch), the
上記要求を受けたリモートアクセス部302は、クラウドストレージ40(バックアップボリューム41)からデータを取得し、要求元のリモートアクセス部302にデータを送信する。
Upon receiving the request, the
リモートアクセス部302は、取得したデータをリモート圧縮展開部301に提供(出力)する(ステップS45)。
The
図10(b)は、他のクラウドサーバ30のリモートアクセス部302からの要求により起動した場合のリモートアクセス部302の動作の一例を示す。
FIG. 10B shows an example of the operation of the
リモートアクセス部302は、他のクラウドサーバ30のリモートアクセス部302からのデータ取得要求を受信する(ステップS51)。
The
その後、リモートアクセス部302は、自装置に対応するクラウドストレージ40の格納先管理テーブル44を参照し、要求されたデータが自装置に対応するクラウドストレージ40に存在することを確認する(ステップS52)。
Thereafter, the
その後、リモートアクセス部302は、自装置に対応するクラウドストレージ40から要求されたデータを取得する(ステップS53)。
Thereafter, the
リモートアクセス部302は、取得したデータを、データ取得要求を送信した要求元(他のクラウドサーバ30のリモートアクセス部302)に出力する(ステップS54)。
The
なお、マスタストレージ20等に含まれるコントローラは、マスタストレージ20等に搭載されたコンピュータ(例えば、CPU(Central Processing Unit)等)に、そのハードウェアを用いて、上述した各コントローラの処理モジュールの処理を実行させるコンピュータプログラムにより実現することもできる。 The controller included in the master storage 20 or the like uses the hardware of a computer (for example, a CPU (Central Processing Unit) or the like) installed in the master storage 20 or the like to process the processing module of each controller described above. It can also be realized by a computer program that executes
以上のように、第1の実施形態に係る、バックアップシステムでは、データの書き込み時に第1の圧縮部201(ディスク内圧縮手段)は、データを圧縮方式1で圧縮する。さらに、第2の圧縮部202(ディスク間圧縮手段)は、圧縮方式1により圧縮された複数のディスクに跨がるデータをより圧縮率の高い圧縮方式2により圧縮する。このように圧縮されたデータは、データ出力部203により、外部のクラウドストレージ40へのバックアップデータの転送が非同期で行われる。対象データが圧縮方式1の場合は固定的にクラウドストレージ40に送信され、圧縮方式2のデータはいずれかのクラウドストレージ40に出力される。さらに、リモートサイト(クラウドサーバ30、クラウドストレージ40)にて、圧縮されたデータを展開できない場合(オリジナルデータを復元できない場合)には、他のクラウドストレージ40のデータを参照してオリジナルのデータを復元する。さらに、マスタストレージ20は、オリジナルデータと圧縮データのマッピング情報をすべての出力先となるクラウドストレージ40の管理データ領域に転送する。例えば、クラウドサーバ30−1上のリモート圧縮展開部301−1は、クラウドサーバ30−1からクラウドストレージ40−1上に構築されたバックアップボリューム41−1の読み書きを行う際、圧縮方式1のデータであればデータをオリジナルデータに変換できる。一方、圧縮方式2のデータの場合、対象となるクラウドストレージ40−1上にデータが存在すれば、オリジナルデータに変換が可能であるが、存在しない場合はリモートアクセス部302−1にデータの取得を要求する。リモートアクセス部302−1は、リモート圧縮展開部301−1からの要求により、他のクラウドストレージ40−2上に要求されたデータが存在するかどうか確認し、データの取得を行う。
As described above, in the backup system according to the first embodiment, the first compression unit 201 (in-disk compression unit) compresses data by the
以上の構成により、メインサイトと同じ機能を持つストレージシステムをリモートサイトに設置することなく、リモートサイトにて安価なクラウドクラウドサーバ、クラウドストレージを利用した災害対策運用を可能とするバックアップシステムが提供できる。つまり、複数の圧縮方式を組み合わせることで、メインサイトのマスタストレージ20に格納されるデータ量を削減し、かつ、メインサイトからリモートサイトへのデータ転送量を抑えた運用が可能となる。 With the above configuration, it is possible to provide a backup system that enables disaster countermeasure operation using an inexpensive cloud cloud server and cloud storage at the remote site without installing a storage system having the same function as the main site at the remote site. In other words, by combining a plurality of compression methods, it is possible to reduce the amount of data stored in the master storage 20 at the main site and to reduce the amount of data transferred from the main site to the remote site.
上記実施形態にて説明したバックアップシステムの構成、動作等は例示であって、システムの構成を限定する趣旨ではない。例えば、上記実施形態では、圧縮方式1のデータをクラウドストレージ40−1に対して固定的に送信しているが、圧縮方式2のデータを、例えば、クラウドストレージ40−2に固定的に送信してもよい。この場合、クラウドストレージ40−1には非圧縮データ、圧縮方式1のデータが格納され、クラウドストレージ40−2には非圧縮データ、圧縮方式1のデータ、圧縮方式2のデータが格納されることになる。その上で、リモート圧縮展開部301−1が圧縮方式1にだけ対応可能、リモート圧縮展開部301−2が圧縮方式1及び2に対応可能という状況を考える。リモート圧縮展開部301−1は、圧縮方式2のデータが必要となると、クラウドストレージ40−2に格納された圧縮方式2のデータ取得をクラウドサーバ30−2に要求する。当該要求を受けたクラウドサーバ30−2のリモート圧縮展開部301−2は、圧縮方式2のデータをバックアップボリューム41−2から取得し、圧縮方式2によりデータを解凍した後に、オリジナルデータをクラウドサーバ30−1に提供する。このような対応により、リモート圧縮展開部301−1は自身が対応していない圧縮方式2により圧縮されたオリジナルデータを得ることができる。
The configuration, operation, and the like of the backup system described in the above embodiment are merely examples, and are not intended to limit the system configuration. For example, in the above embodiment, the
上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。
[付記1]
上述の第1の視点に係るバックアップシステムのとおりである。
[付記2]
前記複数のクラウドストレージそれぞれに対応する、複数のクラウドサーバをさらに含み、
前記複数のクラウドサーバのうち第1のクラウドサーバは、自装置に対応する前記クラウドストレージに必要なデータが格納されていない場合には、前記必要なデータの取得を前記複数のクラウドサーバのうち前記第1のクラウドサーバとは異なる第2のクラウドサーバに要求し、
前記第2のクラウドサーバは、前記要求されたデータを自装置に対応する前記クラウドストレージから取得し、前記取得したデータを前記第1のクラウドサーバに出力する、付記1のバックアップシステム。
[付記3]
前記マスタストレージは、データを圧縮した際の圧縮方式に関する情報と、前記送信された圧縮データのアドレスに関する情報と、前記送信された圧縮データの格納先に関する情報と、を含むバックアップデータの所在に関する情報を前記複数のクラウドストレージに送信する、付記2のバックアップシステム。
[付記4]
前記クラウドサーバは、前記バックアップデータの所在に関する情報に基づいて、前記必要なデータが自装置に対応する前記クラウドストレージに存在するか否かを判断する、付記3のバックアップシステム。
[付記5]
前記クラウドサーバは、前記クラウドストレージから取得したデータが圧縮されている場合には、前記取得したデータを展開してオリジナルデータを取得する、付記2乃至4のいずれか一に記載のバックアップシステム。
[付記6]
前記マスタストレージは、インライン方式によりデータを圧縮する、付記1乃至5のいずれか一に記載のバックアップシステム。
[付記7]
前記マスタストレージは、ポストプロセス方式によりデータを圧縮する、付記1乃至6のいずれか一に記載のバックアップシステム。
[付記8]
上述の第2の視点に係るストレージ装置のとおりである。
[付記9]
上述の第3の視点に係るデータ転送方法のとおりである。
[付記10]
上述の第4の視点に係るプログラムのとおりである。
なお、付記8〜付記10の形態は、付記1の形態と同様に、付記2の形態〜付記7の形態に展開することが可能である。
A part or all of the above embodiments can be described as in the following supplementary notes, but is not limited thereto.
[Appendix 1]
This is the same as the backup system according to the first aspect described above.
[Appendix 2]
A plurality of cloud servers corresponding to each of the plurality of cloud storages;
The first cloud server out of the plurality of cloud servers, when the necessary data is not stored in the cloud storage corresponding to its own device, the acquisition of the necessary data among the plurality of cloud servers Request to a second cloud server different from the first cloud server,
The backup system according to
[Appendix 3]
The master storage is information relating to the location of backup data, including information relating to a compression method when data is compressed, information relating to an address of the transmitted compressed data, and information relating to a storage destination of the transmitted compressed data. The backup system according to appendix 2, wherein: is transmitted to the plurality of cloud storages.
[Appendix 4]
The backup system according to appendix 3, wherein the cloud server determines whether or not the necessary data exists in the cloud storage corresponding to the own device based on information on the location of the backup data.
[Appendix 5]
The backup system according to any one of appendices 2 to 4, wherein when the data acquired from the cloud storage is compressed, the cloud server expands the acquired data and acquires original data.
[Appendix 6]
The backup system according to any one of
[Appendix 7]
The backup system according to any one of
[Appendix 8]
The storage device according to the second aspect described above.
[Appendix 9]
This is as the data transfer method according to the third aspect described above.
[Appendix 10]
It is as the program which concerns on the above-mentioned 4th viewpoint.
Note that the forms of Supplementary Note 8 to Supplementary Note 10 can be expanded to the forms of Supplementary Note 2 to Supplementary Note 7 as with the form of
なお、引用した上記の特許文献等の各開示は、本書に引用をもって繰り込むものとする。本発明の全開示(請求の範囲を含む)の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の全開示の枠内において種々の開示要素(各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む)の多様な組み合わせ、ないし、選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。 Each disclosure of the cited patent documents and the like cited above is incorporated herein by reference. Within the scope of the entire disclosure (including claims) of the present invention, the embodiments and examples can be changed and adjusted based on the basic technical concept. In addition, various combinations or selections of various disclosed elements (including each element in each claim, each element in each embodiment or example, each element in each drawing, etc.) within the scope of the entire disclosure of the present invention. Is possible. That is, the present invention of course includes various variations and modifications that could be made by those skilled in the art according to the entire disclosure including the claims and the technical idea. In particular, with respect to the numerical ranges described in this document, any numerical value or small range included in the range should be construed as being specifically described even if there is no specific description.
10 メインサーバ
20、101 マスタストレージ
21 マスタボリューム
22、31、31−1、31−2、42、42−1、42−2 コントローラ
23 圧縮管理テーブル
30、30−1、30−2 クラウドサーバ
40、40−1、40−2、102 クラウドストレージ
41、41−1、41−2 バックアップボリューム
43、43−1、43−2 アドレス管理テーブル
44、44−1、44−2 格納先管理テーブル
201 第1の圧縮部
202 第2の圧縮部
203 データ出力部
301、301−1、301−2 リモート圧縮展開部
302、302−1、302−2 リモートアクセス部
10
Claims (10)
前記マスタストレージとは異なるサイトに設置され、各々がバックアップボリュームを備える、複数のクラウドストレージと、
を含み、
前記マスタストレージは、前記圧縮されたデータを前記複数のクラウドストレージのうちいずれかのクラウドストレージに送信し、
前記クラウドストレージは、前記マスタストレージから取得したデータを前記バックアップボリュームに格納する、バックアップシステム。 Master storage for compressing data by one of a plurality of compression methods and storing the compressed data in a master volume;
A plurality of cloud storages installed at different sites from the master storage, each having a backup volume;
Including
The master storage sends the compressed data to any one of the plurality of cloud storages,
The cloud storage is a backup system that stores data acquired from the master storage in the backup volume.
前記複数のクラウドサーバのうち第1のクラウドサーバは、自装置に対応する前記クラウドストレージに必要なデータが格納されていない場合には、前記必要なデータの取得を前記複数のクラウドサーバのうち前記第1のクラウドサーバとは異なる第2のクラウドサーバに要求し、
前記第2のクラウドサーバは、前記要求されたデータを自装置に対応する前記クラウドストレージから取得し、前記取得したデータを前記第1のクラウドサーバに出力する、請求項1のバックアップシステム。 A plurality of cloud servers corresponding to each of the plurality of cloud storages;
The first cloud server out of the plurality of cloud servers, when the necessary data is not stored in the cloud storage corresponding to its own device, the acquisition of the necessary data among the plurality of cloud servers Request to a second cloud server different from the first cloud server,
The backup system according to claim 1, wherein the second cloud server acquires the requested data from the cloud storage corresponding to its own device, and outputs the acquired data to the first cloud server.
データを複数の圧縮方式のうちいずれかで圧縮する圧縮部と、
前記圧縮されたデータを前記複数のクラウドストレージのうちいずれかのクラウドストレージに送信する、データ出力部と、
を備える、ストレージ装置。 A storage device connected to a plurality of cloud storages and installed at a different site from the plurality of cloud storages,
A compression unit that compresses data using one of a plurality of compression methods;
A data output unit that transmits the compressed data to any one of the plurality of cloud storages; and
A storage apparatus.
前記マスタストレージとは異なるサイトに設置され、各々がバックアップボリュームを備える、複数のクラウドストレージと、
を含むバックアップシステムにおいて、
前記圧縮されたデータを前記複数のクラウドストレージのうちいずれかのクラウドストレージに送信するステップと、
前記マスタストレージから取得したデータを前記バックアップボリュームに格納する、ステップと、
を含む、データ転送方法。 Master storage for compressing data by one of a plurality of compression methods and storing the compressed data in a master volume;
A plurality of cloud storages installed at different sites from the master storage, each having a backup volume;
In the backup system including
Transmitting the compressed data to any one of the plurality of cloud storages;
Storing the data acquired from the master storage in the backup volume; and
Including data transfer method.
データを複数の圧縮方式のうちいずれかで圧縮する処理と、
前記圧縮されたデータを前記複数のクラウドストレージのうちいずれかのクラウドストレージに送信する処理と、
を実行させるプログラム。 A computer connected to a plurality of cloud storages and installed in a storage device installed at a site different from the plurality of cloud storages.
A process of compressing data with one of a plurality of compression methods;
A process of transmitting the compressed data to any one of the plurality of cloud storages;
A program that executes
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017073036A JP6891603B2 (en) | 2017-03-31 | 2017-03-31 | Backup system, storage device, data transfer method and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017073036A JP6891603B2 (en) | 2017-03-31 | 2017-03-31 | Backup system, storage device, data transfer method and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018173915A true JP2018173915A (en) | 2018-11-08 |
JP6891603B2 JP6891603B2 (en) | 2021-06-18 |
Family
ID=64108753
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017073036A Active JP6891603B2 (en) | 2017-03-31 | 2017-03-31 | Backup system, storage device, data transfer method and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6891603B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023013639A (en) * | 2021-07-16 | 2023-01-26 | 株式会社日立製作所 | Data replication system and data replication method |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006516341A (en) * | 2003-01-17 | 2006-06-29 | タシット ネットワークス,インク. | Method and system for storage caching with distributed file system |
JP2009524122A (en) * | 2005-12-08 | 2009-06-25 | エヌヴィディア コーポレイション | Emergency data storage service |
JP2010020570A (en) * | 2008-07-11 | 2010-01-28 | Hitachi Ltd | Information processing system and data recovery method |
JP2012141738A (en) * | 2010-12-28 | 2012-07-26 | Hitachi Solutions Ltd | Information management method and information providing computer |
WO2016181481A1 (en) * | 2015-05-12 | 2016-11-17 | 株式会社日立製作所 | Storage system and storage control method |
-
2017
- 2017-03-31 JP JP2017073036A patent/JP6891603B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006516341A (en) * | 2003-01-17 | 2006-06-29 | タシット ネットワークス,インク. | Method and system for storage caching with distributed file system |
JP2009524122A (en) * | 2005-12-08 | 2009-06-25 | エヌヴィディア コーポレイション | Emergency data storage service |
JP2010020570A (en) * | 2008-07-11 | 2010-01-28 | Hitachi Ltd | Information processing system and data recovery method |
JP2012141738A (en) * | 2010-12-28 | 2012-07-26 | Hitachi Solutions Ltd | Information management method and information providing computer |
WO2016181481A1 (en) * | 2015-05-12 | 2016-11-17 | 株式会社日立製作所 | Storage system and storage control method |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023013639A (en) * | 2021-07-16 | 2023-01-26 | 株式会社日立製作所 | Data replication system and data replication method |
JP7328283B2 (en) | 2021-07-16 | 2023-08-16 | 株式会社日立製作所 | Data replication system and data replication method |
Also Published As
Publication number | Publication date |
---|---|
JP6891603B2 (en) | 2021-06-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106407040B (en) | A kind of duplicating remote data method and system | |
JP5084551B2 (en) | Data backup method, storage control communication device and program using deduplication technology | |
US8843716B2 (en) | Computer system, storage apparatus and data transfer method | |
US10013166B2 (en) | Virtual tape library system | |
CN102918509B (en) | Data reading and writing method, device and storage system | |
US9116851B2 (en) | System and method for virtual tape library over S3 | |
US9996421B2 (en) | Data storage method, data storage apparatus, and storage device | |
CN102662992A (en) | Method and device for storing and accessing massive small files | |
US20060277376A1 (en) | Initial copy system | |
JPWO2008114441A1 (en) | Storage management program, storage management method, and storage management device | |
CN106126374B (en) | Method for writing data, method for reading data and device | |
CN106528338B (en) | Remote data copying method, storage device and storage system | |
US20220156016A1 (en) | Network storage gateway | |
CN106873902B (en) | File storage system, data scheduling method and data node | |
US9891992B2 (en) | Information processing apparatus, information processing method, storage system and non-transitory computer readable storage media | |
CN109189326B (en) | Management method and device of distributed cluster | |
US10915405B2 (en) | Methods for handling storage element failures to reduce storage device failure rates and devices thereof | |
JP6891603B2 (en) | Backup system, storage device, data transfer method and program | |
JP6376626B2 (en) | Data storage method, data storage device, and storage device | |
US7587466B2 (en) | Method and computer system for information notification | |
WO2015198371A1 (en) | Storage system and memory control method | |
JP5033095B2 (en) | Storage management intermediary server and control method thereof | |
WO2019021411A1 (en) | System, data moving method, computer-readable recording medium | |
US8072989B2 (en) | Virtual volume transfer apparatus, virtual volume transfer method, and computer product | |
JP2023145704A (en) | Storage system and data processing method of storage system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200206 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210216 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210409 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210427 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210510 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6891603 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |