JP6413792B2 - Storage system - Google Patents

Storage system Download PDF

Info

Publication number
JP6413792B2
JP6413792B2 JP2015010386A JP2015010386A JP6413792B2 JP 6413792 B2 JP6413792 B2 JP 6413792B2 JP 2015010386 A JP2015010386 A JP 2015010386A JP 2015010386 A JP2015010386 A JP 2015010386A JP 6413792 B2 JP6413792 B2 JP 6413792B2
Authority
JP
Japan
Prior art keywords
storage device
master
replica
stored
metadata
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015010386A
Other languages
Japanese (ja)
Other versions
JP2016134133A (en
Inventor
孝紘 伊東
孝紘 伊東
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2015010386A priority Critical patent/JP6413792B2/en
Publication of JP2016134133A publication Critical patent/JP2016134133A/en
Application granted granted Critical
Publication of JP6413792B2 publication Critical patent/JP6413792B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、ストレージシステムにかかり、特に、重複記憶を排除する機能を有するストレージシステムに関する。   The present invention relates to a storage system, and more particularly to a storage system having a function of eliminating duplicate storage.

近年、コンピュータの発達及び普及に伴い、種々の情報がデジタルデータ化されている。このようなデジタルデータを保存しておく装置として、磁気テープや磁気ディスクなどの記憶装置がある。そして、保存すべきデータは日々増大し、膨大な量となるため、大容量なストレージシステムが必要となっている。また、記憶装置に費やすコストを削減しつつ、信頼性も必要とされる。これに加えて、後にデータを容易に取り出すことが可能であることも必要である。その結果、自動的に記憶容量や性能の増大を実現できると共に、重複記憶を排除して記憶コストを削減し、さらには、冗長性の高いストレージシステムが望まれている。   In recent years, with the development and spread of computers, various types of information have been converted into digital data. As a device for storing such digital data, there are storage devices such as a magnetic tape and a magnetic disk. Since the data to be stored increases day by day and becomes enormous, a large-capacity storage system is required. In addition, reliability is required while reducing the cost of the storage device. In addition to this, it is necessary that data can be easily retrieved later. As a result, there is a demand for a storage system that can automatically increase storage capacity and performance, eliminate duplicate storage, reduce storage costs, and have high redundancy.

このような状況に応じて、近年では、特許文献1に示すように、コンテンツアドレスストレージシステムが開発されている。このコンテンツアドレスストレージシステムは、データを分散して複数の記憶装置に記憶すると共に、このデータの内容に応じて特定される固有のコンテンツアドレスによって、当該データを格納した格納位置が特定される。具体的に、コンテンツアドレスストレージシステムでは、所定のデータを複数のフラグメントに分割すると共に、冗長データとなるフラグメントをさらに付加して、これら複数のフラグメントをそれぞれ複数の記憶装置にそれぞれ格納している。   In response to such a situation, in recent years, a content address storage system has been developed as shown in Patent Document 1. In this content address storage system, data is distributed and stored in a plurality of storage devices, and the storage location where the data is stored is specified by a unique content address specified according to the content of the data. Specifically, in the content address storage system, predetermined data is divided into a plurality of fragments, and a fragment that becomes redundant data is further added, and the plurality of fragments are respectively stored in a plurality of storage devices.

そして、後に、コンテンツアドレスを指定することにより、当該コンテンツアドレスにて特定される格納位置に格納されているデータつまりフラグメントを読み出し、複数のフラグメントから分割前の所定のデータを復元することができる。   Then, by designating the content address later, it is possible to read out the data stored at the storage location specified by the content address, that is, the fragment, and restore the predetermined data before the division from the plurality of fragments.

また、上記コンテンツアドレスは、データの内容に応じて固有となるよう生成される、例えば、データのハッシュ値を用いる。このため、重複データであれば同じ格納位置のデータを参照することで、同一内容のデータを取得することができる。従って、重複データを別々に格納する必要がなく、重複記録を排除し、データ容量の削減を図ることができる。   The content address is generated to be unique according to the content of data, for example, a hash value of data is used. For this reason, if it is duplicate data, the data of the same content can be acquired by referring to the data at the same storage position. Therefore, it is not necessary to store the duplicate data separately, and duplicate recording can be eliminated and the data capacity can be reduced.

また、コンテンツアドレスストレージシステムでは、ツリー型ファイルシステムが用いられている。これは、格納したデータを参照するコンテンツアドレス自体を、さらに上位階層に位置するコンテンツアドレスにて参照し、コンテンツアドレスをツリー構造に形成して格納している、というものである。これにより、上位階層から下位階層に向かって、コンテンツアドレスの参照先を辿っていくことで、目的の格納データにアクセスすることができる。   In the content address storage system, a tree type file system is used. This means that a content address that refers to stored data is referred to by a content address located in a higher hierarchy, and the content address is formed in a tree structure and stored. Accordingly, the target storage data can be accessed by tracing the reference destination of the content address from the upper hierarchy to the lower hierarchy.

特開2010−157204号公報JP 2010-157204 A 国際公開2010/097849International Publication 2010/097849

上述したような重複排除ストレージシステムにおいて、ファイルシステムのレプリケーションを行う場合には、例えば、特許文献2に示されるように、レプリカ側にすでに存在する重複したデータブロックの転送を行わないことで、処理を高速化することが行われている。しかしながら、マスタ側とレプリカ側で重複データが少ない場合、特に初回のレプリケーションの場合には、転送データ量が多く、レプリカ側で参照できるようになるまで時間がかかる、という問題が生じる。   In the deduplication storage system as described above, when file system replication is performed, for example, as shown in Patent Document 2, processing is performed by not transferring duplicate data blocks that already exist on the replica side. Speeding up has been done. However, when there is little duplicate data on the master side and the replica side, especially in the case of the first replication, there is a problem that the amount of transfer data is large and it takes time until the replica side can refer to it.

また、重複排除ストレージシステムにおけるファイルシステムのレプリケーションを、例えば以下の方法で行う。まず、ファイルの先頭から、ファイルのデータを構成するブロックのハッシュ値のリストを、マスタ側からレプリカ側に送る。レプリカ側は、送られてきたハッシュ値とレプリカ側がすでに所持するブロックのハッシュ値を比較する。そして、レプリカ側が所持していないブロック(非重複ブロック)を特定し、レプリカ側が所持するブロック(重複ブロック)の送信を省略し、非重複ブロックのみ送信するように要求する。これにより、ネットワークの転送量を削減し、レプリケーションの処理を高速化する。   In addition, file system replication in the deduplication storage system is performed by the following method, for example. First, a list of hash values of blocks constituting file data is sent from the master side to the replica side from the beginning of the file. The replica side compares the sent hash value with the hash value of the block already owned by the replica side. Then, a block (non-overlapping block) that is not possessed by the replica side is specified, transmission of a block (duplicate block) possessed by the replica side is omitted, and a request is made to transmit only non-overlapping blocks. This reduces the amount of network transfer and speeds up replication processing.

ここで、レプリケーションのはじめにマスタ側からレプリカ側に送信するハッシュ値のリストは、そのサイズは非常に小さいが、その一方で、後方に非重複ブロックが集中するようなファイルをWAN(Wide Area Network)で転送するような場合がある。このような場合には、レプリケーションの処理の当初はネットワークの転送がほとんど発生せず、後に非重複ブロックの転送処理が発生することとなり、非重複ブロックの転送が集中することでネットワークがボトルネックとなりうる。すると、ネットワークの利用効率が悪く、最大性能を得られず、結果としてレプリケーションに時間がかかり、レプリカ側で所望のデータを参照できるようになるまで時間がかかる、という問題が生じる。   Here, the list of hash values sent from the master side to the replica side at the beginning of replication is very small, but on the other hand, files with non-overlapping blocks concentrated in the back are WAN (Wide Area Network) There are cases where it is forwarded by. In such a case, network transfer hardly occurs at the beginning of replication processing, and non-overlapping block transfer processing occurs later, and the network becomes a bottleneck due to concentration of non-overlapping block transfers. sell. As a result, there is a problem that the network utilization efficiency is poor, the maximum performance cannot be obtained, and as a result, replication takes time, and it takes time until the replica can refer to desired data.

このため、本発明の目的は、上述した課題である、ファイルシステムのレプリケーションを行う場合に、レプリカ側で所望のデータを参照できるまでに時間がかかる、ということを解決することができるストレージシステムを提供することにある。   Therefore, an object of the present invention is to provide a storage system that can solve the above-described problem that it takes time until the replica can reference desired data when performing file system replication. It is to provide.

本発明の一形態であるストレージシステムは、
重複記憶排除機能を有するマスタ側ストレージ装置とレプリカ側ストレージ装置とを備え、
前記マスタ側ストレージ装置及び前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部をそれぞれ備えており、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを前記レプリカ側ストレージ装置に送信し、その後、当該レプリカ側ストレージ装置からの要求に応じて前記実データを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された前記メタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備えた、
という構成をとる。
A storage system according to an aspect of the present invention
A master storage device having a duplicate storage elimination function and a replica storage device,
The master-side storage device and the replica-side storage device each include a replication execution unit that replicates actual data constituting a file stored in the master-side storage device to the replica-side storage device,
The replication execution unit of the master storage device transmits metadata, which is a value based on address data referring to the storage location of the actual data stored in the master storage device, to the replica storage device, Thereafter, in response to a request from the replica storage device, the real data is transmitted to the replica storage device,
The replication execution unit of the replica-side storage apparatus receives and stores the metadata transmitted from the master-side storage apparatus, and then is not stored in the replica-side storage apparatus based on the metadata Requests the actual data from the master storage device, receives and stores the actual data transmitted from the master storage device in response to the request,
Further, the replica-side storage device has a file system based on the metadata received and stored from the master-side storage device so that a file composed of the actual data corresponding to the metadata can be accessed. And a file system access unit that requests the actual storage data from the master storage device based on the metadata when the actual data constituting the accessed file is not stored in the replica storage device With
The configuration is as follows.

また、本発明の他の形態であるレプリカ側ストレージ装置は、
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置であって、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を備え、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備えた、
という構成をとる。
In addition, the replica-side storage apparatus according to another embodiment of the present invention is
A replica-side storage device that has a duplicate storage elimination function and is connected to the master-side storage device,
A replication execution unit that replicates real data constituting the file stored in the master storage device to the replica storage device;
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
In addition, based on the metadata received and stored from the master storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed and accessed. A file system access unit for requesting the real data to the master storage device based on the metadata when the real data constituting the file is not stored in the replica storage device;
The configuration is as follows.

また、本発明の他の形態であるプログラムは、
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置に、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を実現させるとともに、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置に、
前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を実現させる、
という構成をとる。
Moreover, the program which is the other form of this invention is:
A replica storage device that has a duplicate storage exclusion function and is connected to the master storage device.
Realizing a replication execution unit that replicates the actual data constituting the file stored in the master storage device to the replica storage device,
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
Furthermore, in the replica side storage device,
Based on the metadata received and stored from the master-side storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the file that has been accessed Realizing a file system access unit that requests the real data to the master storage device based on the metadata when the real data constituting the data is not stored in the replica storage device;
The configuration is as follows.

また、本発明の他の形態であるレプリケーション方法は、
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置によるレプリケーション方法であって、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションする際に、
前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、
前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求する、
という構成をとる。
In addition, the replication method according to another aspect of the present invention includes:
A replication method by a replica storage device having a duplicate storage exclusion function and connected to a master storage device,
When replicating the real data constituting the file stored in the master storage device to the replica storage device, the replica storage device
Received and stored metadata, which is a value based on address data sent from the master storage device and referring to the storage location of the actual data stored in the master storage device, and then the metadata Requesting the master side storage device to store the real data that is not stored in the replica side storage device, and receiving and storing the real data transmitted from the master side storage device in response to the request,
Furthermore, the replica storage device
Based on the metadata received and stored from the master-side storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the file that has been accessed Requesting the master storage device for the actual data based on the metadata when the replica data that is not stored in the replica storage device is,
The configuration is as follows.

本発明は、以上のように構成されることにより、ファイルシステムのレプリケーションを行う場合であっても、レプリカ側で所望のデータを迅速に参照することができる。   By configuring as described above, the present invention can quickly refer to desired data on the replica side even when file system replication is performed.

本発明の実施形態1におけるストレージシステムの構成を示す機能ブロック図である。1 is a functional block diagram showing a configuration of a storage system in Embodiment 1 of the present invention. 図1に開示したストレージシステム内のレプリケーション実行部の構成を示す機能ブロック図である。FIG. 2 is a functional block diagram illustrating a configuration of a replication execution unit in the storage system disclosed in FIG. 1. メタデータのデータ構造の一例を示す図である。It is a figure which shows an example of the data structure of metadata. ストレージシステムによるレプリケーション処理の様子を示す図である。It is a figure which shows the mode of the replication process by a storage system. ストレージシステムによるレプリケーション処理の様子を示す図である。It is a figure which shows the mode of the replication process by a storage system. ストレージシステムによるレプリケーション処理の様子を示す図である。It is a figure which shows the mode of the replication process by a storage system. ストレージシステムによるレプリケーション処理の様子を示す図である。It is a figure which shows the mode of the replication process by a storage system. ストレージシステムによるレプリケーション処理の様子を示す図である。It is a figure which shows the mode of the replication process by a storage system. ストレージシステムによるレプリケーション処理の様子を示す図である。It is a figure which shows the mode of the replication process by a storage system. ストレージシステムによるレプリケーション処理の様子を示す図である。It is a figure which shows the mode of the replication process by a storage system. 本発明の付記1におけるストレージシステムの構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the storage system in attachment 1 of this invention.

<実施形態1>
本発明の第1の実施形態を、図1乃至図10を参照して説明する。図1乃至図3は、ストレージシステムの構成を示す図であり、図4乃至図10は、レプリケーション処理を説明するための図である。
<Embodiment 1>
A first embodiment of the present invention will be described with reference to FIGS. 1 to 3 are diagrams showing the configuration of a storage system, and FIGS. 4 to 10 are diagrams for explaining replication processing.

[構成]
本発明におけるストレージシステムは、図1に示すように、マスタ側ストレージ装置であるマスタシステム100と、レプリカ側ストレージ装置であるレプリカシステム200と、を備えている。また、ストレージシステムには、マスタファイルシステムに対してファイルの読み書きを行ったり、レプリカファイルシステム210にアクセスしたり、レプリケーションを行ったりするユーザが操作するユーザシステム300が接続されている。
[Constitution]
As shown in FIG. 1, the storage system according to the present invention includes a master system 100 that is a master storage device and a replica system 200 that is a replica storage device. Also connected to the storage system is a user system 300 operated by a user who reads / writes files from / to the master file system, accesses the replica file system 210, and performs replication.

なお、本実施形態におけるマスタシステム100は、ファイルをデータブロックに分割して、当該データブロック(実データ)を記憶装置に格納する。このとき、マスタシステム100は、データブロックを参照する、当該データブロックのデータ内容及び格納位置に基づくアドレスデータ(コンテンツアドレス:CA)を生成してツリー構造にて記憶装置に格納する。このため、マスタシステム100は、異なるファイルのデータブロックであっても、データ内容が同一であれば、同じアドレスデータで参照すれば良いため、1つのデータブロックを記憶装置に記憶しておけばよいこととなる。このように、マスタシステム100は、同一内容のデータブロックの重複記憶を排除する機能(重複記憶排除機能)を有している。また、レプリカシステム200も同様に重複記憶排除機能を有している。また、重複記憶排除機能についてのさらなる詳細な説明は省略するが、本実施形態におけるマスタシステム100及びレプリカシステム200は、上述したようなコンテンツアドレスストレージシステムにて構成されていることとする。   Note that the master system 100 in the present embodiment divides a file into data blocks and stores the data blocks (actual data) in a storage device. At this time, the master system 100 refers to the data block, generates address data (content address: CA) based on the data content and the storage position of the data block, and stores it in the storage device in a tree structure. For this reason, the master system 100 may store one data block in the storage device even if it is a data block of different files, as long as the data content is the same, it can be referred to by the same address data. It will be. As described above, the master system 100 has a function (duplicate storage exclusion function) for eliminating duplicate storage of data blocks having the same content. Similarly, the replica system 200 has a duplicate storage elimination function. Further, although further detailed description of the duplicate storage exclusion function is omitted, it is assumed that the master system 100 and the replica system 200 in the present embodiment are configured by the content address storage system as described above.

そして、マスタシステム100は、当該マスタシステム100に記憶されているツリー構造のファイルシステム(ファイルを構成するデータブロック(実データ)及びデータブロックを参照するアドレスデータに基づくメタデータ)を、レプリカシステム200にレプリケーション(複製)する機能を有する。   Then, the master system 100 converts the file system having a tree structure stored in the master system 100 (data block (actual data) constituting the file and metadata based on address data referring to the data block) to the replica system 200. Has the function of replicating.

上記マスタシステム100は、演算装置であるCPU(Central Processing Unit)と、記憶装置と、を備えた情報処理装置である。そして、マスタシステム100は、CPUにプログラムが組み込まれることにより構築された、レプリケーション実行部120、ファイルシステムビュー提供部140、を備えている。また、マスタシステム100は、記憶装置に形成された、マスタファイルシステム110、マスタスナップショップ111、重複排除データ保存部130、を備えている。   The master system 100 is an information processing apparatus including a CPU (Central Processing Unit) that is an arithmetic device and a storage device. The master system 100 includes a replication execution unit 120 and a file system view providing unit 140 that are constructed by incorporating a program into the CPU. The master system 100 also includes a master file system 110, a master snap shop 111, and a deduplication data storage unit 130 formed in a storage device.

同様に、上記レプリカシステム200は、演算装置であるCPU(Central Processing Unit)と、記憶装置と、を備えた情報処理装置である。そして、レプリカシステム200は、CPUにプログラムが組み込まれることにより構築された、レプリケーション実行部220、ファイルシステムビュー提供部240、を備えている。また、レプリカシステム200は、記憶装置に形成された、レプリカファイルシステム210、重複排除データ保存部230、を備えている。   Similarly, the replica system 200 is an information processing apparatus including a CPU (Central Processing Unit) that is an arithmetic device and a storage device. The replica system 200 includes a replication execution unit 220 and a file system view provision unit 240 constructed by incorporating a program into the CPU. The replica system 200 includes a replica file system 210 and a deduplication data storage unit 230 formed in a storage device.

以下、上述したマスタシステム100とレプリカシステム200の構成について、詳述する。   Hereinafter, the configurations of the master system 100 and the replica system 200 described above will be described in detail.

上記マスタシステム100のレプリケーション実行部120は、ユーザシステム300からレプリケーションの開始指示を受けると、その時点でマスタファイルシステム110の静止点を確保し、レプリカファイルシステム210への同期つまりレプリケーションを開始する。そして、レプリケーションが完了すると、レプリカファイルシステム210は上記のマスタファイルシステム110の静止点と完全に一致する。レプリカファイルシステム210は、マスタファイルシステム110のコピーであるため、ユーザシステム300からの書き込みは不可であり、読み込みのみ可能である。   When receiving the replication start instruction from the user system 300, the replication execution unit 120 of the master system 100 secures a quiesce point of the master file system 110 at that time, and starts synchronization with the replica file system 210, that is, replication. When the replication is completed, the replica file system 210 completely coincides with the quiesce point of the master file system 110 described above. Since the replica file system 210 is a copy of the master file system 110, writing from the user system 300 is impossible, and only reading is possible.

ユーザシステム300は、レプリカシステム200上のファイルシステムビュー提供部240を介して、一般的なファイル・ディレクトリの操作によって、読み込みのみ可能であるレプリカファイルシステム210からデータの読み込みを行う。   The user system 300 reads data from the replica file system 210 that can only be read by a general file / directory operation via the file system view providing unit 240 on the replica system 200.

レプリカシステム200のファイルシステムビュー提供部240は、重複排除データ保存部230を使用して、ユーザデータやメタデータを読み書き・削除を行い、ユーザシステム300にファイルシステムビューを提供し、読み込みの要求を受けたデータブロックをユーザシステム300に返却する。また、レプリケーション未完のファイルの未転送のデータブロックに対して、ユーザシステム300から読み込みの要求を受け取った場合は、レプリケーション実行部220に対して、ユーザシステム300から要求されたデータブロックの送信を要求する。   The file system view providing unit 240 of the replica system 200 uses the deduplication data storage unit 230 to read / write / delete user data and metadata, provide a file system view to the user system 300, and request a read request. The received data block is returned to the user system 300. In addition, when a read request is received from the user system 300 for an untransferred data block of a file that has not been replicated, the replication execution unit 220 is requested to transmit the data block requested from the user system 300. To do.

マスタシステム100のレプリケーション実行部120は、レプリカシステム200にあるレプリケーション実行部220とネットワークを介して通信を行い、レプリケーションの処理を行う。レプリケーション開始時は、マスタファイルシステム110のクローンであるマスタスナップショット111を作成する。レプリケーション実行中はマスタスナップショット111から前回のレプリケーション以降に更新・追加されたファイルについて、レプリカファイルシステム210へのレプリケーションの処理を行う。また、重複排除データ保存部130に対して、マスタスナップショット111に存在するファイルを構成するデータブロックやそのハッシュ値の取得を要求する。   The replication execution unit 120 of the master system 100 communicates with the replication execution unit 220 in the replica system 200 via a network to perform replication processing. At the start of replication, a master snapshot 111 that is a clone of the master file system 110 is created. During the execution of replication, replication processing to the replica file system 210 is performed for files updated / added from the master snapshot 111 since the previous replication. Further, the deduplication data storage unit 130 is requested to acquire a data block constituting the file existing in the master snapshot 111 and its hash value.

レプリカシステム200のレプリケーション実行部220は、マスタシステム100のレプリケーション実行部120から転送されたデータブロックやファイルのメタデータの書き込みやハッシュ値に一致するデータブロックがあるかどうかの確認を重複排除データ保存部230に要求し、レプリカファイルシステム210の更新を行う。また、レプリカシステム200のレプリケーション実行部220は、ファイルシステムビュー提供部240からの要求を受けて、データブロックの転送要求をマスタシステム100のレプリケーション実行部120に出す。さらに、レプリカシステム200のレプリケーション実行部220は、マスタシステム100のレプリケーション実行部120から送られてきたデータブロックの書き込みを重複排除データ保存部230に要求し、ファイルシステムビュー提供部240に当該データブロックを渡す。   The replication execution unit 220 of the replica system 200 stores the deduplicated data by confirming whether there is a data block matching the hash value or writing of the data block or file metadata transferred from the replication execution unit 120 of the master system 100 Requests the unit 230 to update the replica file system 210. Further, the replication execution unit 220 of the replica system 200 receives a request from the file system view providing unit 240 and issues a data block transfer request to the replication execution unit 120 of the master system 100. Furthermore, the replication execution unit 220 of the replica system 200 requests the deduplication data storage unit 230 to write the data block sent from the replication execution unit 120 of the master system 100, and sends the data block to the file system view provision unit 240. give.

マスタシステム100の重複排除データ保存部130は、レプリケーション実行部120からの要求に応じて、データブロックやそのハッシュ値をレプリケーション実行部120に提供する。   The deduplication data storage unit 130 of the master system 100 provides the data block and its hash value to the replication execution unit 120 in response to a request from the replication execution unit 120.

レプリカシステム200の重複排除データ保存部230は、レプリケーション実行部220からの要求に応じて、指定されたハッシュ値に一致するデータブロックが存在するかどうかの確認を行い、確認結果をレプリケーション実行部220に返却する。また、重複排除データ保存部230は、レプリケーション実行部220からのデータブロックの書き込み要求をうけて、重複排除の処理を行い、所持していないデータブロックを保存する。   The deduplication data storage unit 230 of the replica system 200 confirms whether there is a data block that matches the specified hash value in response to a request from the replication execution unit 220, and displays the confirmation result as the replication execution unit 220. Return to Further, upon receiving a data block write request from the replication execution unit 220, the deduplication data storage unit 230 performs deduplication processing and stores data blocks that are not owned.

続いて、マスタシステム100とレプリカシステム200がそれぞれ備えるレプリケーション実行部120,220の詳細な構成を、図2を参照して説明する。マスタシステム100のレプリケーション実行部120は、ファイルシステムアクセス部121と、データ転送部123と、CA・ハッシュ変換部124と、データアクセス部125と、を備える。レプリカシステム200のレプリケーション実行部220は、ファイルシステムアクセス部221と、リクエスト受付部222と、データ転送部223と、CA・ハッシュ変換部224と、データアクセス部225と、を備える。   Next, detailed configurations of the replication execution units 120 and 220 included in the master system 100 and the replica system 200 will be described with reference to FIG. The replication execution unit 120 of the master system 100 includes a file system access unit 121, a data transfer unit 123, a CA / hash conversion unit 124, and a data access unit 125. The replication execution unit 220 of the replica system 200 includes a file system access unit 221, a request reception unit 222, a data transfer unit 223, a CA / hash conversion unit 224, and a data access unit 225.

マスタシステム100のファイルシステムアクセス部121は、マスタファイルシステム110のクローンであるマスタスナップショット111を作成し、前回のレプリケーション実行時に作成したマスタスナップショットである旧マスタスナップショット112と比較する。そして、ファイルシステムアクセス部121は、前回のレプリケーション以後に作成・更新され、今回のレプリケーションの処理対象であるファイルを抽出し、データアクセス部125にファイルのメタデータやデータブロックの読み込みを要求する。また、ファイルシステムアクセス部121は、CA・ハッシュ変換部124にファイルのメタデータに含まれるCA(コンテンツアドレス)をハッシュ値に変換することを要求する。さらに、ファイルシステムアクセス部121は、データ転送部123にメタデータやデータブロックの転送を要求する。そして、ファイルシステムアクセス部121は、レプリケーション完了時には旧マスタスナップショット112を削除する。   The file system access unit 121 of the master system 100 creates a master snapshot 111 that is a clone of the master file system 110 and compares it with the old master snapshot 112 that is a master snapshot created during the previous replication execution. Then, the file system access unit 121 extracts a file that has been created / updated after the previous replication and is the processing target of the current replication, and requests the data access unit 125 to read the metadata or data block of the file. Further, the file system access unit 121 requests the CA / hash conversion unit 124 to convert the CA (content address) included in the metadata of the file into a hash value. Further, the file system access unit 121 requests the data transfer unit 123 to transfer metadata and data blocks. Then, the file system access unit 121 deletes the old master snapshot 112 when replication is completed.

マスタシステム100のデータ転送部123は、ファイルシステムアクセス部121からの要求を受け付けたメタデータやデータブロックを、レプリカシステム200のデータ転送部223に対して送信し、当該レプリカシステム200のデータ転送部223からの各種リクエストを受付けてファイルシステムアクセス部121に転送する。   The data transfer unit 123 of the master system 100 transmits the metadata or data block that has received the request from the file system access unit 121 to the data transfer unit 223 of the replica system 200, and the data transfer unit of the replica system 200 Various requests from 223 are received and transferred to the file system access unit 121.

マスタシステム100のCA・ハッシュ変換部124は、ファイルシステムアクセス部121からの要求を受け、データブロックを参照するCA(コンテンツアドレス)を、当該データブロックのデータ内容に基づく要約情報であるハッシュ値に変換し、対応するデータブロックの作成日時とともに返却するよう重複排除データ保存部130に要求し、結果をファイルシステムアクセス部121に返却する。   Upon receiving a request from the file system access unit 121, the CA / hash conversion unit 124 of the master system 100 converts the CA (content address) referring to the data block into a hash value that is summary information based on the data content of the data block. The deduplication data storage unit 130 is requested to convert it and return it together with the creation date and time of the corresponding data block, and the result is returned to the file system access unit 121.

マスタシステム100のデータアクセス部125は、ファイルシステムアクセス部121からの要求を受け、メタデータやデータブロックの読み込みを重複排除データ保存部130に要求し、結果をファイルシステムアクセス部121に返却する。   In response to the request from the file system access unit 121, the data access unit 125 of the master system 100 requests the deduplication data storage unit 130 to read metadata and data blocks, and returns the result to the file system access unit 121.

レプリカシステム200のファイルシステムアクセス部221は、レプリカファイルシステム210を更新して、ファイルのメタデータの転送が完了したファイルを、ユーザシステム300に公開する。そして、ファイルシステムアクセス部221は、リクエスト受付部222からの要求を受け、特定のファイルの特定のデータブロックを取得してリクエスト受付部222に返却する。また、ファイルシステムアクセス部221は、データ転送部223からメタデータやデータブロックを受け取り、データ転送部223に対してデータブロックの転送を要求し、データアクセス部225にメタデータやデータブロックの書き込みを要求し、CA・ハッシュ変換部224にメタデータに含まれるハッシュ値のCAへの変換を要求する。   The file system access unit 221 of the replica system 200 updates the replica file system 210 and publishes the file for which the transfer of the file metadata has been completed to the user system 300. Then, the file system access unit 221 receives a request from the request reception unit 222, acquires a specific data block of a specific file, and returns it to the request reception unit 222. Further, the file system access unit 221 receives metadata and data blocks from the data transfer unit 223, requests the data transfer unit 223 to transfer the data blocks, and writes the metadata and data blocks to the data access unit 225. And requests the CA / hash conversion unit 224 to convert the hash value included in the metadata into CA.

レプリカシステム200のリクエスト受付部222は、ファイルシステムビュー提供部240から特定のデータブロックの読み込みの要求を受け付け、ファイルシステムアクセス部221に要求を転送する。そして、リクエスト受付部222は、ファイルシステムアクセス部221から要求に応じて受け取ったデータブロックをファイルシステムビュー提供部240にわたす。   The request reception unit 222 of the replica system 200 receives a request for reading a specific data block from the file system view provision unit 240 and transfers the request to the file system access unit 221. Then, the request receiving unit 222 passes the data block received from the file system access unit 221 in response to the request to the file system view providing unit 240.

レプリカシステム200のデータ転送部223は、マスタシステム100のデータ転送部123から受信したメタデータやデータブロックをファイルシステムアクセス部221にわたす。また、データ転送部223は、ファイルシステムアクセス部221からの各種リクエストを、マスタシステム100のデータ転送部123に送信する。   The data transfer unit 223 of the replica system 200 passes the metadata and data blocks received from the data transfer unit 123 of the master system 100 to the file system access unit 221. In addition, the data transfer unit 223 transmits various requests from the file system access unit 221 to the data transfer unit 123 of the master system 100.

レプリカシステム200のCA・ハッシュ変換部224は、ファイルシステムアクセス部221からの要求を受け付け、ハッシュ値に対応するデータブロックのCAの返却を重複排除データ保存部230に要求する。また、CA・ハッシュ変換部224は、重複排除データ保存部230から受け取ったCAをファイルシステムアクセス部221に返却し、重複排除データ保存部230からCAの返却がなくハッシュ値に対応するデータブロックが存在しない場合は、その旨をファイルシステムアクセス部221に伝える。   The CA / hash conversion unit 224 of the replica system 200 receives a request from the file system access unit 221 and requests the deduplication data storage unit 230 to return the CA of the data block corresponding to the hash value. Further, the CA / hash conversion unit 224 returns the CA received from the deduplication data storage unit 230 to the file system access unit 221, and no data block corresponding to the hash value is returned from the deduplication data storage unit 230 without CA. If it does not exist, this is notified to the file system access unit 221.

レプリカシステム200のデータアクセス部225は、ファイルシステムアクセス部221からの要求を受け付け、重複排除データ保存部230にメタデータやデータブロックの読み書きを要求し、重複排除データ保存部230から受け取ったメタデータやデータブロックをファイルシステムアクセス部221に返却する。   The data access unit 225 of the replica system 200 receives the request from the file system access unit 221, requests the deduplication data storage unit 230 to read and write metadata and data blocks, and receives the metadata received from the deduplication data storage unit 230. Or the data block is returned to the file system access unit 221.

ここで、ストレージシステムに記憶されるファイルの構造を、図3を参照して説明する。ファイルは、重複排除データ保存部130,230が保持する複数のデータブロック(実データ)から構成され、ファイル内におけるデータブロックの順番(位置)がメタデータによって管理される。メタデータは、1つのファイルに複数存在し、それぞれのメタデータは、データブロックに関連する情報(参照する情報)であるコンテンツリンク(リンク情報)として、複数のデータブロックのCA(コンテンツアドレス)もしくはデータブロックのハッシュ値と、当該コンテンツリンクに関連付けられたコンテンツフラグ(フラグ情報)として、コンテンツリンクに格納されているのがCAかハッシュ値かを示すフラグと、を持つ。CAは、重複排除データ保存部130,230が対応するデータブロックを保持するアドレス、つまり、データブロックの格納位置を参照するアドレスであり、システム単位で一意である。例えば、CAは、参照するデータブロックのデータ内容(データブロックのハッシュ値)及びその格納位置に応じて決定される値である。また、ハッシュ値は、データブロックのデータ内容から計算され、データブロック単位で一意である。このため、ハッシュ値は、データブロックのCA(コンテンツアドレス)に基づく値とも言える。   Here, the structure of a file stored in the storage system will be described with reference to FIG. The file is composed of a plurality of data blocks (actual data) held by the deduplication data storage units 130 and 230, and the order (position) of the data blocks in the file is managed by metadata. A plurality of metadata exist in one file, and each metadata is a CA (content address) or a plurality of data blocks as content links (link information) that is information (information to be referenced) related to the data block. It has a hash value of the data block and a flag indicating whether the content link is stored in the content link as a content flag (flag information) associated with the content link. The CA is an address at which the deduplication data storage units 130 and 230 hold the corresponding data block, that is, an address that refers to the storage position of the data block, and is unique for each system. For example, CA is a value determined according to the data content (hash value of the data block) of the data block to be referred to and its storage position. The hash value is calculated from the data content of the data block and is unique for each data block. For this reason, the hash value can also be said to be a value based on the CA (content address) of the data block.

図3の例において、あるファイルは先頭からデータブロック1、データブロック2、・・・の順番で表現される。データブロック1〜3は、メタデータ1によって管理され、続くデータブロック4〜6はメタデータ2によって管理される。メタデータ1に含まれるコンテンツフラグ101とコンテンツリンク111とはペアであり、コンテンツフラグ101がCAを示す場合は、コンテンツリンク111にCAが格納され、コンテンツフラグ101がハッシュ値か未転送データブロックを示す場合は、コンテンツリンク111にハッシュ値が格納される。同様に、コンテンツフラグ102とコンテンツリンク112、コンテンツフラグ103とコンテンツリンク113、コンテンツフラグ201とコンテンツリンク211、コンテンツフラグ202とコンテンツリンク212、コンテンツフラグ203コンテンツリンク213は、それぞれペアである。   In the example of FIG. 3, a certain file is expressed in the order of data block 1, data block 2,. Data blocks 1 to 3 are managed by metadata 1, and subsequent data blocks 4 to 6 are managed by metadata 2. When the content flag 101 and the content link 111 included in the metadata 1 are a pair, and the content flag 101 indicates CA, the CA is stored in the content link 111, and the content flag 101 is a hash value or an untransferred data block. In the case of showing, a hash value is stored in the content link 111. Similarly, the content flag 102 and the content link 112, the content flag 103 and the content link 113, the content flag 201 and the content link 211, the content flag 202 and the content link 212, and the content flag 203 and the content link 213 are a pair.

[動作]
次に、上述した構成のストレージシステムの動作を、図4乃至図10を参照して説明する。
[Operation]
Next, the operation of the storage system configured as described above will be described with reference to FIGS.

(図4:処理A)
レプリケーション開始時、マスタシステム100のファイルシステムアクセス部121は、マスタファイルシステム110のクローンであるマスタスナップショット111を作成する。そして、ファイルシステムアクセス部121は、作成したマスタスナップショット111と旧マスタスナップショット112とを比較して(図4の矢印S1参照)、前回のレプリケーション以後に追加・更新されたファイルを抽出し、レプリケーションの処理対象とする。
(Figure 4: Process A)
At the start of replication, the file system access unit 121 of the master system 100 creates a master snapshot 111 that is a clone of the master file system 110. Then, the file system access unit 121 compares the created master snapshot 111 and the old master snapshot 112 (see arrow S1 in FIG. 4), extracts files that have been added / updated since the previous replication, Target of replication processing.

(図5:処理B)
マスタシステム100のファイルシステムアクセス部121は、上記処理Aにおいて抽出されたファイルについて、データアクセス部125を通じてメタデータを読み込む。そして、ファイルシステムアクセス部121は、CA・ハッシュ変換部124を通じて、メタデータ内にコンテンツリンクとして格納されているCA(コンテンツアドレス)を、ハッシュ値に変換して格納し、このコンテンツリンクに対応してメタデータ内に格納されているコンテンツフラグを、ハッシュ値を示すフラグに設定する。そして、ファイルシステムアクセス部121は、CAをハッシュ値に変換したメタデータを、データ転送部123を通じて、レプリカシステム200のデータ転送部223に送信する(図5の矢印S2参照)。なお、CAからハッシュ値への変換は、CAの一部として含まれるハッシュ値部分を抜き出すことで行うか、あるいは、CAにて参照するデータブロックからハッシュ値を算出して行う。
(Figure 5: Process B)
The file system access unit 121 of the master system 100 reads metadata about the file extracted in the process A through the data access unit 125. Then, the file system access unit 121 converts the CA (content address) stored in the metadata as a content link through the CA / hash conversion unit 124 into a hash value and stores it, and corresponds to the content link. The content flag stored in the metadata is set as a flag indicating a hash value. Then, the file system access unit 121 transmits the metadata obtained by converting the CA into the hash value to the data transfer unit 223 of the replica system 200 through the data transfer unit 123 (see arrow S2 in FIG. 5). Note that the conversion from the CA to the hash value is performed by extracting the hash value portion included as a part of the CA, or by calculating the hash value from the data block referenced by the CA.

ここで、マスタシステム100は、上述したようにCAをハッシュ値に変換する際、同時にCA・ハッシュ変換部124から返却されるデータブロックの作成時刻が前回のレプリケーションの開始時刻より後である場合、下記の処理Cを並行して行う。この操作を、ファイルを構成するすべてのメタデータについて行う。   Here, when the master system 100 converts the CA into a hash value as described above, when the creation time of the data block returned from the CA / hash conversion unit 124 is later than the previous replication start time, The following process C is performed in parallel. This operation is performed for all metadata constituting the file.

レプリカシステム200のデータ転送部223は、マスタシステム100から受け取ったメタデータをファイルシステムアクセス部221にわたし、ファイルシステムアクセス部221は、メタデータをデータアクセス部225に渡して、重複排除データ保存部230に格納する。この時、レプリカシステム200では、メタデータに含まれるハッシュ値はCAに変換されず、そのまま書き込まれるため、高速に処理される。   The data transfer unit 223 of the replica system 200 transfers the metadata received from the master system 100 to the file system access unit 221, and the file system access unit 221 passes the metadata to the data access unit 225 to deduplicate data storage unit 230. At this time, in the replica system 200, the hash value included in the metadata is not converted to CA, but is written as it is, so that it is processed at high speed.

レプリカシステム200のファイルシステムアクセス部221は、マスタシステム100から送信された、ファイルを構成するすべてのメタデータの書き込みが完了すると、レプリカファイルシステム210にディレクトリエントリを作成し、当該ファイルをユーザシステム300からアクセス可能とする。   When the file system access unit 221 of the replica system 200 completes writing of all the metadata constituting the file transmitted from the master system 100, the file system access unit 221 creates a directory entry in the replica file system 210 and stores the file in the user system 300. Accessible from.

(図6:処理C)
上述した処理Bの過程で、マスタシステム100のファイルシステムアクセス部121が、処理対象のファイルを構成するデータブロックに、前回のレプリケーションの開始時刻より後に作成されたデータブロックを発見した場合には、以下の処理を並行して行う。まず、発見されたデータブロックは、新規に作成されたデータブロックであるため、レプリカシステム200が所持していない可能性が高いと判断し、当該データブロックに対応するハッシュ値を、データ転送部123に渡してレプリカシステム200に送信し、当該レプリカシステム200に対して同一のデータブロックを所持しているかどうかの確認のリクエスト(要求)を出す(図6の矢印S3参照)。
(Figure 6: Process C)
When the file system access unit 121 of the master system 100 finds a data block created after the previous replication start time in the data block constituting the file to be processed in the process B described above, The following processing is performed in parallel. First, since the discovered data block is a newly created data block, it is determined that there is a high possibility that the replica system 200 does not have it, and the hash value corresponding to the data block is determined as the data transfer unit 123. Is transmitted to the replica system 200, and a request (request) for confirming whether or not the same data block is possessed is issued to the replica system 200 (see arrow S3 in FIG. 6).

上記リクエスト(確認要求)を受け取ったレプリカシステム200のデータ転送部223は、ファイルシステムアクセス部221にリクエスト及びハッシュ値をわたす。ファイルシステムアクセス部221は、CA・ハッシュ変換部224に、ハッシュ値をCAに変換するよう依頼し、CA・ハッシュ変換部224は重複排除データ保存部230に要求して、変換したCAをファイルシステムアクセス部221に返却する。   The data transfer unit 223 of the replica system 200 that has received the request (confirmation request) passes the request and the hash value to the file system access unit 221. The file system access unit 221 requests the CA / hash conversion unit 224 to convert the hash value to CA, and the CA / hash conversion unit 224 requests the deduplication data storage unit 230 to convert the converted CA to the file system. Return to the access unit 221.

なお、ハッシュ値をCAに変換する処理は、例えば、レプリカシステム200内に、ハッシュ値を含むCAが存在するかを検索し、かかるCAが存在する場合にはその参照先に対応するデータブロックが存在するため、存在したCAそのものを変換後のCAとする。あるいは、レプリカシステム200内にハッシュ値が同一となるデータブロックが存在するかを検索し、存在したデータブロックを参照するCAを、変換後のCAとする。   In the process of converting the hash value into CA, for example, it is searched whether there is a CA including the hash value in the replica system 200. If such CA exists, a data block corresponding to the reference destination is found. Since it exists, the existing CA itself is set as the converted CA. Alternatively, it is searched whether there is a data block having the same hash value in the replica system 200, and a CA that refers to the existing data block is set as a CA after conversion.

一方で、レプリカシステム200内にハッシュ値に対応するデータブロックが存在しない場合は、CA・ハッシュ変換部224は、重複排除データ保存部230より、該当するデータブロックが存在しないことを通知され、ファイルシステムアクセス部221にその旨を通知する。   On the other hand, when the data block corresponding to the hash value does not exist in the replica system 200, the CA / hash conversion unit 224 is notified by the deduplication data storage unit 230 that the corresponding data block does not exist, and the file This is notified to the system access unit 221.

レプリカシステム200のファイルシステムアクセス部221は、ハッシュ値に対応するデータブロックが存在してCAを受け取った場合は、何もしない。一方で、ファイルシステムアクセス部221は、ハッシュ値に対応するデータブロックが存在しない場合は、データ転送部223を通じて、該当するデータブロックの送信のリクエストをマスタシステム100に出す。例えば、ハッシュ値をマスタシステム100に送信して、かかるハッシュ値に対応するデータブロックの送信をリクエストする(図6の矢印S4参照)。   The file system access unit 221 of the replica system 200 does nothing when a data block corresponding to the hash value exists and receives a CA. On the other hand, when there is no data block corresponding to the hash value, the file system access unit 221 issues a transmission request for the corresponding data block to the master system 100 through the data transfer unit 223. For example, the hash value is transmitted to the master system 100, and the transmission of the data block corresponding to the hash value is requested (see arrow S4 in FIG. 6).

マスタシステム100のデータ転送部123は、レプリカシステム200からデータブロックの送信のリクエストを受け取ると、ファイルシステムアクセス部121にリクエストをわたす。ファイルシステムアクセス部121は、データアクセス部125に該当するデータブロックの読み込みを要求し、データアクセス部125は、重複排除データ保存部130にデータブロックの読み込みを要求する。データアクセス部125は、重複排除データ保存部130から受け取ったデータブロックをファイルシステムアクセス部121に返却し、ファイルシステムアクセス部121は、データ転送部123を通じて、レプリカシステム200にデータブロックを転送する(図6の矢印S5参照)。   When receiving the data block transmission request from the replica system 200, the data transfer unit 123 of the master system 100 passes the request to the file system access unit 121. The file system access unit 121 requests the data access unit 125 to read the corresponding data block, and the data access unit 125 requests the deduplication data storage unit 130 to read the data block. The data access unit 125 returns the data block received from the deduplication data storage unit 130 to the file system access unit 121, and the file system access unit 121 transfers the data block to the replica system 200 through the data transfer unit 123 ( (See arrow S5 in FIG. 6).

レプリカシステム200のデータ転送部223は、マスタシステム100からデータブロックを受け取ると、ファイルシステムアクセス部221に当該データブロックをわたす。ファイルシステムアクセス部221は、当該データブロックをデータアクセス部225に渡して、重複排除データ保存部230に書き込みを要求する。   When the data transfer unit 223 of the replica system 200 receives the data block from the master system 100, it passes the data block to the file system access unit 221. The file system access unit 221 passes the data block to the data access unit 225 and requests the deduplication data storage unit 230 to write.

図6の例では、データブロックC,D,Eが前回のレプリケーション以後にマスタシステム100において作成・更新されたデータブロックである。レプリカシステム200は、データブロックCはすでに所持しているため、データブロックD,Eのみ転送するようマスタシステム100に要求し、受け取ったデータブロックD,Eを書き込む。   In the example of FIG. 6, data blocks C, D, and E are data blocks created and updated in the master system 100 after the previous replication. Since the replica system 200 already has the data block C, the replica system 200 requests the master system 100 to transfer only the data blocks D and E, and writes the received data blocks D and E.

(図7:処理D)
上述した処理Bの完了後、つまり、マスタシステム100からレプリカシステム200にメタデータを送信した後は、以下処理を行う。
(Figure 7: Process D)
After completion of the above-described processing B, that is, after the metadata is transmitted from the master system 100 to the replica system 200, the following processing is performed.

まず、レプリカシステム200のファイルシステムアクセス部221は、レプリカファイルシステム210にディレクトリエントリを作成して、ユーザシステム300からアクセス可能としたファイルのすべてのメタデータに含まれるハッシュ値について、以下の処理を行う。つまり、メタデータ内のコンテンツフラグがハッシュ値を示すフラグであるコンテンツリンク(ハッシュ値)に対して、以下の処理を行う。   First, the file system access unit 221 of the replica system 200 creates a directory entry in the replica file system 210 and performs the following processing on the hash values included in all metadata of the files that can be accessed from the user system 300. Do. That is, the following processing is performed on a content link (hash value) whose content flag in the metadata indicates a hash value.

ファイルシステムアクセス部221は、データアクセス部225に要求を出して重複排除データ保存手段230よりファイルのメタデータを取得し、取得したメタデータに含まれるすべてのハッシュ値をCA・ハッシュ変換部224に渡す。そして、CA・ハッシュ変換部224は、重複排除データ保存部230より、ハッシュ値に対応するCAを取得する。このとき、ハッシュ値に対応するCAの取得処理は、例えば、上記処理Cで説明した処理と同様である。   The file system access unit 221 sends a request to the data access unit 225 to acquire file metadata from the deduplication data storage unit 230, and sends all hash values included in the acquired metadata to the CA / hash conversion unit 224. hand over. The CA / hash conversion unit 224 acquires the CA corresponding to the hash value from the deduplication data storage unit 230. At this time, the CA acquisition process corresponding to the hash value is the same as the process described in the process C, for example.

ファイルシステムアクセス部221は、CA・ハッシュ変換部224にて対応するCAを取得できたハッシュ値については、メタデータ内のコンテンツフラグをCAを示すフラグに変更し、メタデータ内のコンテンツリンクにCAを格納する。重複排除データ保存部230が対応するデータブロックを保持しておらず、対応するCAを取得できなかったハッシュ値については、メタデータ内のコンテンツフラグを未転送データブロックを示すフラグに変更し、データ転送部223にハッシュ値を渡して、対応するデータブロックの転送をリクエスト(要求)する(図7の矢印S6参照)。データ転送部223は、受け取ったリクエストをマスタシステム100のデータ転送部123に送信する。つまり、レプリカシステム200は、CAを取得できなかったハッシュ値に対応するデータブロックはレプリカシステム200内に存在しないと判断し、マスタシステム100に要求する。   The file system access unit 221 changes the content flag in the metadata to a flag indicating CA for the hash value for which the CA / hash conversion unit 224 has acquired the corresponding CA, and adds the CA to the content link in the metadata. Is stored. For the hash value for which the deduplication data storage unit 230 does not hold the corresponding data block and the corresponding CA could not be acquired, the content flag in the metadata is changed to a flag indicating an untransferred data block, and the data The hash value is passed to the transfer unit 223 and a request for transfer of the corresponding data block is made (see arrow S6 in FIG. 7). The data transfer unit 223 transmits the received request to the data transfer unit 123 of the master system 100. That is, the replica system 200 determines that the data block corresponding to the hash value for which the CA could not be acquired does not exist in the replica system 200, and requests the master system 100 to make a request.

マスタシステム100のデータ転送部123は、ファイルシステムアクセス部121にリクエストをわたす。ファイルシステムアクセス部121はデータアクセス部125に要求して重複排除データ保存部130よりハッシュ値に対応するデータブロックを読み込む。ファイルシステムアクセス部121は、読み込んだデータブロックをデータ転送部123にわたし、データ転送部123はレプリカシステム200のデータ転送部223にデータブロックを送信する。   The data transfer unit 123 of the master system 100 passes the request to the file system access unit 121. The file system access unit 121 requests the data access unit 125 to read the data block corresponding to the hash value from the deduplication data storage unit 130. The file system access unit 121 sends the read data block to the data transfer unit 123, and the data transfer unit 123 transmits the data block to the data transfer unit 223 of the replica system 200.

レプリカシステム200のデータ転送部223は、ファイルシステムアクセス部221にデータブロックをわたし、ファイルシステムアクセス部221は、データブロックをデータアクセス部225に渡して重複排除データ保存部230に書き込む。ファイルシステムアクセス部221は、書き込んだデータブロックの格納位置を参照するCAをデータアクセス部225より受け取り、メタデータ内の対応するコンテンツリンクに格納し、対応するコンテンツフラグをCAを示すフラグに変更する。   The data transfer unit 223 of the replica system 200 passes the data block to the file system access unit 221, and the file system access unit 221 passes the data block to the data access unit 225 and writes it to the deduplication data storage unit 230. The file system access unit 221 receives the CA that refers to the storage position of the written data block from the data access unit 225, stores it in the corresponding content link in the metadata, and changes the corresponding content flag to a flag indicating CA. .

レプリカシステム200内のメタデータのすべてのコンテンツリンクがCAになった場合、ファイルシステムアクセス部221は、データアクセス部225にメタデータを渡して、重複排除データ保存部230に書き込む。   When all the content links of the metadata in the replica system 200 become CA, the file system access unit 221 passes the metadata to the data access unit 225 and writes it in the deduplication data storage unit 230.

そして、ファイルシステムアクセス部221は、上記の処理を、処理対象ファイルに含まれるすべてのメタデータについて行う。   Then, the file system access unit 221 performs the above processing for all metadata included in the processing target file.

(図8:処理E)
上述した処理Bが完了して、レプリカファイルシステム210で閲覧可能となったファイルにユーザシステム300から読み込みのアクセスが発生した場合の処理を、いかに説明する。ファイルシステムビュー提供部240は、アクセスが発生したファイルのメタデータを読み込み、ユーザシステム300からの読み込みの対象のデータブロックに対応するメタデータ内のコンテンツリンクがすでにCAの場合は、重複排除データ保存部230より、データブロックを読み込み、ユーザシステム300にデータを返却する。
(Figure 8: Process E)
A description will be given of a process in the case where a read access has occurred from the user system 300 to a file that can be browsed by the replica file system 210 after the process B described above is completed. The file system view providing unit 240 reads the metadata of the file that has been accessed, and stores the deduplication data when the content link in the metadata corresponding to the data block to be read from the user system 300 is already CA. The data block is read from the unit 230 and the data is returned to the user system 300.

一方、ファイルシステムビュー提供部240は、ユーザシステム300からの読み込み対象のデータブロックに対応するメタデータ内のコンテンツフラグが、ハッシュ値を示すフラグであった場合、リクエスト受付部222に当該データブロックの読み込みを要求する。リクエスト受付部222はファイルシステムアクセス部221にリクエストをわたし、ファイルシステムアクセス部221は、上述した処理Dにおいて、コンテンツフラグがハッシュ値だった場合と同様の処理を行ってデータブロックを入手する。   On the other hand, when the content flag in the metadata corresponding to the data block to be read from the user system 300 is a flag indicating a hash value, the file system view providing unit 240 sends the data block of the data block to the request receiving unit 222. Request reading. The request reception unit 222 sends a request to the file system access unit 221, and the file system access unit 221 performs the same processing as in the case where the content flag is a hash value in the processing D described above, and obtains a data block.

具体的に、ファイルシステムアクセス部221は、まず、読み込み対象のデータブロックのハッシュ値をCAに変換できるか、つまり、ハッシュ値に対応するデータブロックがレプリカシステム200内に存在するか調べる。ハッシュ値がCAに変換できず、データブロックがレプリカシステム200内に存在しない場合には、当該ハッシュ値に対応するデータブロックをマスタシステム100にリクエストする。そして、ファイルシステムアクセス部221は、マスタシステム100から取得したデータブロックをリクエスト受付部222にわたす。リクエスト受付部222はファイルシステムビュー提供部240にデータブロックをわたし、ファイルシステムビュー提供部240は、データをユーザシステム300に返却する。   Specifically, the file system access unit 221 first checks whether the hash value of the data block to be read can be converted into CA, that is, whether the data block corresponding to the hash value exists in the replica system 200. If the hash value cannot be converted to CA and the data block does not exist in the replica system 200, the master system 100 is requested for the data block corresponding to the hash value. Then, the file system access unit 221 passes the data block acquired from the master system 100 to the request reception unit 222. The request receiving unit 222 sends the data block to the file system view providing unit 240, and the file system view providing unit 240 returns the data to the user system 300.

例えば、図8の例では、レプリカシステム200において、データブロックDの読み込みがあったが、データブロックDが存在していない場合には、レプリカシステム200がデータブロックDをマスタシステム100に要求する(矢印S8参照)。これに応じて、マスタシステム100は、データブロックDをレプリカシステム200に送信することで(矢印S9参照)、レプリカシステム200はデータブロックDを格納し、対応するメタデータのコンテンツリンクにCAを格納する。   For example, in the example of FIG. 8, the data block D is read in the replica system 200, but if the data block D does not exist, the replica system 200 requests the data block D from the master system 100 ( (See arrow S8). In response to this, the master system 100 transmits the data block D to the replica system 200 (see arrow S9), so that the replica system 200 stores the data block D and stores CA in the content link of the corresponding metadata. To do.

(図9:処理F)
すべてのファイルの処理が完了し、マスタスナップショット111とレプリカファイルシステム210の同期が完了した場合の処理を、以下に説明する。レプリカシステム200のファイルシステムアクセス部221は、レプリカシステム200のデータ転送部223とマスタシステム100のデータ転送部123を通じて、マスタシステム100のファイルシステムアクセス部121にレプリケーションが完了したことを通知する。これに応じて、マスタシステム100のファイルシステムアクセス部121は、旧マスタスナップショット112を削除する。マスタスナップショット111は、次回のレプリケーション実行時に旧マスタスナップショットとして使用するために残しておく。
(Figure 9: Process F)
Processing when all files have been processed and synchronization between the master snapshot 111 and the replica file system 210 has been completed will be described below. The file system access unit 221 of the replica system 200 notifies the file system access unit 121 of the master system 100 that replication has been completed through the data transfer unit 223 of the replica system 200 and the data transfer unit 123 of the master system 100. In response to this, the file system access unit 121 of the master system 100 deletes the old master snapshot 112. The master snapshot 111 is left for use as the old master snapshot when the next replication is executed.

(図10:全体の流れ)
上述したレプリケーションの全体の流れを、図10を用いて説明する。レプリケーションが開始されると、マスタシステム100は、まず上記処理Aを行ってマスタスナップショットを作成し、処理対象のファイルを抽出する。
(Figure 10: Overall flow)
The overall flow of the replication described above will be described with reference to FIG. When replication is started, the master system 100 first performs the process A to create a master snapshot, and extracts a file to be processed.

マスタシステム100は、上記処理Aが完了すると上記処理Bを開始し、ファイルのメタデータをレプリカ側に転送する。マスタシステム100は、処理Bと並行して処理Cを行い、レプリカシステム200側が所持していない可能性が高いブロックについて、レプリカシステム100に対する所持確認と転送処理を行う。   When the process A is completed, the master system 100 starts the process B, and transfers the file metadata to the replica side. The master system 100 performs the process C in parallel with the process B, and performs possession confirmation and transfer processing with respect to the replica system 100 for blocks that are highly likely not to be possessed by the replica system 200 side.

レプリカシステム200は、処理Bが完了すると、処理Dを開始し、メタデータの先頭からハッシュ値をCAに変換していく。レプリカシステム200において、ユーザから未転送データブロックへの読み込みが発生した場合、他の処理に優先して処理Eを行って、当該データブロックをマスタシステム100からレプリカシステム200に転送する処理を行い、ユーザにデータを返却する。   When the process B is completed, the replica system 200 starts the process D and converts the hash value from the top of the metadata into CA. In the replica system 200, when a user reads an untransferred data block, processing E is performed in preference to other processing, and processing for transferring the data block from the master system 100 to the replica system 200 is performed. Return data to the user.

すべてのファイルについて処理Dが完了すると、処理Fを行って、旧マスタスナップショットを削除し、レプリケーションを完了する。   When process D is completed for all files, process F is performed to delete the old master snapshot and complete replication.

以上のように、本発明によると、完了まで時間がかかるレプリケーションにおいても、ユーザは迅速にレプリカファイルシステム上でデータを参照することが可能となる。また、前回のレプリケーション以後にマスタファイルシステムに作成されたデータブロックはレプリカシステムが所持していない可能性が高いため、そのようなデータブロックは発見次第処理することで、ネットワークを使用しない時間を極力減らしてネットワーク帯域利用を効率化し、ファイルの転送処理を高速に行うことが可能となる。   As described above, according to the present invention, a user can quickly refer to data on a replica file system even in replication that takes time to complete. In addition, data blocks created in the master file system after the previous replication are likely not owned by the replica system, so such data blocks are processed as soon as they are discovered, minimizing the time when the network is not used. By reducing the network bandwidth utilization efficiency, file transfer processing can be performed at high speed.

ここで、図10に示す例では、ファイルを一つずつ処理しているが、複数のファイルを同時に処理することも可能である。また、処理Bの完了をまたずに処理Dを開始することも可能である。また、処理Eにおいて、ユーザからアクセスが発生したファイルについては、読み込み対象となったデータブロックだけでなく、ファイル全体について最優先で処理するような最適化も可能である。さらに、アクセスの局所性に着目し、読み込み対象となったデータブロックだけでなく、近いオフセット位置にあるデータブロックも処理の優先度を上げて、ユーザのアクセス待ち時間の短縮を図ることも可能である。   Here, in the example shown in FIG. 10, files are processed one by one, but a plurality of files can be processed simultaneously. Further, the process D can be started without completing the process B. Further, in the process E, with respect to the file that has been accessed by the user, it is possible to optimize not only the data block to be read but also the entire file with the highest priority. In addition, focusing on the locality of access, it is possible to increase the priority of processing not only for the data block to be read but also for the data block at a close offset position, thereby reducing the access waiting time of the user. is there.

<付記>
上記実施形態の一部又は全部は、以下の付記のようにも記載されうる。以下、本発明におけるストレージシステム(図11参照)、レプリカ側ストレージ装置、プログラム、レプリケーション方法の構成の概略を説明する。但し、本発明は、以下の構成に限定されない。
<Appendix>
Part or all of the above-described embodiment can be described as in the following supplementary notes. The outline of the configuration of the storage system (see FIG. 11), replica-side storage apparatus, program, and replication method in the present invention will be described below. However, the present invention is not limited to the following configuration.

(付記1)
重複記憶排除機能を有するマスタ側ストレージ装置10とレプリカ側ストレージ装置20とを備え、
前記マスタ側ストレージ装置10及び前記レプリカ側ストレージ装置20は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部11,12をそれぞれ備えており、
前記マスタ側ストレージ装置10の前記レプリケーション実行部11は、当該マスタ側ストレージ装置10に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを前記レプリカ側ストレージ装置20に送信し、その後、当該レプリカ側ストレージ装置20からの要求に応じて前記実データを前記レプリカ側ストレージ装置20に送信し、
前記レプリカ側ストレージ装置20の前記レプリケーション実行部21は、前記マスタ側ストレージ装置10から送信された前記メタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置20に記憶されていない前記実データを前記マスタ側ストレージ装置10に要求し、当該要求に応じて前記マスタ側ストレージ装置10から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置20は、前記マスタ側ストレージ装置10から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置20に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置10に要求するファイルシステムアクセス部22を備えた、
ストレージシステム。
(Appendix 1)
A master side storage device 10 having a duplicate storage elimination function and a replica side storage device 20;
The master-side storage device 10 and the replica-side storage device 20 are respectively provided with replication execution units 11 and 12 for replicating real data constituting files stored in the master-side storage device to the replica-side storage device. And
The replication execution unit 11 of the master-side storage apparatus 10 sends metadata that is a value based on address data that refers to the storage location of the actual data stored in the master-side storage apparatus 10 to the replica-side storage apparatus 20. To the replica-side storage apparatus 20 in response to a request from the replica-side storage apparatus 20,
The replication execution unit 21 of the replica-side storage device 20 receives and stores the metadata transmitted from the master-side storage device 10, and then stores it in the replica-side storage device 20 based on the metadata. Requesting the actual data that has not been made to the master storage device 10, and receiving and storing the actual data transmitted from the master storage device 10 in response to the request,
Further, the replica-side storage device 20 can access a file composed of the actual data corresponding to the metadata based on the metadata received from the master-side storage device 10 and stored. Forming a system and requesting the real data to the master storage device 10 based on the metadata when the real data constituting the accessed file is not stored in the replica storage device 20 A file system access unit 22;
Storage system.

(付記2)
付記1に記載のストレージシステムであって、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を前記メタデータとして前記レプリカ側ストレージ装置に送信し、その後、当該レプリカ側ストレージ装置からの前記要約情報に基づく要求に応じて当該要約情報に対応する前記実データを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された前記メタデータとしての前記要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記レプリカ側ストレージ装置の前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
(Appendix 2)
The storage system according to attachment 1, wherein
The replication execution unit of the master-side storage device transmits summary information, which is a value based on the data content of the actual data constituting the file, to the replica-side storage device as the metadata, and then the replica-side storage device In response to a request based on the summary information from the real data corresponding to the summary information is transmitted to the replica storage device,
The replication execution unit of the replica storage device receives and stores the summary information as the metadata transmitted from the master storage device, and then stores the summary information in the replica storage device based on the summary information. Requesting the master side storage device for the real data not stored, storing the real data transmitted from the master side storage device in response to the request,
The file system access unit of the replica-side storage apparatus forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage apparatus. Requesting the actual storage data from the master storage device based on the summary information when the actual data constituting the file is not stored in the replica storage device;
Storage system.

(付記3)
付記2に記載のストレージシステムであって、
前記レプリカ側ストレージ装置の前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記要約情報を前記マスタ側ストレージ装置に送信して、前記レプリカ側ストレージ装置に記憶されていないファイルを構成する前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
(Appendix 3)
The storage system according to appendix 2,
The replication execution unit and the file system access unit of the replica-side storage device transmit the summary information to the master-side storage device, and the real data constituting a file not stored in the replica-side storage device Request to the master storage device,
Storage system.

(付記4)
付記2に記載のストレージシステムであって、
前記レプリカ側ストレージ装置の前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記要約情報に基づいて、当該要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
(Appendix 4)
The storage system according to appendix 2,
Based on the summary information received and stored from the master storage device, the replication execution unit and the file system access unit of the replica side storage device receive the address data corresponding to the summary information from the replica side storage. When stored in the device, the actual data stored in the replica storage device referenced by the corresponding address data is used as replicated data, and the address data corresponding to the summary information is If not stored in the replica-side storage device, the summary information is sent to the master-side storage device to request the actual data from the master-side storage device;
Storage system.

(付記5)
付記4に記載のストレージシステムであって、
前記メタデータは、前記実データに関連する情報を格納するリンク情報と、当該リンク情報に対応付けられたフラグ情報と、を含んで構成されており、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、前記メタデータ内に、前記リンク情報として前記要約情報を格納し、前記フラグ情報として要約情報フラグを格納して、当該メタデータを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、
前記マスタ側ストレージ装置から送信された前記メタデータを受信して記憶し、
その後、記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報としてアドレスデータフラグを格納し、前記アドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、
記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶して、当該格納した実データの格納位置を参照する前記アドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報として前記アドレスデータフラグを格納し、
前記レプリカ側ストレージ装置の前記ファイルシステムアクセス部は、アクセスされたファイルの前記メタデータ内の前記フラグ情報が前記要約情報フラグである場合には、当該メタデータ内の前記リンク情報として格納されている前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
(Appendix 5)
The storage system according to appendix 4, wherein
The metadata includes link information for storing information related to the actual data, and flag information associated with the link information.
The replication execution unit of the master storage device stores the summary information as the link information in the metadata, stores a summary information flag as the flag information, and stores the metadata in the replica storage device To
The replication execution unit of the replica storage device
Receive and store the metadata sent from the master storage device,
After that, if the address data corresponding to the summary information in the stored metadata is stored in the replica storage device, the corresponding address data is stored as the link information in the metadata. In addition, an address data flag is stored as the flag information in the metadata, and the actual data stored in the replica storage device referred to by the address data is used as replicated data.
If the address data corresponding to the summary information in the stored metadata is not stored in the replica-side storage device, the summary information is transmitted to the master-side storage device, and the real data is sent to the master-side storage device. Requesting the storage device, storing the actual data transmitted from the master storage device in response to the request, and referring to the storage location of the stored actual data in the metadata Store as link information, store the address data flag as the flag information in the metadata,
When the flag information in the metadata of the accessed file is the summary information flag, the file system access unit of the replica storage device is stored as the link information in the metadata. Sending the summary information to the master storage device to request the actual data from the master storage device;
Storage system.

(付記6)
付記2乃至5のいずれかに記載のストレージシステムであって、
前記レプリカ側ストレージ装置の前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記要約情報に基づいて、当該要約情報に対応する前記実データが前記レプリカ側ストレージ装置に記憶されているか否かを判定し、記憶されていない前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
(Appendix 6)
The storage system according to any one of appendices 2 to 5,
Based on the summary information received and stored from the master storage device, the replication execution unit and the file system access unit of the replica side storage device store the real data corresponding to the summary information in the replica side storage. Determining whether or not the data is stored in a device, and requesting the master side storage device to store the actual data,
Storage system.

(付記7)
付記2乃至6のいずれかに記載のストレージシステムであって、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、前記メタデータを前記レプリカ側ストレージ装置に送信すると共に、レプリケーションの対象となる前記実データの作成時刻が前回のレプリケーションの開始時刻よりも後である場合に、当該実データのデータ内容に基づく前記要約情報を前記レプリカ側ストレージ装置に送信して当該レプリカ側ストレージ装置に対して前記実データが記憶されているか否かの確認を要求し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置からの前記実データが記憶されているか否かの確認要求に応じて、当該マスタ側ストレージ装置から送信された前記要約情報に基づいて確認要求された前記実データが前記レプリカ側ストレージ装置に記憶されているか否かを確認し、記憶されていない前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
(Appendix 7)
The storage system according to any one of appendices 2 to 6,
The replication execution unit of the master storage device transmits the metadata to the replica storage device, and the creation time of the actual data to be replicated is later than the start time of the previous replication To send the summary information based on the data content of the actual data to the replica-side storage device, requesting the replica-side storage device to check whether the actual data is stored,
The replication execution unit of the replica-side storage apparatus is based on the summary information transmitted from the master-side storage apparatus in response to a confirmation request as to whether or not the actual data is stored from the master-side storage apparatus. Confirming whether or not the real data requested for confirmation is stored in the replica storage device, and requesting the master storage device to store the real data,
Storage system.

(付記8−1)
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置であって、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を備え、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備えた、
レプリカ側ストレージ装置。
(Appendix 8-1)
A replica-side storage device that has a duplicate storage elimination function and is connected to the master-side storage device,
A replication execution unit that replicates real data constituting the file stored in the master storage device to the replica storage device;
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
In addition, based on the metadata received and stored from the master storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed and accessed. A file system access unit for requesting the real data to the master storage device based on the metadata when the real data constituting the file is not stored in the replica storage device;
Replica side storage device.

(付記8−2)
付記8−1に記載のレプリカ側ストレージ装置であって、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求する、
レプリカ側ストレージ装置。
(Appendix 8-2)
The replica-side storage device according to attachment 8-1,
The replication execution unit receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master storage device as the metadata, and then stores the summary information in the summary information. Requesting the master-side storage device to store the actual data that is not stored in the replica-side storage device, and storing the actual data transmitted from the master-side storage device in response to the request,
The file system access unit forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage device, and configures the accessed file Requesting the real data to the master storage device based on the summary information when the real data is not stored in the replica storage device;
Replica side storage device.

(付記9−1)
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置に、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を実現させるとともに、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置に、
前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を実現させる、
ためのプログラム。
(Appendix 9-1)
A replica storage device that has a duplicate storage exclusion function and is connected to the master storage device.
Realizing a replication execution unit that replicates the actual data constituting the file stored in the master storage device to the replica storage device,
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
Furthermore, in the replica side storage device,
Based on the metadata received and stored from the master-side storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the file that has been accessed Realizing a file system access unit that requests the real data to the master storage device based on the metadata when the real data constituting the data is not stored in the replica storage device;
Program for.

(付記9−2)
付記9−1に記載のプログラムであって、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求する、
プログラム。
(Appendix 9-2)
The program according to appendix 9-1,
The replication execution unit receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master storage device as the metadata, and then stores the summary information in the summary information. Requesting the master-side storage device to store the actual data that is not stored in the replica-side storage device, and storing the actual data transmitted from the master-side storage device in response to the request,
The file system access unit forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage device, and configures the accessed file Requesting the real data to the master storage device based on the summary information when the real data is not stored in the replica storage device;
program.

(付記10−1)
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置によるレプリケーション方法であって、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションする際に、
前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、
前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求する、
レプリケーション方法。
(Appendix 10-1)
A replication method by a replica storage device having a duplicate storage exclusion function and connected to a master storage device,
When replicating the real data constituting the file stored in the master storage device to the replica storage device, the replica storage device
Received and stored metadata, which is a value based on address data sent from the master storage device and referring to the storage location of the actual data stored in the master storage device, and then the metadata Requesting the master side storage device to store the real data that is not stored in the replica side storage device, and receiving and storing the real data transmitted from the master side storage device in response to the request,
Furthermore, the replica storage device
Based on the metadata received and stored from the master-side storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the file that has been accessed Requesting the master storage device for the actual data based on the metadata when the replica data that is not stored in the replica storage device is,
Replication method.

(付記10−2)
付記10−1に記載のレプリケーション方法であって、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
さらに、前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求する、
レプリケーション方法。
(Appendix 10-2)
The replication method according to appendix 10-1,
The replica-side storage device receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master-side storage device as the metadata, and then stores the summary information Request the real data not stored in the replica storage device based on the master storage device, and store the real data transmitted from the master storage device in response to the request,
Further, the replica storage device forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master storage device, and the accessed file is Requesting the real data to the master storage device based on the summary information when the real data to be configured is not stored in the replica storage device;
Replication method.

なお、上述したプログラムは、記憶装置に記憶されていたり、コンピュータが読み取り可能な記録媒体に記録されている。例えば、記録媒体は、フレキシブルディスク、光ディスク、光磁気ディスク、及び、半導体メモリ等の可搬性を有する媒体である。   Note that the above-described program is stored in a storage device or recorded on a computer-readable recording medium. For example, the recording medium is a portable medium such as a flexible disk, an optical disk, a magneto-optical disk, and a semiconductor memory.

以上、上記実施形態等を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明の範囲内で当業者が理解しうる様々な変更をすることができる。   Although the present invention has been described with reference to the above-described embodiment and the like, the present invention is not limited to the above-described embodiment. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.

10 マスタ側ストレージ装置
11 レプリケーション実行部
20 レプリカ側ストレージ装置
21 レプリケーション実行部
22 ファイルシステムアクセス部
100 マスタシステム
110 マスタファイルシステム
111 マスタスナップショット
112 旧マスタスナップショット
120 レプリケーション実行部
121 ファイルシステムアクセス部
123 データ転送部
124 CA・ハッシュ変換部
125 データアクセス部
130 重複排除データ保存部
140 ファイルシステムビュー提供部
200 レプリカシステム
210 レプリカファイルシステム
220 レプリケーション実行部
221 ファイルシステムアクセス部
222 リクエスト受付部
223 データ転送部
224 CA・ハッシュ変換部
225 データアクセス部
230 重複排除データ保存部
240 ファイルシステムビュー提供部
300 ユーザシステム
10 Master side storage device 11 Replication execution unit 20 Replica side storage device 21 Replication execution unit 22 File system access unit 100 Master system 110 Master file system 111 Master snapshot 112 Old master snapshot 120 Replication execution unit 121 File system access unit 123 Data Transfer unit 124 CA / hash conversion unit 125 Data access unit 130 Deduplication data storage unit 140 File system view provision unit 200 Replica system 210 Replica file system 220 Replication execution unit 221 File system access unit 222 Request reception unit 223 Data transfer unit 224 CA・ Hash conversion unit 225 Data access unit 230 Deduplication data storage Existing part 240 File system view providing part 300 User system

Claims (16)

重複記憶排除機能を有するマスタ側ストレージ装置とレプリカ側ストレージ装置とを備え、
前記マスタ側ストレージ装置及び前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部をそれぞれ備えており、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを前記レプリカ側ストレージ装置に送信し、その後、当該レプリカ側ストレージ装置からの要求に応じて前記実データを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された前記メタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、所定のファイルを構成する複数の前記実データをそれぞれ参照する複数の前記メタデータの全てを、前記マスタ側ストレージ装置から受信して記憶すると、当該全てのメタデータに基づいて、当該全てのメタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備えた、
ストレージシステム。
A master storage device having a duplicate storage elimination function and a replica storage device,
The master-side storage device and the replica-side storage device each include a replication execution unit that replicates actual data constituting a file stored in the master-side storage device to the replica-side storage device,
The replication execution unit of the master storage device transmits metadata, which is a value based on address data referring to the storage location of the actual data stored in the master storage device, to the replica storage device, Thereafter, in response to a request from the replica storage device, the real data is transmitted to the replica storage device,
The replication execution unit of the replica-side storage apparatus receives and stores the metadata transmitted from the master-side storage apparatus, and then is not stored in the replica-side storage apparatus based on the metadata Requests the actual data from the master storage device, receives and stores the actual data transmitted from the master storage device in response to the request,
Further, when the replica-side storage device receives and stores all of the plurality of metadata that respectively refer to the plurality of actual data constituting a predetermined file from the master-side storage device , all the metadata Based on the above, the file system is formed so that the file composed of the actual data corresponding to all the metadata is accessible, and the actual data constituting the accessed file is stored in the replica-side storage device A file system access unit that requests the actual data to the master storage device based on the metadata when not stored in
Storage system.
重複記憶排除機能を有するマスタ側ストレージ装置とレプリカ側ストレージ装置とを備え、
前記マスタ側ストレージ装置及び前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部をそれぞれ備えており、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを前記レプリカ側ストレージ装置に送信し、その後、当該レプリカ側ストレージ装置からの要求に応じて前記実データを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された前記メタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備え、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を前記メタデータとして前記レプリカ側ストレージ装置に送信し、その後、当該レプリカ側ストレージ装置からの前記要約情報に基づく要求に応じて当該要約情報に対応する前記実データを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された前記メタデータとしての前記要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記レプリカ側ストレージ装置の前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記要約情報に基づいて、当該要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、
さらに、前記メタデータは、前記実データに関連する情報を格納するリンク情報と、当該リンク情報に対応付けられたフラグ情報と、を含んで構成されており、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、前記メタデータ内に、前記リンク情報として前記要約情報を格納し、前記フラグ情報として要約情報フラグを格納して、当該メタデータを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、
前記マスタ側ストレージ装置から送信された前記メタデータを受信して記憶し、
その後、記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報としてアドレスデータフラグを格納し、前記アドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、
記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶して、当該格納した実データの格納位置を参照する前記アドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報として前記アドレスデータフラグを格納し、
前記レプリカ側ストレージ装置の前記ファイルシステムアクセス部は、アクセスされたファイルの前記メタデータ内の前記フラグ情報が前記要約情報フラグである場合には、当該メタデータ内の前記リンク情報として格納されている前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
A master storage device having a duplicate storage elimination function and a replica storage device,
The master-side storage device and the replica-side storage device each include a replication execution unit that replicates actual data constituting a file stored in the master-side storage device to the replica-side storage device,
The replication execution unit of the master storage device transmits metadata, which is a value based on address data referring to the storage location of the actual data stored in the master storage device, to the replica storage device, Thereafter, in response to a request from the replica storage device, the real data is transmitted to the replica storage device,
The replication execution unit of the replica-side storage apparatus receives and stores the metadata transmitted from the master-side storage apparatus, and then is not stored in the replica-side storage apparatus based on the metadata Requests the actual data from the master storage device, receives and stores the actual data transmitted from the master storage device in response to the request,
Further, the replica-side storage device has a file system based on the metadata received and stored from the master-side storage device so that a file composed of the actual data corresponding to the metadata can be accessed. And a file system access unit that requests the actual storage data from the master storage device based on the metadata when the actual data constituting the accessed file is not stored in the replica storage device With
The replication execution unit of the master-side storage device transmits summary information, which is a value based on the data content of the actual data constituting the file, to the replica-side storage device as the metadata, and then the replica-side storage device In response to a request based on the summary information from the real data corresponding to the summary information is transmitted to the replica storage device,
The replication execution unit of the replica storage device receives and stores the summary information as the metadata transmitted from the master storage device, and then stores the summary information in the replica storage device based on the summary information. Requesting the master side storage device for the real data not stored, storing the real data transmitted from the master side storage device in response to the request,
The file system access unit of the replica-side storage apparatus forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage apparatus. Requesting the master storage device for the real data based on the summary information when the real data constituting the file is not stored in the replica storage device;
Based on the summary information received and stored from the master storage device, the replication execution unit and the file system access unit of the replica side storage device receive the address data corresponding to the summary information from the replica side storage. When stored in the device, the actual data stored in the replica storage device referenced by the corresponding address data is used as replicated data, and the address data corresponding to the summary information is If it is not stored in the replica storage device, the summary information is sent to the master storage device to request the actual data from the master storage device,
Furthermore, the metadata includes link information for storing information related to the actual data, and flag information associated with the link information,
The replication execution unit of the master storage device stores the summary information as the link information in the metadata, stores a summary information flag as the flag information, and stores the metadata in the replica storage device To
The replication execution unit of the replica storage device
Receive and store the metadata sent from the master storage device,
After that, if the address data corresponding to the summary information in the stored metadata is stored in the replica storage device, the corresponding address data is stored as the link information in the metadata. In addition, an address data flag is stored as the flag information in the metadata, and the actual data stored in the replica storage device referred to by the address data is used as replicated data.
If the address data corresponding to the summary information in the stored metadata is not stored in the replica-side storage device, the summary information is transmitted to the master-side storage device, and the real data is sent to the master-side storage device. Requesting the storage device, storing the actual data transmitted from the master storage device in response to the request, and referring to the storage location of the stored actual data in the metadata Store as link information, store the address data flag as the flag information in the metadata,
When the flag information in the metadata of the accessed file is the summary information flag, the file system access unit of the replica storage device is stored as the link information in the metadata. Sending the summary information to the master storage device to request the actual data from the master storage device;
Storage system.
重複記憶排除機能を有するマスタ側ストレージ装置とレプリカ側ストレージ装置とを備え、
前記マスタ側ストレージ装置及び前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部をそれぞれ備えており、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを前記レプリカ側ストレージ装置に送信し、その後、当該レプリカ側ストレージ装置からの要求に応じて前記実データを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された前記メタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備え、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を前記メタデータとして前記レプリカ側ストレージ装置に送信し、その後、当該レプリカ側ストレージ装置からの前記要約情報に基づく要求に応じて当該要約情報に対応する前記実データを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された前記メタデータとしての前記要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記レプリカ側ストレージ装置の前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求し、
さらに、前記マスタ側ストレージ装置の前記レプリケーション実行部は、前記メタデータを前記レプリカ側ストレージ装置に送信すると共に、レプリケーションの対象となる前記実データの作成時刻が前回のレプリケーションの開始時刻よりも後である場合に、当該実データのデータ内容に基づく前記要約情報を前記レプリカ側ストレージ装置に送信して当該レプリカ側ストレージ装置に対して前記実データが記憶されているか否かの確認を要求し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置からの前記実データが記憶されているか否かの確認要求に応じて、当該マスタ側ストレージ装置から送信された前記要約情報に基づいて確認要求された前記実データが前記レプリカ側ストレージ装置に記憶されているか否かを確認し、記憶されていない前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
A master storage device having a duplicate storage elimination function and a replica storage device,
The master-side storage device and the replica-side storage device each include a replication execution unit that replicates actual data constituting a file stored in the master-side storage device to the replica-side storage device,
The replication execution unit of the master storage device transmits metadata, which is a value based on address data referring to the storage location of the actual data stored in the master storage device, to the replica storage device, Thereafter, in response to a request from the replica storage device, the real data is transmitted to the replica storage device,
The replication execution unit of the replica-side storage apparatus receives and stores the metadata transmitted from the master-side storage apparatus, and then is not stored in the replica-side storage apparatus based on the metadata Requests the actual data from the master storage device, receives and stores the actual data transmitted from the master storage device in response to the request,
Further, the replica-side storage device has a file system based on the metadata received and stored from the master-side storage device so that a file composed of the actual data corresponding to the metadata can be accessed. And a file system access unit that requests the actual storage data from the master storage device based on the metadata when the actual data constituting the accessed file is not stored in the replica storage device With
The replication execution unit of the master-side storage device transmits summary information, which is a value based on the data content of the actual data constituting the file, to the replica-side storage device as the metadata, and then the replica-side storage device In response to a request based on the summary information from the real data corresponding to the summary information is transmitted to the replica storage device,
The replication execution unit of the replica storage device receives and stores the summary information as the metadata transmitted from the master storage device, and then stores the summary information in the replica storage device based on the summary information. Requesting the master side storage device for the real data not stored, storing the real data transmitted from the master side storage device in response to the request,
The file system access unit of the replica-side storage apparatus forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage apparatus. Requesting the master storage device for the real data based on the summary information when the real data constituting the file is not stored in the replica storage device;
Further, the replication execution unit of the master storage device transmits the metadata to the replica storage device, and the creation time of the actual data to be replicated is later than the start time of the previous replication. In some cases, the summary information based on the data content of the actual data is transmitted to the replica-side storage device, requesting the replica-side storage device to check whether the actual data is stored,
The replication execution unit of the replica-side storage apparatus is based on the summary information transmitted from the master-side storage apparatus in response to a confirmation request as to whether or not the actual data is stored from the master-side storage apparatus. Confirming whether or not the real data requested for confirmation is stored in the replica storage device, and requesting the master storage device to store the real data,
Storage system.
請求項1に記載のストレージシステムであって、
前記マスタ側ストレージ装置の前記レプリケーション実行部は、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を前記メタデータとして前記レプリカ側ストレージ装置に送信し、その後、当該レプリカ側ストレージ装置からの前記要約情報に基づく要求に応じて当該要約情報に対応する前記実データを前記レプリカ側ストレージ装置に送信し、
前記レプリカ側ストレージ装置の前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された前記メタデータとしての前記要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記レプリカ側ストレージ装置の前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
The storage system according to claim 1,
The replication execution unit of the master-side storage device transmits summary information, which is a value based on the data content of the actual data constituting the file, to the replica-side storage device as the metadata, and then the replica-side storage device In response to a request based on the summary information from the real data corresponding to the summary information is transmitted to the replica storage device,
The replication execution unit of the replica storage device receives and stores the summary information as the metadata transmitted from the master storage device, and then stores the summary information in the replica storage device based on the summary information. Requesting the master side storage device for the real data not stored, storing the real data transmitted from the master side storage device in response to the request,
The file system access unit of the replica-side storage apparatus forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage apparatus. Requesting the actual storage data from the master storage device based on the summary information when the actual data constituting the file is not stored in the replica storage device;
Storage system.
請求項3又は4に記載のストレージシステムであって、
前記レプリカ側ストレージ装置の前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記要約情報を前記マスタ側ストレージ装置に送信して、前記レプリカ側ストレージ装置に記憶されていないファイルを構成する前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
The storage system according to claim 3 or 4 ,
The replication execution unit and the file system access unit of the replica-side storage device transmit the summary information to the master-side storage device, and the real data constituting a file not stored in the replica-side storage device Request to the master storage device,
Storage system.
請求項3又は4に記載のストレージシステムであって、
前記レプリカ側ストレージ装置の前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記要約情報に基づいて、当該要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
The storage system according to claim 3 or 4 ,
Based on the summary information received and stored from the master storage device, the replication execution unit and the file system access unit of the replica side storage device receive the address data corresponding to the summary information from the replica side storage. When stored in the device, the actual data stored in the replica storage device referenced by the corresponding address data is used as replicated data, and the address data corresponding to the summary information is If not stored in the replica-side storage device, the summary information is sent to the master-side storage device to request the actual data from the master-side storage device;
Storage system.
請求項2乃至のいずれかに記載のストレージシステムであって、
前記レプリカ側ストレージ装置の前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記要約情報に基づいて、当該要約情報に対応する前記実データが前記レプリカ側ストレージ装置に記憶されているか否かを判定し、記憶されていない前記実データを前記マスタ側ストレージ装置に要求する、
ストレージシステム。
The storage system according to any one of claims 2 to 6 ,
Based on the summary information received and stored from the master storage device, the replication execution unit and the file system access unit of the replica side storage device store the real data corresponding to the summary information in the replica side storage. Determining whether or not the data is stored in a device, and requesting the master side storage device to store the actual data,
Storage system.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置であって、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を備え、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、所定のファイルを構成する複数の前記実データをそれぞれ参照する複数の前記メタデータの全てを、前記マスタ側ストレージ装置から受信して記憶すると、当該全てのメタデータに基づいて、当該全てのメタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備えた、
レプリカ側ストレージ装置。
A replica-side storage device that has a duplicate storage elimination function and is connected to the master-side storage device,
A replication execution unit that replicates real data constituting the file stored in the master storage device to the replica storage device;
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
Further, when all of the plurality of metadata that respectively refer to the plurality of actual data constituting the predetermined file are received from the master storage device and stored , all of the metadata are based on all the metadata . When a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the actual data constituting the accessed file is not stored in the replica storage device A file system access unit for requesting the actual data to the master storage device based on the metadata;
Replica side storage device.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置であって、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を備え、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備え、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求し、
前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記要約情報に基づいて、当該要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、
さらに、前記メタデータは、前記実データに関連する情報を格納するリンク情報と、当該リンク情報に対応付けられたフラグ情報と、を含んで構成されており、
前記レプリケーション実行部は、
前記マスタ側ストレージ装置から送信された、前記リンク情報として前記要約情報と前記フラグ情報として要約情報フラグとが格納された前記メタデータを受信して記憶し、
その後、記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報としてアドレスデータフラグを格納し、前記アドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、
記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶して、当該格納した実データの格納位置を参照する前記アドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報として前記アドレスデータフラグを格納し、
前記ファイルシステムアクセス部は、アクセスされたファイルの前記メタデータ内の前記フラグ情報が前記要約情報フラグである場合には、当該メタデータ内の前記リンク情報として格納されている前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求する、
レプリカ側ストレージ装置。
A replica-side storage device that has a duplicate storage elimination function and is connected to the master-side storage device,
A replication execution unit that replicates real data constituting the file stored in the master storage device to the replica storage device;
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
In addition, based on the metadata received and stored from the master storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed and accessed. e Bei the file system access unit in which the actual data requests the actual data based on the metadata if not stored in the replica side storage apparatus to the master side storage apparatus constituting a file,
The replication execution unit receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master storage device as the metadata, and then stores the summary information in the summary information. Requesting the master-side storage device to store the actual data that is not stored in the replica-side storage device, and storing the actual data transmitted from the master-side storage device in response to the request,
The file system access unit forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage device, and configures the accessed file When the real data is not stored in the replica storage device, the real data is requested to the master storage device based on the summary information,
The replication execution unit and the file system access unit store the address data corresponding to the summary information in the replica storage device based on the summary information received and stored from the master storage device In this case, the actual data stored in the replica storage device referred to by the corresponding address data is used as replicated data, and the address data corresponding to the summary information is stored in the replica storage device. If not stored, the summary information is sent to the master storage device to request the actual data from the master storage device,
Furthermore, the metadata includes link information for storing information related to the actual data, and flag information associated with the link information,
The replication execution unit
Received and stored the metadata transmitted from the master-side storage device, in which the summary information as the link information and the summary information flag as the flag information are stored,
After that, if the address data corresponding to the summary information in the stored metadata is stored in the replica storage device, the corresponding address data is stored as the link information in the metadata. In addition, an address data flag is stored as the flag information in the metadata, and the actual data stored in the replica storage device referred to by the address data is used as replicated data.
If the address data corresponding to the summary information in the stored metadata is not stored in the replica-side storage device, the summary information is transmitted to the master-side storage device, and the real data is sent to the master-side storage device. Requesting the storage device, storing the actual data transmitted from the master storage device in response to the request, and referring to the storage location of the stored actual data in the metadata Store as link information, store the address data flag as the flag information in the metadata,
The file system access unit, when the flag information in the metadata of the accessed file is the summary information flag, stores the summary information stored as the link information in the metadata. Requesting the actual data to the master storage device by transmitting to the storage device on the side,
Replica side storage device.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置であって、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を備え、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を備え、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求し、
さらに、前記レプリケーション実行部は、レプリケーションの対象となる前記実データの作成時刻が前回のレプリケーションの開始時刻よりも後である場合に、前記マスタ側ストレージ装置によってなされた、当該実データのデータ内容に基づく前記要約情報の送信を伴う当該実データが記憶されているか否かの確認要求に応じて、当該マスタ側ストレージ装置から送信された前記要約情報に基づいて確認要求された前記実データが前記レプリカ側ストレージ装置に記憶されているか否かを確認し、記憶されていない前記実データを前記マスタ側ストレージ装置に要求する、
レプリカ側ストレージ装置。
A replica-side storage device that has a duplicate storage elimination function and is connected to the master-side storage device,
A replication execution unit that replicates real data constituting the file stored in the master storage device to the replica storage device;
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
In addition, based on the metadata received and stored from the master storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed and accessed. e Bei the file system access unit in which the actual data requests the actual data based on the metadata if not stored in the replica side storage apparatus to the master side storage apparatus constituting a file,
The replication execution unit receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master storage device as the metadata, and then stores the summary information in the summary information. Requesting the master-side storage device to store the actual data that is not stored in the replica-side storage device, and storing the actual data transmitted from the master-side storage device in response to the request,
The file system access unit forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage device, and configures the accessed file When the real data is not stored in the replica storage device, the real data is requested to the master storage device based on the summary information,
In addition, the replication execution unit, when the creation time of the actual data to be replicated is later than the start time of the previous replication, the data content of the actual data made by the master storage device In response to a confirmation request as to whether or not the actual data accompanying the transmission of the summary information is stored, the actual data requested to be confirmed based on the summary information transmitted from the master storage device is the replica. Check whether it is stored in the storage device on the side, and request the master storage device for the actual data that is not stored,
Replica side storage device.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置に、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を実現させるとともに、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置に、
所定のファイルを構成する複数の前記実データをそれぞれ参照する複数の前記メタデータの全てを、前記マスタ側ストレージ装置から受信して記憶すると、当該全てのメタデータに基づいて、当該全てのメタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を実現させる、
ためのプログラム。
A replica storage device that has a duplicate storage exclusion function and is connected to the master storage device.
Realizing a replication execution unit that replicates the actual data constituting the file stored in the master storage device to the replica storage device,
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
Furthermore, in the replica side storage device,
When all of the plurality of metadata that respectively refer to the plurality of actual data constituting the predetermined file are received from the master-side storage device and stored , all the metadata is based on all the metadata. A file system is formed so that a file composed of the real data corresponding to the file can be accessed, and the meta data when the real data composing the accessed file is not stored in the replica storage device. Realizing a file system access unit that requests the master storage device for the actual data based on data,
Program for.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置に、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を実現させるとともに、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置に、
前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を実現させる、
ためのプログラムであり、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求し、
前記レプリケーション実行部及び前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記要約情報に基づいて、当該要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、
さらに、前記メタデータは、前記実データに関連する情報を格納するリンク情報と、当該リンク情報に対応付けられたフラグ情報と、を含んで構成されており、
前記レプリケーション実行部は、
前記マスタ側ストレージ装置から送信された、前記リンク情報として前記要約情報と前記フラグ情報として要約情報フラグとが格納された前記メタデータを受信して記憶し、
その後、記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報としてアドレスデータフラグを格納し、前記アドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、
記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶して、当該格納した実データの格納位置を参照する前記アドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報として前記アドレスデータフラグを格納し、
前記ファイルシステムアクセス部は、アクセスされたファイルの前記メタデータ内の前記フラグ情報が前記要約情報フラグである場合には、当該メタデータ内の前記リンク情報として格納されている前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求する、
プログラム。
A replica storage device that has a duplicate storage exclusion function and is connected to the master storage device.
Realizing a replication execution unit that replicates the actual data constituting the file stored in the master storage device to the replica storage device,
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
Furthermore, in the replica side storage device,
Based on the metadata received and stored from the master-side storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the file that has been accessed Realizing a file system access unit that requests the real data to the master storage device based on the metadata when the real data constituting the data is not stored in the replica storage device;
Is a program for
The replication execution unit receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master storage device as the metadata, and then stores the summary information in the summary information. Requesting the master-side storage device to store the actual data that is not stored in the replica-side storage device, and storing the actual data transmitted from the master-side storage device in response to the request,
The file system access unit forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage device, and configures the accessed file When the real data is not stored in the replica storage device, the real data is requested to the master storage device based on the summary information,
The replication execution unit and the file system access unit store the address data corresponding to the summary information in the replica storage device based on the summary information received and stored from the master storage device In this case, the actual data stored in the replica storage device referred to by the corresponding address data is used as replicated data, and the address data corresponding to the summary information is stored in the replica storage device. If not stored, the summary information is sent to the master storage device to request the actual data from the master storage device,
Furthermore, the metadata includes link information for storing information related to the actual data, and flag information associated with the link information,
The replication execution unit
Received and stored the metadata transmitted from the master-side storage device, in which the summary information as the link information and the summary information flag as the flag information are stored,
After that, if the address data corresponding to the summary information in the stored metadata is stored in the replica storage device, the corresponding address data is stored as the link information in the metadata. In addition, an address data flag is stored as the flag information in the metadata, and the actual data stored in the replica storage device referred to by the address data is used as replicated data.
If the address data corresponding to the summary information in the stored metadata is not stored in the replica-side storage device, the summary information is transmitted to the master-side storage device, and the real data is sent to the master-side storage device. Requesting the storage device, storing the actual data transmitted from the master storage device in response to the request, and referring to the storage location of the stored actual data in the metadata Store as link information, store the address data flag as the flag information in the metadata,
The file system access unit, when the flag information in the metadata of the accessed file is the summary information flag, stores the summary information stored as the link information in the metadata. Requesting the actual data to the master storage device by transmitting to the storage device on the side,
program.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置に、
前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションするレプリケーション実行部を実現させるとともに、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置に、
前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求するファイルシステムアクセス部を実現させる、
ためのプログラムであり、
前記レプリケーション実行部は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
前記ファイルシステムアクセス部は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求し、
さらに、前記レプリケーション実行部は、レプリケーションの対象となる前記実データの作成時刻が前回のレプリケーションの開始時刻よりも後である場合に、前記マスタ側ストレージ装置によってなされた、当該実データのデータ内容に基づく前記要約情報の送信を伴う当該実データが記憶されているか否かの確認要求に応じて、当該マスタ側ストレージ装置から送信された前記要約情報に基づいて確認要求された前記実データが前記レプリカ側ストレージ装置に記憶されているか否かを確認し、記憶されていない前記実データを前記マスタ側ストレージ装置に要求する、
プログラム。
A replica storage device that has a duplicate storage exclusion function and is connected to the master storage device.
Realizing a replication execution unit that replicates the actual data constituting the file stored in the master storage device to the replica storage device,
The replication execution unit receives and stores metadata, which is a value based on address data transmitted from the master storage device and referring to the storage location of the actual data stored in the master storage device. Then, based on the metadata, the master side storage device is requested for the real data not stored in the replica side storage device, and the real data transmitted from the master side storage device in response to the request is sent to the master side storage device. Receive and remember,
Furthermore, in the replica side storage device,
Based on the metadata received and stored from the master-side storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the file that has been accessed Realizing a file system access unit that requests the real data to the master storage device based on the metadata when the real data constituting the data is not stored in the replica storage device;
Is a program for
The replication execution unit receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master storage device as the metadata, and then stores the summary information in the summary information. Requesting the master-side storage device to store the actual data that is not stored in the replica-side storage device, and storing the actual data transmitted from the master-side storage device in response to the request,
The file system access unit forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master-side storage device, and configures the accessed file When the real data is not stored in the replica storage device, the real data is requested to the master storage device based on the summary information,
In addition, the replication execution unit, when the creation time of the actual data to be replicated is later than the start time of the previous replication, the data content of the actual data made by the master storage device In response to a confirmation request as to whether or not the actual data accompanying the transmission of the summary information is stored, the actual data requested to be confirmed based on the summary information transmitted from the master storage device is the replica. Check whether it is stored in the storage device on the side, and request the master storage device for the actual data that is not stored,
program.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置によるレプリケーション方法であって、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションする際に、
前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、
所定のファイルを構成する複数の前記実データをそれぞれ参照する複数の前記メタデータの全てを、前記マスタ側ストレージ装置から受信して記憶すると、当該全てのメタデータに基づいて、当該全てのメタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求する、
レプリケーション方法。
A replication method by a replica storage device having a duplicate storage exclusion function and connected to a master storage device,
When replicating the real data constituting the file stored in the master storage device to the replica storage device, the replica storage device
Received and stored metadata, which is a value based on address data sent from the master storage device and referring to the storage location of the actual data stored in the master storage device, and then the metadata Requesting the master side storage device to store the real data that is not stored in the replica side storage device, and receiving and storing the real data transmitted from the master side storage device in response to the request,
Furthermore, the replica storage device
When all of the plurality of metadata that respectively refer to the plurality of actual data constituting the predetermined file are received from the master-side storage device and stored , all the metadata is based on all the metadata. A file system is formed so that a file composed of the real data corresponding to the file can be accessed, and the meta data when the real data composing the accessed file is not stored in the replica storage device. Requesting the actual data from the master storage device based on the data;
Replication method.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置によるレプリケーション方法であって、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションする際に、
前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、
前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求し、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
さらに、前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求し、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から受信して記憶した前記要約情報に基づいて、当該要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、
さらに、前記メタデータは、前記実データに関連する情報を格納するリンク情報と、当該リンク情報に対応付けられたフラグ情報と、を含んで構成されており、
前記レプリカ側ストレージ装置は、
前記マスタ側ストレージ装置から送信された、前記リンク情報として前記要約情報と前記フラグ情報として要約情報フラグとが格納された前記メタデータを受信して記憶し、
その後、記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されている場合には、当該対応するアドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報としてアドレスデータフラグを格納し、前記アドレスデータにて参照される前記レプリカ側ストレージ装置に記憶されている前記実データをレプリケーションしたデータとして用い、
記憶した前記メタデータ内の前記要約情報に対応する前記アドレスデータが前記レプリカ側ストレージ装置に記憶されていない場合には、前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶して、当該格納した実データの格納位置を参照する前記アドレスデータを前記メタデータ内に前記リンク情報として格納すると共に、前記メタデータ内に前記フラグ情報として前記アドレスデータフラグを格納し、
前記レプリカ側ストレージ装置は、アクセスされたファイルの前記メタデータ内の前記フラグ情報が前記要約情報フラグである場合には、当該メタデータ内の前記リンク情報として格納されている前記要約情報を前記マスタ側ストレージ装置に送信して前記実データを前記マスタ側ストレージ装置に要求する、
レプリケーション方法。
A replication method by a replica storage device having a duplicate storage exclusion function and connected to a master storage device,
When replicating the real data constituting the file stored in the master storage device to the replica storage device, the replica storage device
Received and stored metadata, which is a value based on address data sent from the master storage device and referring to the storage location of the actual data stored in the master storage device, and then the metadata Requesting the master side storage device to store the real data that is not stored in the replica side storage device, and receiving and storing the real data transmitted from the master side storage device in response to the request,
Furthermore, the replica storage device
Based on the metadata received and stored from the master-side storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the file that has been accessed Requesting the actual storage data to the master storage device based on the metadata when the real data constituting the storage is not stored in the replica storage device ,
The replica-side storage device receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master-side storage device as the metadata, and then stores the summary information Request the real data not stored in the replica storage device based on the master storage device, and store the real data transmitted from the master storage device in response to the request,
Further, the replica storage device forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master storage device, and the accessed file is Requesting the real data to the master storage device based on the summary information when the real data to be configured is not stored in the replica storage device;
Based on the summary information received and stored from the master side storage device, the replica side storage device, when the address data corresponding to the summary information is stored in the replica side storage device, When the actual data stored in the replica storage device referenced by the corresponding address data is used as replicated data, and the address data corresponding to the summary information is not stored in the replica storage device To send the summary information to the master storage device to request the actual data from the master storage device,
Furthermore, the metadata includes link information for storing information related to the actual data, and flag information associated with the link information,
The replica storage device
Received and stored the metadata transmitted from the master-side storage device, in which the summary information as the link information and the summary information flag as the flag information are stored,
After that, if the address data corresponding to the summary information in the stored metadata is stored in the replica storage device, the corresponding address data is stored as the link information in the metadata. In addition, an address data flag is stored as the flag information in the metadata, and the actual data stored in the replica storage device referred to by the address data is used as replicated data.
If the address data corresponding to the summary information in the stored metadata is not stored in the replica-side storage device, the summary information is transmitted to the master-side storage device, and the real data is sent to the master-side storage device. Requesting the storage device, storing the actual data transmitted from the master storage device in response to the request, and referring to the storage location of the stored actual data in the metadata Store as link information, store the address data flag as the flag information in the metadata,
When the flag information in the metadata of the accessed file is the summary information flag, the replica-side storage apparatus stores the summary information stored as the link information in the metadata. Requesting the actual data to the master storage device by transmitting to the storage device on the side,
Replication method.
重複記憶排除機能を有し、マスタ側ストレージ装置に接続されたレプリカ側ストレージ装置によるレプリケーション方法であって、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置に記憶されているファイルを構成する実データを前記レプリカ側ストレージ装置にレプリケーションする際に、
前記マスタ側ストレージ装置から送信された、当該マスタ側ストレージ装置に記憶されている前記実データの格納位置を参照するアドレスデータに基づく値であるメタデータを受信して記憶し、その後、当該メタデータに基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを受信して記憶し、
さらに、前記レプリカ側ストレージ装置は、
前記マスタ側ストレージ装置から受信して記憶した前記メタデータに基づいて、当該メタデータに対応する前記実データにて構成されるファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていない場合に前記メタデータに基づいて前記実データを前記マスタ側ストレージ装置に要求し、
前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から前記メタデータとして送信された、ファイルを構成する前記実データのデータ内容に基づく値である要約情報を受信して記憶し、その後、当該要約情報に基づいて前記レプリカ側ストレージ装置に記憶されていない前記実データを前記マスタ側ストレージ装置に要求し、当該要求に応じて前記マスタ側ストレージ装置から送信された前記実データを記憶し、
さらに、前記レプリカ側ストレージ装置は、前記マスタ側ストレージ装置から受信して記憶した前記メタデータとしての前記要約情報に基づいてファイルにアクセス可能なようファイルシステムを形成すると共に、アクセスがあったファイルを構成する前記実データが前記レプリカ側ストレージ装置に記憶されていないときに前記要約情報に基づいて前記実データを前記マスタ側ストレージ装置に要求し、
さらに、前記レプリカ側ストレージ装置は、レプリケーションの対象となる前記実データの作成時刻が前回のレプリケーションの開始時刻よりも後である場合に、前記マスタ側ストレージ装置によってなされた、当該実データのデータ内容に基づく前記要約情報の送信を伴う当該実データが記憶されているか否かの確認要求に応じて、当該マスタ側ストレージ装置から送信された前記要約情報に基づいて確認要求された前記実データが前記レプリカ側ストレージ装置に記憶されているか否かを確認し、記憶されていない前記実データを前記マスタ側ストレージ装置に要求する、
レプリケーション方法。
A replication method by a replica storage device having a duplicate storage exclusion function and connected to a master storage device,
When replicating the real data constituting the file stored in the master storage device to the replica storage device, the replica storage device
Received and stored metadata, which is a value based on address data sent from the master storage device and referring to the storage location of the actual data stored in the master storage device, and then the metadata Requesting the master side storage device to store the real data that is not stored in the replica side storage device, and receiving and storing the real data transmitted from the master side storage device in response to the request,
Furthermore, the replica storage device
Based on the metadata received and stored from the master-side storage device, a file system is formed so that a file composed of the actual data corresponding to the metadata can be accessed, and the file that has been accessed Requesting the actual storage data to the master storage device based on the metadata when the real data constituting the storage is not stored in the replica storage device ,
The replica-side storage device receives and stores summary information, which is a value based on the data content of the actual data constituting the file, transmitted from the master-side storage device as the metadata, and then stores the summary information Request the real data not stored in the replica storage device based on the master storage device, and store the real data transmitted from the master storage device in response to the request,
Further, the replica storage device forms a file system so that a file can be accessed based on the summary information as the metadata received and stored from the master storage device, and the accessed file is Requesting the real data to the master storage device based on the summary information when the real data to be configured is not stored in the replica storage device;
Further, the replica-side storage device is configured such that the data content of the actual data made by the master-side storage device when the creation time of the actual data to be replicated is later than the start time of the previous replication. In response to the confirmation request as to whether or not the actual data accompanying the transmission of the summary information based on the data is stored, the actual data requested to be confirmed based on the summary information transmitted from the master storage device Check whether it is stored in the replica-side storage device, and request the master-side storage device for the actual data that is not stored,
Replication method.
JP2015010386A 2015-01-22 2015-01-22 Storage system Active JP6413792B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015010386A JP6413792B2 (en) 2015-01-22 2015-01-22 Storage system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015010386A JP6413792B2 (en) 2015-01-22 2015-01-22 Storage system

Publications (2)

Publication Number Publication Date
JP2016134133A JP2016134133A (en) 2016-07-25
JP6413792B2 true JP6413792B2 (en) 2018-10-31

Family

ID=56464374

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015010386A Active JP6413792B2 (en) 2015-01-22 2015-01-22 Storage system

Country Status (1)

Country Link
JP (1) JP6413792B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7321669B2 (en) 2018-02-28 2023-08-07 能美防災株式会社 heat detector

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11321343B2 (en) 2019-02-19 2022-05-03 Oracle International Corporation Tenant replication bootstrap for a multi-tenant identity cloud service

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4581518B2 (en) * 2003-12-19 2010-11-17 株式会社日立製作所 How to get a snapshot
JP5156518B2 (en) * 2008-07-23 2013-03-06 株式会社日立製作所 Storage control apparatus and method
US9952936B2 (en) * 2012-12-05 2018-04-24 Hitachi, Ltd. Storage system and method of controlling storage system
JP6201340B2 (en) * 2013-02-27 2017-09-27 日本電気株式会社 Replication system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7321669B2 (en) 2018-02-28 2023-08-07 能美防災株式会社 heat detector

Also Published As

Publication number Publication date
JP2016134133A (en) 2016-07-25

Similar Documents

Publication Publication Date Title
KR101694984B1 (en) Method of parity updates in asymmetric clustering filesystem
US20190026192A1 (en) Backing up data to cloud data storage while maintaining storage efficiency
JP6264666B2 (en) Data storage method, data storage device, and storage device
US10942813B2 (en) Cloud object data layout (CODL)
US8706703B2 (en) Efficient file system object-based deduplication
US9952940B2 (en) Method of operating a shared nothing cluster system
CN106407040A (en) Remote data copy method and system
CN106663047A (en) Systems and methods for oprtimized signature comparisons and data replication
CN103793425A (en) Data processing method and data processing device for distributed system
US20140195575A1 (en) Data file handling in a network environment and independent file server
US20140081919A1 (en) Distributed backup system for determining access destination based on multiple performance indexes
CN103038742B (en) For the method and system of Dynamical data replication in distributed memory system
CN102693168A (en) A method, a system and a service node for data backup recovery
US20150254320A1 (en) Using colocation hints to facilitate accessing a distributed data storage system
JP2010198276A (en) Storage system
CN109313538A (en) Inline duplicate removal
JP2007128335A (en) Replication arbitration device, method and program
JP6196389B2 (en) Distributed disaster recovery file synchronization server system
CN112068992A (en) Remote data copying method, storage device and storage system
JP5533888B2 (en) Storage device
JP2012008854A (en) Storage virtualization device
US8612717B2 (en) Storage system
JP6413792B2 (en) Storage system
JP5459388B2 (en) Storage device
JP6376626B2 (en) Data storage method, data storage device, and storage device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171205

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180625

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180703

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180808

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180904

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180917

R150 Certificate of patent or registration of utility model

Ref document number: 6413792

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150