JP2016057811A - Accumulation and delivery server and accumulation and delivery system - Google Patents
Accumulation and delivery server and accumulation and delivery system Download PDFInfo
- Publication number
- JP2016057811A JP2016057811A JP2014183215A JP2014183215A JP2016057811A JP 2016057811 A JP2016057811 A JP 2016057811A JP 2014183215 A JP2014183215 A JP 2014183215A JP 2014183215 A JP2014183215 A JP 2014183215A JP 2016057811 A JP2016057811 A JP 2016057811A
- Authority
- JP
- Japan
- Prior art keywords
- data
- file
- storage device
- control unit
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、大容量のデータを蓄積し、配信する蓄積配信サーバ及び蓄積配信システムに関する。 The present invention relates to a storage / delivery server and a storage / distribution system for storing and distributing a large amount of data.
従来、大容量のデータ（画像データ、音声データ等）をＲＡＩＤ（Redundant Array of Inexpensive Disks）装置に蓄積し、ネットワークを介してユーザ端末にデータをストリーミング配信する蓄積配信システムが知られている。 2. Description of the Related Art Conventionally, a storage and distribution system is known that stores a large amount of data (image data, audio data, etc.) in a RAID (Redundant Array of Inexpensive Disks) device, and distributes the data to user terminals via a network.
特許文献１には、大容量のデータを蓄積するストレージシステムが開示されている。このストレージシステムは、ＲＡＩＤ装置間でデータをプライマリデータとセカンダリデータにミラーリングして多重化する。そして、ＲＡＩＤ構成により装置内で復旧可能なディスク装置の障害が発生すると、ミラーリング先のＲＡＩＤ装置に障害ディスク装置に対応したディスク装置のデータを要求し、転送されたデータをスペアディスク装置に書込んで復旧させる。 Patent Document 1 discloses a storage system that accumulates a large amount of data. This storage system multiplexes data by mirroring primary data and secondary data between RAID devices. When a failure occurs in a disk device that can be recovered within the device due to the RAID configuration, the mirroring RAID device is requested for the data of the disk device corresponding to the failed disk device, and the transferred data is written to the spare disk device. Restore with.
特許文献１にはデータをミラーリングして多重化することについて記載されているが、蓄積配信システムのような大容量のデータを取り扱うシステムでは、ＲＡＩＤ装置等のストレージ装置を複数台使用することがある。このため、ストレージ装置をミラーリングで多重化すると、システムの構築コスト、運用コストが膨大となってしまう。 Patent Document 1 describes that data is mirrored and multiplexed. However, a system that handles a large amount of data such as a storage / distribution system may use a plurality of storage devices such as RAID devices. . For this reason, if the storage apparatus is multiplexed by mirroring, the system construction cost and the operation cost become enormous.
一方で、ストレージ装置が多重化されていないシステムでは、ストレージ装置が故障したときにデータを読み出せなくなる。また、ストレージ装置を制御するＲＡＩＤコントローラが故障して、ＲＡＩＤコントローラを再起動している間はストレージ装置にデータを蓄積できなくなる。このため、ストレージ装置に蓄積されたデータに欠損が生じることがあった。 On the other hand, in a system in which storage devices are not multiplexed, data cannot be read when the storage device fails. In addition, data cannot be stored in the storage device while the RAID controller that controls the storage device fails and the RAID controller is restarted. For this reason, data stored in the storage device may be lost.
本発明はこのような状況に鑑みて成されたものであり、ストレージ装置の信頼性を高めることを目的とする。 The present invention has been made in view of such a situation, and an object thereof is to improve the reliability of a storage apparatus.
本発明は、管理テーブルと、データ配信制御部と、データ蓄積制御部と、を備える。
管理テーブルは、所定の記録容量を有し、データを蓄積する第１ストレージ装置、及び第１ストレージ装置よりも大きい記録容量を有し、データを冗長化して蓄積する第２ストレージ装置がそれぞれ蓄積するデータの管理情報を保持する。
データ配信制御部は、第１ストレージ装置又は第２ストレージ装置から読込んだデータを転送先装置に転送し、管理テーブルに管理情報を記録する。
データ蓄積制御部は、転送元装置から転送されたデータを第１ストレージ装置及び第２ストレージ装置に書込んで、管理テーブルに管理情報を記録する。ここで、データ蓄積制御部は、第２ストレージ装置にデータの書込みが行えない書込不能期間に第１ストレージ装置に書込んだデータを、書込不能期間の経過後に、管理テーブルを参照して第１ストレージ装置から読込んで、第２ストレージ装置に書込む。
The present invention includes a management table, a data distribution control unit, and a data accumulation control unit.
The management table has a predetermined recording capacity, the first storage device that stores data, and the second storage device that has a larger recording capacity than the first storage device and stores data redundantly, respectively. Holds data management information.
The data distribution control unit transfers the data read from the first storage device or the second storage device to the transfer destination device, and records management information in the management table.
The data accumulation control unit writes the data transferred from the transfer source device to the first storage device and the second storage device, and records management information in the management table. Here, the data accumulation control unit refers to the management table after the elapse of the non-writable period, the data written to the first storage apparatus during the non-writable period during which data cannot be written to the second storage apparatus. Read from the first storage device and write to the second storage device.
本発明によれば、第２ストレージ装置にデータの書込みが行えなくても、書込不能期間に第１ストレージ装置に書込んだデータを、書込不能期間の経過後に第１ストレージ装置から読込んで第２ストレージ装置に書込む。このため、第２ストレージ装置にデータ欠損を生じさせず、第２ストレージ装置の信頼性を高めることができる。
上記した以外の課題、構成及び効果は、以下の実施の形態例の説明により明らかにされる。
According to the present invention, even if data cannot be written to the second storage device, data written to the first storage device during the non-writable period is read from the first storage device after the non-writable period elapses. Write to the second storage device. For this reason, it is possible to improve the reliability of the second storage device without causing data loss in the second storage device.
Problems, configurations, and effects other than those described above will be clarified by the following description of embodiments.
以下、本発明の一実施の形態例に係る蓄積配信システムについて、添付図面を参照して説明する。
本明細書及び図面において、実質的に同一の機能又は構成を有する構成要素については、同一の符号を付することにより重複する説明を省略する。
Hereinafter, a storage and delivery system according to an embodiment of the present invention will be described with reference to the accompanying drawings.
In the present specification and drawings, components having substantially the same function or configuration are denoted by the same reference numerals, and redundant description is omitted.
図１は、蓄積配信システム１の構成例を示す。
蓄積配信システム１は、蓄積配信サーバ２とＲＡＩＤ装置９（第２ストレージ装置の一例）を備える。
蓄積配信サーバ２は、データ蓄積制御部３、ファイル管理テーブル４（管理テーブルの一例）、データ配信制御部５及び小規模ストレージ８（第１ストレージ装置の一例）を備える。
FIG. 1 shows a configuration example of a storage / delivery system 1.
The storage / delivery system 1 includes a storage /
The accumulation /
この蓄積配信サーバ２は、標準的なＯＳ（Operating System）を搭載している。蓄積配信サーバ２は、ＯＳのファイルシステム機能を利用して、小規模ストレージ８とＲＡＩＤ装置９に対してそれぞれファイルをオープンし、データを読み書きした後、ファイルをクローズすることが可能である。
The storage /
ここで、小規模ストレージ８は、所定の記録容量を有している。小規模ストレージ８は、ファイル（１）〜（３）で表される複数のファイル８ａに書込まれたデータを蓄積する。
ＲＡＩＤ装置９は、小規模ストレージ８よりも大きい記録容量を有している。ＲＡＩＤ装置９として、例えば、ＨＤＤ（Hard disk drive）が用いられる。ＲＡＩＤ装置９は、ファイル（ｍ）、（ｎ）、（１）〜（３）で表される複数のファイル９ａに書込まれたデータを冗長化して蓄積する。ＲＡＩＤ装置９は、例えば、ＲＡＩＤ５で構成されている。
Here, the small-
The RAID device 9 has a larger recording capacity than the small-
以下の説明では、データ蓄積制御部３が転送元装置２０から転送された書込データ２２を、小規模ストレージ８に書込むファイル８ａと、ＲＡＩＤ装置９に書込むファイル９ａとを「書込ファイル」と呼ぶ場合がある。逆に、データ配信制御部５が転送先装置３０に読込データ３２を転送するために、小規模ストレージ８から読込むファイル８ａと、ＲＡＩＤ装置９から読込むファイル９ａを「読込ファイル」と呼ぶ場合がある。そして、書込ファイルと読込ファイルは、同じファイルを指すことがあり、書込データ２２と読込データ３２も同じデータを指すことがある。
In the following description, the
データ蓄積制御部３は、書込データ２２を一時的にバッファリングする書込バッファ６を備える。このデータ蓄積制御部３は、転送元装置２０から受信する要求２１に従って、転送元装置２０から転送された書込データ２２を書込バッファ６に一旦バッファリングした後、小規模ストレージ８とＲＡＩＤ装置９の書込ファイルに書込データ２２を同時に書込む制御を行う。そして、データ蓄積制御部３は、書込ファイルの管理情報をファイル管理テーブル４に記録する。
The data
しかし、データ蓄積制御部３は、ＲＡＩＤ装置９に何らかの障害が発生すると、ＲＡＩＤ装置９の書込ファイルに書込データ２２を書込めないことがある。このような場合に、データ蓄積制御部３は、ＲＡＩＤ装置９の書込ファイルに書込データ２２の書込みが行えない書込不能期間は小規模ストレージ８の書込ファイルに書込データ２２を書込む。そして、データ蓄積制御部３は、障害が復旧した書込不能期間の経過後に、書込不能期間に小規模ストレージ８に書込んだ書込データ２２を、ファイル管理テーブル４を参照して小規模ストレージ８から読込んで、ＲＡＩＤ装置９に書込む。
However, the data
ファイル管理テーブル４は、小規模ストレージ８が蓄積するファイル８ａと、ＲＡＩＤ装置９が蓄積するファイル９ａの管理情報（後述する図３を参照）を保持している。ファイル管理テーブル４は、データ蓄積制御部３とデータ配信制御部５によって参照又は更新される。
The file management table 4 holds management information (see FIG. 3 described later) of the
データ配信制御部５は、読込データ３２を一時的にバッファリングする読込バッファ７を備える。そして、データ配信制御部５は、転送先装置３０から受信する要求３１に従って、小規模ストレージ８又はＲＡＩＤ装置９の読込ファイルから読込んだ読込データ３２を読込バッファ７にバッファリングした後、読込データ３２として転送先装置３０に配信する。同時にデータ配信制御部５は、読込ファイルの管理情報をファイル管理テーブル４に記録する。
The data
＜計算機のハードウェア構成例＞
次に、蓄積配信システム１の各装置を構成する計算機１０のハードウェア構成を説明する。
図２は、計算機１０のハードウェア構成例を示すブロック図である。
<Example of computer hardware configuration>
Next, the hardware configuration of the computer 10 constituting each device of the storage / delivery system 1 will be described.
FIG. 2 is a block diagram illustrating a hardware configuration example of the computer 10.
計算機１０は、いわゆるコンピュータとして用いられるハードウェアであり、蓄積配信サーバ２として用いられる。計算機１０は、バス１４にそれぞれ接続されたＣＰＵ（Central Processing Unit：中央処理装置）１１、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３を備える。さらに、計算機１０は、表示部１５、操作部１６、不揮発性ストレージ１７、ネットワークインタフェース１８とを備える。
The computer 10 is hardware used as a so-called computer, and is used as the storage /
ＣＰＵ１１は、本実施の形態例に係る各機能を実現するソフトウェアのプログラムコードをＲＯＭ１２から読み出して実行する。ＲＡＭ１３には、演算処理の途中に発生した変数やパラメータ等が一時的に書き込まれる。ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３を用いて、蓄積配信サーバ２内の各部の機能が実現される。
The
表示部１５は、例えば、液晶ディスプレイモニタであり、計算機１０で行われる処理の結果等をユーザに表示する。操作部１６には、例えば、キーボード、マウス等が用いられ、ユーザが所定の操作入力、指示を行うことが可能である。なお、図１において、表示部１５、操作部１６の記載を省略している。
The display unit 15 is a liquid crystal display monitor, for example, and displays a result of processing performed by the computer 10 to the user. For example, a keyboard, a mouse, or the like is used for the
不揮発性ストレージ１７としては、例えば、ＨＤＤ、ＳＳＤ（Solid State Drive）、フレキシブルディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、メモリカード等が用いられる。この不揮発性ストレージ１７には、ＯＳ、各種のパラメータの他に、計算機１０を機能させるためのプログラムが記録されている。この不揮発性ストレージ１７によって、小規模ストレージ８が構成される。小規模ストレージ８では、データ蓄積制御部３及びデータ配信制御部５のアクセス速度を高めるためにＳＳＤが用いられることが望ましい。
As the
ネットワークインタフェース１８には、例えば、ＮＩＣ（Network Interface Card）等が用いられ、端子が接続されたＬＡＮ、専用線、ネットワークのいずれかを介して各種のデータを送受信することが可能である。これにより、蓄積配信サーバ２は、転送元装置２０、転送先装置３０に接続可能となる。
For example, a network interface card (NIC) or the like is used as the
＜ファイル管理テーブルの例＞
図３は、ファイル管理テーブル４が管理する情報の例を示す。図３Ａは、ファイル管理テーブル４の構成例を示し、図３Ｂは、ファイル管理テーブル４が管理するファイルの書込み状態と読込み状態の一覧表を示す。
<Example of file management table>
FIG. 3 shows an example of information managed by the file management table 4. 3A shows a configuration example of the file management table 4, and FIG. 3B shows a list of write states and read states of files managed by the file management table 4.
図３Ａに示すファイル管理テーブル４は、ファイル毎にファイル名を付したレコード（記憶領域）を確保している。そして、ファイル管理テーブル４は、レコード毎に小規模ストレージ用ファイル情報４ａとＲＡＩＤ装置用ファイル情報４ｂを保持している。
The file management table 4 shown in FIG. 3A secures a record (storage area) with a file name for each file. The file management table 4 holds small storage file information 4a and RAID
小規模ストレージ用ファイル情報４ａは、小規模ストレージ８に蓄積されるファイル８ａの書込状態、書込開始日時、読込状態、格納場所を管理情報として管理する。
ＲＡＩＤ装置用ファイル情報４ｂは、ＲＡＩＤ装置９に蓄積される各ファイル９ａの書込状態、書込開始日時、読込状態、格納場所を管理情報として管理する。
The small storage file information 4a manages, as management information, the write state, write start date and time, read state, and storage location of the
The RAID
以下の説明で小規模ストレージ用ファイル情報４ａとＲＡＩＤ装置用ファイル情報４ｂを区別しない場合には、「ファイル情報」と総称する場合がある。
また、データ蓄積制御部３が書込ファイルに書込データ２２を書込むことを「ファイル書込」と呼び、データ配信制御部５が読込ファイルから読込データ３２を読込むことを「ファイル読込」と呼ぶ。
In the following description, when the small storage file information 4a and the RAID
In addition, writing the
図３Ｂに示すファイルの書込状態には、“待ち状態”、“ファイル書込中”、“ファイル書込完了”、“ファイル書込エラー”の４種類がある。また、ファイルの読込状態には、“待ち状態”、“ファイル読込中”、“ファイル読込完了”、“ファイル読込エラー”の４種類がある。
例えば、図３Ａに示されるファイル（１）のレコードは、小規模ストレージ８とＲＡＩＤ装置９の両方に書込みが完了した状態であり、データ配信制御部５によって小規模ストレージ８の読込ファイルから読込データ３２が読込み中であることが分かる。
There are four types of file writing states shown in FIG. 3B: “waiting state”, “file writing in progress”, “file writing complete”, and “file writing error”. There are four types of file reading states: “waiting state”, “file reading in progress”, “file reading complete”, and “file reading error”.
For example, the record of the file (1) shown in FIG. 3A is in a state in which writing to both the small-
＜ファイル格納方法及びファイル削除方法＞
次に、データ蓄積制御部３が小規模ストレージ８とＲＡＩＤ装置９にファイルを格納する方法と、小規模ストレージ８からファイルを削除する方法の例について、図４と図５を参照して説明する。
<File storage method and file deletion method>
Next, an example of a method in which the data
図４は、通常時における小規模ストレージ８とＲＡＩＤ装置９の書込ファイルの例を示す。
図４では小規模ストレージ８とＲＡＩＤ装置９の書込ファイルと、経過時間を示す時間軸が示されている。この時間軸には、データ蓄積制御部３が小規模ストレージ８とＲＡＩＤ装置９の書込ファイルに対して行う書込データ２２の書込位置が白三角で示されている。書込位置は経過時間の時間軸に沿って上から下に進む。
FIG. 4 shows an example of a write file of the small-
FIG. 4 shows a write file of the small-
データ蓄積制御部３は、転送元装置２０から転送され、書込バッファ６にバッファリングした書込データ２２を、小規模ストレージ８とＲＡＩＤ装置９の書込ファイルに同時に書き込む。そして、小規模ストレージ８には、ファイル（１）、ファイル（２）、ファイル（３）の順に、データ蓄積制御部３によって書込データ２２が書込まれている。また、ＲＡＩＤ装置９には、ファイル（ｍ）、ファイル（ｎ）、ファイル（１）、ファイル（２）、ファイル（３）の順に、データ蓄積制御部３によって書込データ２２が書込まれている。
The data
上述したように小規模ストレージ８は、ＲＡＩＤ装置９と比べて記録容量が少ない。このため、データ蓄積制御部３は、ファイル管理テーブル４を参照し、小規模ストレージ８の空き容量が、小規模ストレージ８に書込む書込ファイルの容量に対して不足する場合に、書込開始日時が古い順に小規模ストレージ８に蓄積された書込ファイルを削除する。図４では、データ蓄積制御部３が、直近に書込んだファイル（１）〜（２）だけを小規模ストレージ８に残し、二点鎖線で示される古いファイル（ｎ）を削除したことが示されている。
As described above, the small-
図５は、ＲＡＩＤ装置９に障害が発生した時における小規模ストレージ８とＲＡＩＤ装置９の書込ファイルの例を示す。
ここでは、データ蓄積制御部３が小規模ストレージ８とＲＡＩＤ装置９にファイル（３）を同時に書込んでいる途中に、ＲＡＩＤ装置９で障害が発生し、ＲＡＩＤ装置９が書込不能になったことを想定する。
FIG. 5 shows an example of the
Here, a failure occurred in the RAID device 9 while the data
このとき、データ蓄積制御部３は、小規模ストレージ８のファイル（３）だけに書込データ２２を書込み、ＲＡＩＤ装置９のファイル（３）に対する書込データ２２の書込みを停止する。そして、データ蓄積制御部３は、ファイル（３）に対する書込データ２２の書込みを終了した後、ファイル（４）に対する書込データ２２の書込みを開始する時点で、再びＲＡＩＤ装置９にも書込データ２２の書込みを試みる。しかし、ＲＡＩＤ装置９に発生した障害が継続していれば、データ蓄積制御部３は、小規模ストレージ８のファイル（４）だけに書込データ２２を書込む。
At this time, the data
ＲＡＩＤ装置９が障害から復旧すると、データ蓄積制御部３は、小規模ストレージ８とＲＡＩＤ装置９のファイル（５）に書込データ２２を同時に書込む。そして、データ蓄積制御部３は、小規模ストレージ８のファイル（３）、（４）に書込まれた書込データ２２を読出して、ＲＡＩＤ装置９のファイル（３）、（４）に書込データ２２を書込む。以降は、図４に示した処理と同じ内容となる。
When the RAID device 9 recovers from the failure, the data
＜データ蓄積制御部の処理の例＞
次に、データ蓄積制御部３の処理の例について、図６〜図１１を参照して説明する。
図６は、データ蓄積制御部３が小規模ストレージ８とＲＡＩＤ装置９の書込ファイルに書込データ２２を書込む処理の例を示すフローチャートである。なお、データ蓄積制御部３が書込バッファ６に書込データ２２をバッファリングする処理の説明は省略する。
<Example of processing of data storage control unit>
Next, an example of processing of the data
FIG. 6 is a flowchart illustrating an example of a process in which the data
始めに、データ蓄積制御部３は、ファイル書込開始要求が含まれる要求２１を待つ（Ｓ１）。そして、データ蓄積制御部３は、転送元装置２０から受信した要求２１からファイル書込開始要求を取り出すと、小規模ストレージ８とＲＡＩＤ装置９の書込ファイルをオープンするファイルオープン処理を行う（Ｓ２）。データ蓄積制御部３は、書込ファイルをオープンした後、転送元装置２０から書込データ２２を受信する（Ｓ３）。そして、データ蓄積制御部３は、小規模ストレージ８とＲＡＩＤ装置９の書込ファイルに書込データ２２を書込む書込み処理を行う（Ｓ４）。
First, the data
次に、データ蓄積制御部３は、書込処理の結果を取得し、小規模ストレージ８とＲＡＩＤ装置９の両方に対して書込エラーが発生したかどうかを判定する（Ｓ５）。データ蓄積制御部３は、両方に書込エラーが発生したと判定すると、ファイルオープン処理で用意したファイル管理テーブル４の登録用レコードに小規模ストレージ８の書込状態として“ファイル書込みエラー”を記録する書込エラー応答を行う（Ｓ６）。そして、データ蓄積制御部３は、ステップＳ１に遷移して次のファイル書込開始要求を待つ。
Next, the data
データ蓄積制御部３は、ステップＳ５にて小規模ストレージ８とＲＡＩＤ装置９の両方又は片方に対するファイル書込みが成功したと判定すると、受信した書込データ２２が最終データであるかどうかを確認する（Ｓ７）。データ蓄積制御部３は、書込データ２２が最終データでないことを確認すると、再びステップＳ３に遷移して、次に受信する書込データ２２の書込処理（Ｓ４）を行う。
If the data
データ蓄積制御部３は、書込データ２２が最終データであることを確認すると、書込ファイルをクローズするファイルクローズ処理を行う（Ｓ８）。その後、データ蓄積制御部３は、小規模ストレージ８から一定時間を経過した過去ファイルを削除する過去ファイル削除処理を行い（Ｓ９）、ステップＳ１に遷移して次のファイル書込開始要求を待つ。
When confirming that the
図７は、図６のステップＳ２に示したファイルオープン処理の例を示すフローチャートである。
このファイルオープン処理において、データ蓄積制御部３は、小規模ストレージ８の書込ファイルをオープンし（Ｓ１１）、書込ファイルのオープンが成功したかどうかを判定する（Ｓ１２）。
FIG. 7 is a flowchart showing an example of the file open process shown in step S2 of FIG.
In this file open process, the data
データ蓄積制御部３は、小規模ストレージ８の書込ファイルのオープンに失敗したと判定すると、オープンに失敗した書込ファイルのファイル情報を管理するための登録用レコードをファイル管理テーブル４に用意する。そして、データ蓄積制御部３は、この登録用レコードに小規模ストレージ８の書込状態として“ファイル書込エラー”をセットする（Ｓ１３）。
If the data
一方、データ蓄積制御部３は、小規模ストレージ８の書込ファイルのオープンに成功したと判定すると、オープンに成功した書込ファイルのファイル情報を管理するための登録用レコードをファイル管理テーブル４に用意する。そして、データ蓄積制御部３は、この登録用レコードに小規模ストレージ８の書込ファイルに対する書込データ２２の書込開始日時、書込ファイルの格納場所をセットし、書込状態に“ファイル書込中”をセットする（Ｓ１４）。
On the other hand, when the data
次に、データ蓄積制御部３は、ＲＡＩＤ装置９の書込ファイルをオープンする（Ｓ１５）。そして、データ蓄積制御部３は、ＲＡＩＤ装置９の書込ファイルのオープンが成功したかどうかを判定する（Ｓ１６）。
Next, the data
データ蓄積制御部３は、ＲＡＩＤ装置９の書込ファイルのオープンに失敗したと判定すると、ファイル管理テーブル４に用意された登録用レコードにＲＡＩＤ装置９の書込状態として“ファイル書込エラー”をセットする（Ｓ１７）。
If the data
ＲＡＩＤ装置９の書込ファイルのオープンに成功した場合は、ファイル管理テーブル４に用意された登録用レコードにＲＡＩＤ装置９の書込ファイルの格納場所をセットし、書込状態に“ファイル書込中”をセットする（Ｓ１８）。ステップＳ１７、Ｓ１８で情報がセットされる登録用レコードはステップＳ１３、Ｓ１４でデータ蓄積制御部３が用意したものである。
When the write file of the RAID device 9 has been successfully opened, the storage location of the write file of the RAID device 9 is set in the registration record prepared in the file management table 4 and the write status is “writing file” "Is set (S18). The registration record in which information is set in steps S17 and S18 is prepared by the data
図８は、図６のステップＳ４に示した書込処理の例を示すフローチャートである。
この書込処理において、データ蓄積制御部３は、ファイル管理テーブル４を参照し、書込ファイルの小規模ストレージ用ファイル情報４ａとＲＡＩＤ装置用ファイル情報４ｂを読み出す（Ｓ２１）。
FIG. 8 is a flowchart showing an example of the writing process shown in step S4 of FIG.
In this writing process, the data
次に、データ蓄積制御部３は、読出した小規模ストレージ用ファイル情報４ａより、小規模ストレージ８の書込ファイルの書込状態が“ファイル書込中”であるかどうかを判定する（Ｓ２２）。そして、書込状態が“ファイル書込中”でなければ、データ蓄積制御部３はステップＳ２６に遷移する。
Next, the data
しかし、書込状態が“ファイル書込中”であれば、データ蓄積制御部３は、小規模ストレージ８の書込ファイルに書込データ２２を書込む（Ｓ２３）。なお、データ蓄積制御部３は、ＲＡＩＤ装置９にデータの書込みが行えない書込不能期間においても、小規模ストレージ８の書込ファイルの書込状態が“ファイル書込中”であれば、小規模ストレージ８の書込ファイルに書込データ２２を書込むことが可能である。ステップＳ２３の後、データ蓄積制御部３は、小規模ストレージ８へのファイル書込が成功したかどうかを判定する（Ｓ２４）。
However, if the writing state is “file writing”, the data
データ蓄積制御部３は、小規模ストレージ８へのファイル書込が失敗したと判定すると、小規模ストレージ用ファイル情報４ａの書込状態に“ファイル書込エラー”をセットする（Ｓ２５）。一方、データ蓄積制御部３は、小規模ストレージ８へのファイル書込が成功したと判定すると、ステップＳ２６に遷移する。
If the data
次に、データ蓄積制御部３は、ステップＳ２１で読出したＲＡＩＤ装置用ファイル情報４ｂよりＲＡＩＤ装置９の書込ファイルの書込状態が“ファイル書込中”であるかどうかを判定する（Ｓ２６）。書込状態が“ファイル書込中”でなければ、データ蓄積制御部３は書込処理を終了する。
Next, the data
しかし、書込状態が“ファイル書込中”であれば、データ蓄積制御部３は、ＲＡＩＤ装置９の書込ファイルに書込データ２２を書込む（Ｓ２７）。そして、データ蓄積制御部３は、ＲＡＩＤ装置９へのファイル書込が成功したかどうかを判定する（Ｓ２８）。
However, if the writing state is “file writing”, the data
データ蓄積制御部３は、ＲＡＩＤ装置９へのファイル書込が失敗したと判定すると、ＲＡＩＤ装置用ファイル情報４ｂの書込状態に“ファイル書込エラー”をセットする（Ｓ２９）。一方、データ蓄積制御部３は、ＲＡＩＤ装置９へのファイル書込が成功したと判定すると、書込処理を終了する。
If the data
図９は、図６のステップＳ８に示したファイルクローズ処理の例を示すフローチャートである。
このファイルクローズ処理において、データ蓄積制御部３は、小規模ストレージ８の書込ファイルに書込エラーが発生したか否か、つまり小規模ストレージ用ファイル情報４ａの書込状態が“ファイル書込エラー”であるかどうかを判定する（Ｓ３１）。データ蓄積制御部３は、書込状態が“ファイル書込エラー”であると判定すると、ステップＳ３４に遷移する。
FIG. 9 is a flowchart showing an example of the file close process shown in step S8 of FIG.
In this file close process, the data
一方、データ蓄積制御部３は、書込状態が“ファイル書込エラー”以外であると判定すると、小規模ストレージ８の書込ファイルをクローズする（Ｓ３２）。そして、データ蓄積制御部３は、小規模ストレージ用ファイル情報４ａの書込状態に“ファイル書込完了”をセットする（Ｓ３３）。
On the other hand, when determining that the writing state is other than “file writing error”, the data
次に、データ蓄積制御部３は、ＲＡＩＤ装置９の書込ファイルに書込エラーが発生し、ＲＡＩＤ装置用ファイル情報４ｂの書込状態が“ファイル書込エラー”であるかどうかを判定する（Ｓ３４）。データ蓄積制御部３は、書込状態が“ファイル書込エラー”であると判定すると、小規模ストレージ８へのファイル書込が正常に完了しているかどうかを判定する（Ｓ３５）。
Next, the data
ステップＳ３５にて小規模ストレージ８へのファイル書込が正常に完了していないと判定されると、データ蓄積制御部３は、ファイルクローズ処理を終了する。一方、データ蓄積制御部３は、小規模ストレージ８へのファイル書込が正常に完了していると判定すると、書き戻し処理（Ｓ３６）を行う。この書き戻し処理は、データ蓄積制御部３が、ＲＡＩＤ装置９に書込みが行えない書込不能期間に小規模ストレージ８に書込んだファイルを、ＲＡＩＤ装置９への書込みを再開したときに小規模ストレージ８から読込み、ＲＡＩＤ装置９に書込む処理である。データ蓄積制御部３は、書き戻し処理の終了後、ファイルクローズ処理を終了する。
If it is determined in step S35 that the file writing to the small-
ステップＳ３４にてＲＡＩＤ装置用ファイル情報４ｂの書込状態が“ファイル書込エラー”以外であると判定されると、データ蓄積制御部３は、ＲＡＩＤ装置９の書込ファイルをクローズする（Ｓ３７）。そして、データ蓄積制御部３は、ＲＡＩＤ装置用ファイル情報４ｂの書込状態に“ファイル書込完了”をセットし（Ｓ３８）、ファイルクローズ処理を終了する。
If it is determined in step S34 that the write state of the RAID
図１０は、図９のステップＳ３６に示した書き戻し処理の例を示すフローチャートである。
この書き戻し処理において、データ蓄積制御部３は、ファイル管理テーブル４の全レコードをサーチして、ＲＡＩＤ装置用ファイル情報４ｂを読出す（Ｓ４１）。書き戻し処理が行われるファイルは、小規模ストレージ用ファイル情報４ａの書込状態が“ファイル書込完了”であり、かつ、ＲＡＩＤ装置用ファイル情報４ｂの書込状態が“ファイル書込エラー”となるファイルである。
FIG. 10 is a flowchart showing an example of the write-back process shown in step S36 of FIG.
In this write-back process, the data
次に、データ蓄積制御部３は、ＲＡＩＤ装置９へのファイル書込が可能であるかどうかを判定する（Ｓ４２）。データ蓄積制御部３は、ＲＡＩＤ装置９へのファイル書込ができないと判定すると、リトライ回数が規定値以下であるかどうかを判定する（Ｓ４３）。このリトライ回数は、データ蓄積制御部３が、ＲＡＩＤ装置９にファイル書込みができなかった場合に、再びＲＡＩＤ装置９にファイル書込を試みる回数である。
Next, the data
データ蓄積制御部３は、リトライ回数が規定値以下であると判定すると、一定時間スリープした後（Ｓ４５）、ステップＳ４２に遷移して、再びＲＡＩＤ装置９への書込みが可能かどうかを判定する。
If the data
ステップＳ４３にてリトライ回数が規定値を超えたと判定されると、ファイル管理テーブルのＲＡＩＤ装置用ファイル情報４ｂの書込状態に“ファイル書込エラー”をセットし（Ｓ４５）、データ蓄積制御部３は書き戻し処理を終了する。
If it is determined in step S43 that the number of retries has exceeded the specified value, “file write error” is set in the write state of the RAID
ステップＳ４２にてＲＡＩＤ装置９へのファイル書込が可能であると判定されると、データ蓄積制御部３は、ＲＡＩＤ装置用ファイル情報４ｂの書込状態に“ファイル書込中”をセットする（Ｓ４６）。そして、データ蓄積制御部３は、小規模ストレージ８から読み出した書込データ２２をＲＡＩＤ装置９の書込ファイルに書込む（Ｓ４７）。
If it is determined in step S42 that file writing to the RAID device 9 is possible, the data
その後、データ蓄積制御部３は、ＲＡＩＤ装置９へのファイル書込みが完了すると、ＲＡＩＤ装置用ファイル情報４ｂの書込状態に“ファイル書込完了”をセットする（Ｓ４８）。そして、データ蓄積制御部３は、ＲＡＩＤ装置９の書込ファイルをクローズして（Ｓ４９）、書き戻し処理を終了する。
Thereafter, when the file writing to the RAID device 9 is completed, the data
図１１は、図６のステップＳ９に示した過去ファイル削除処理の例を示すフローチャートである。
この過去ファイル削除処理において、データ蓄積制御部３は、小規模ストレージ８の蓄積済み容量が、予め設定した閾値を超えたかどうかを判定する（Ｓ５１）。データ蓄積制御部３は、小規模ストレージ８の蓄積済み容量が閾値以下であると判定すると、過去ファイル削除処理を終了する。
FIG. 11 is a flowchart showing an example of the past file deletion process shown in step S9 of FIG.
In this past file deletion process, the data
一方、データ蓄積制御部３は、小規模ストレージ８の蓄積済み容量が閾値を超えたと判定すると、小規模ストレージ８に書込まれて一定期間が経過した書込ファイルのレコードを小規模ストレージ用ファイル情報４ａから取得する（Ｓ５２）。このとき、データ蓄積制御部３は、ファイル管理テーブル４の全レコードをチェックし、書込開始時刻が最も古い書込ファイルの小規模ストレージ用ファイル情報４ａをファイル管理テーブル４から取得している。
On the other hand, when the data
次に、データ蓄積制御部３は、小規模ストレージ用ファイル情報４ａのレコードに示される読込状態が“ファイル読込中”であるかどうかを判定する（Ｓ５３）。データ蓄積制御部３は、小規模ストレージ８から削除する対象となる書込ファイルの読込状態が“ファイル読込中”であると判定すると、この書込ファイルはデータ配信制御部５によって読込まれている途中であるため、削除できない。この場合、データ蓄積制御部３は過去ファイル削除処理を終了する。そして、データ蓄積制御部３は、削除する対象となる書込ファイルとは異なる書込ファイルを小規模ストレージ８から削除する。このとき、小規模ストレージ８から削除される書込ファイルは、例えば、書込開始時刻が２番目に古い書込ファイルである。
Next, the data
ステップＳ５３にて読込状態が“ファイル読込中”でないと判定されると、データ蓄積制御部３は、小規模ストレージ８から該当する書込ファイルを削除する（Ｓ５４）。そして、データ蓄積制御部３は、削除した書込ファイルの小規模ストレージ用ファイル情報４ａとＲＡＩＤ装置用ファイル情報４ｂのレコードをファイル管理テーブル４から削除して（Ｓ５５）、過去ファイル削除処理を終了する。
If it is determined in step S53 that the reading state is not “file reading”, the data
＜データ配信制御部の処理の例＞
次に、データ配信制御部５の処理の例について、図１２〜図１４を参照して説明する。
図１２は、データ配信制御部５が小規模ストレージ８又はＲＡＩＤ装置９の読込ファイルから読込データ３２を読込む処理の例を示すフローチャートである。なお、データ配信制御部５が小規模ストレージ８とＲＡＩＤ装置９の読込ファイルから読み込んだ読込データ３２を読込バッファ７にバッファリングする処理の説明は省略する。
<Example of processing of data distribution control unit>
Next, an example of processing of the data
FIG. 12 is a flowchart illustrating an example of processing in which the data
始めに、データ配信制御部５は、小規模ストレージ８又はＲＡＩＤ装置９の読込ファイルから読込データ３２を読み込むために要求３１に含まれるファイル読込開始要求を待つ（Ｓ６１）。データ配信制御部５は、転送先装置３０から要求３１を受信し、ファイル読込開始要求を読出すと、読込ファイルのオープン処理を行う（Ｓ６２）。
First, the data
次に、データ配信制御部５は、転送先装置３０からの要求３１に含まれる読込ファイルの読込要求を待つ（Ｓ６３）。次に、データ配信制御部５は、要求３１から読込要求を取得すると、小規模ストレージ８又はＲＡＩＤ装置９の読込ファイルをオープンし、この読込ファイルから読込要求された読込データ３２を読み込む（Ｓ６４）。なお、データ配信制御部５は、ＲＡＩＤ装置９の書込不能期間であれば、小規模ストレージ８の読込ファイルから読込データ３２を読込む。そして、データ配信制御部５は、読込データ３２を転送先装置３０に転送する読込データ応答を行う（Ｓ６５）。
Next, the data
その後、データ配信制御部５は、読込データ応答を行った読込データ３２が読込ファイル内の最終データであるかどうかを判定する（Ｓ６６）。データ配信制御部５は、読込データ応答を行った読込データ３２が読込ファイル内の最終データでないと判定すると、ステップＳ６３に遷移して、再び読込ファイルから読込データ３２を読み込む。
Thereafter, the data
一方、データ配信制御部５は、読込データ応答を行った読込データ３２が読込ファイル内の最終データであると判定すると、読込ファイルクローズ処理を行う（Ｓ６７）。その後、データ配信制御部５は、ステップＳ６１に遷移して、再びファイル読込開始要求を待つ。
On the other hand, if the data
図１３は、図１２のステップＳ６２に示した読込ファイルオープン処理の例を示すフローチャートである。
この読込ファイルオープン処理において、データ配信制御部５は、転送先装置３０から読込開始要求によって指定された読込ファイルの小規模ストレージ用ファイル情報４ａとＲＡＩＤ装置用ファイル情報４ｂをファイル管理テーブル４から取得する（Ｓ７１）。そして、データ配信制御部５は、指定された読込ファイルが小規模ストレージ８に存在するかどうかを判定する（Ｓ７２）。
FIG. 13 is a flowchart showing an example of the read file open process shown in step S62 of FIG.
In this read file open process, the data
ここで、小規模ストレージ８は、ＲＡＩＤ装置９よりもデータ蓄積制御部３が書込ファイルに書込データ２２を書込むアクセス速度、及びデータ配信制御部５が読込ファイルから読込データ３２を読込むアクセス速度が速い。このため、データ配信制御部５は、小規模ストレージ８及びＲＡＩＤ装置９に同じデータの読込ファイルが蓄積されていれば、小規模ストレージ８の読込ファイルから優先して読込データ３２を読込んで転送先装置３０に転送する。
Here, in the small-
ステップＳ７２にて指定された読込ファイルが小規模ストレージ８に存在しないと判定されると、データ配信制御部５は、ＲＡＩＤ装置９に読込ファイルが存在するかどうかを判定する（Ｓ７３）。データ配信制御部５は、ＲＡＩＤ装置９にも読込ファイルが存在しないと判定すると、転送先装置３０に対し読込ファイルの転送不可である旨を通知して、読込ファイルオープン処理を終了する。
If it is determined in step S72 that the read file specified does not exist in the small-
ステップＳ７３にて指定された読込ファイルがＲＡＩＤ装置９に存在すると判定されると、データ配信制御部５は、読込対象としてＲＡＩＤ装置９の読込ファイルをオープンする（Ｓ７４）。そして、データ配信制御部５は、ＲＡＩＤ装置用ファイル情報４ｂの書込状態に“ファイル読込中”をセットして（Ｓ７５）、読込ファイルオープン処理を終了する。
If it is determined that the read file specified in step S73 exists in the RAID device 9, the data
ステップＳ７２にて指定された読込ファイルが小規模ストレージ８に存在すると判定されると、データ配信制御部５は、読込対象として小規模ストレージ８の読込ファイルをオープンする（Ｓ７６）。そして、データ配信制御部５は、小規模ストレージ用ファイル情報４ａの書込状態に“ファイル読込中”をセットして（Ｓ７７）、読込ファイルオープン処理を終了する。
If it is determined that the read file specified in step S72 exists in the small-
図１４は、図１２のステップＳ６７に示した読込ファイルクローズ処理の例を示すフローチャートである。
この読込ファイルクローズ処理において、データ配信制御部５は、ファイル管理テーブル４を参照し（Ｓ８１）、読込ファイルの小規模ストレージ用ファイル情報４ａを取得する。そして、データ配信制御部５は、小規模ストレージ８から読込ファイルを読込んだかどうかを判定する（Ｓ８２）。
FIG. 14 is a flowchart showing an example of the read file close process shown in step S67 of FIG.
In this read file close process, the data
データ配信制御部５は、小規模ストレージ８から読込ファイルを読込んでいないと判定すると、ＲＡＩＤ装置用ファイル情報４ｂの読込状態に“ファイル読込完了”をセットし（Ｓ８３）、ＲＡＩＤ装置９の読込ファイルをクローズする（Ｓ８５）。
If the data
一方、データ配信制御部５は、小規模ストレージ８から読込ファイルを読込んだと判定すると、小規模ストレージ用ファイル情報４ａの読込状態に“ファイル読込完了”をセットし（Ｓ８４）、小規模ストレージ８の読込ファイルをクローズする（Ｓ８５）。
On the other hand, if the data
以上説明した一実施の形態例に係る蓄積配信システム１によれば、ＲＡＩＤ装置９の全体をミラーリング構成とするのではなく、ＲＡＩＤ装置９の他に小規模ストレージ８を設けている。そして、データ蓄積制御部３が小規模ストレージ８とＲＡＩＤ装置９に直近に書込んだファイルだけを二重化している。この蓄積配信システム１は、従来のようにＲＡＩＤ装置９と同じ規模のストレージ装置をミラーリング構成ではないので、蓄積配信システム１の構築コスト、運用コストを下げることができる。このため、蓄積配信システム１が大規模になるほど、システム全体のコストパフォーマンスを上げることができる。
According to the storage / distribution system 1 according to the embodiment described above, the entire RAID device 9 is not configured in a mirroring configuration, but a small-
また、ファイル管理テーブル４には、小規模ストレージ８に蓄積されるファイル８ａのファイル情報と、ＲＡＩＤ装置９に蓄積されるファイル９ａのファイル情報が管理されている。そして、ＲＡＩＤ装置９に障害が発生している間、データ蓄積制御部３は、小規模ストレージ８の書込ファイルに書込データ２２を書込んでいる。このため、データ蓄積制御部３は、ファイル管理テーブル４を参照することで、ＲＡＩＤ装置９へのファイル書込が停止した期間にＲＡＩＤ装置９では欠損していた書込ファイルが小規模ストレージ８に存在することが分かる。また、データ蓄積制御部３は、ＲＡＩＤ装置９の障害が復旧すると、障害発生期間に小規模ストレージ８に書込まれた書込ファイルの書込データ２２を小規模ストレージ８から読込んだ後、ＲＡＩＤ装置９に書き戻す。これによりＲＡＩＤ装置９のデータに欠損が生じず、ＲＡＩＤ装置９の信頼性を高めることができる。
The file management table 4 manages file information of the
また、ＲＡＩＤ装置９に一時的に障害が発生しても、データ配信制御部５は、小規模ストレージ８に蓄積されている読込ファイルを優先的に読み出す。これにより蓄積配信システム１を停止することなく転送先装置３０への読込データ３２の配信を継続することができる。
Even if a failure occurs temporarily in the RAID device 9, the data
また、ＲＡＩＤ装置９の一時的な障害であれば、ＲＡＩＤ装置９に蓄積済みのファイル９ａはＲＡＩＤ５構成などにより冗長化されているので破損しない。このため、ＲＡＩＤ装置９が復旧した後に、データ配信制御部５は、ＲＡＩＤ装置９のファイル９ａから読込データ３２を読み出し可能である。
If the RAID device 9 is a temporary failure, the
［変形例］
なお、ＲＡＩＤ装置９に障害が発生したときだけでなく、ＲＡＩＤ装置９のメンテナンスや瞬間停電によってもＲＡＩＤ装置９のファイル９ａに書込データ２２を書き込めないことがある。この場合であっても、ＲＡＩＤ装置９のファイル９ａに書込データ２２を書き込めない間、データ蓄積制御部３は、小規模ストレージ８にファイル８ａを蓄積しておき、ＲＡＩＤ装置９が復旧した後、小規模ストレージ８からファイル８ａを読み出してＲＡＩＤ装置９に書き戻すことができる。
[Modification]
The
また、上述した一実施の形態例では、小規模ストレージ８のファイル８ａを削除する方法として、ファイル管理テーブル４に書込開始日時を登録しておき、書込開始日時が最も古いファイル８ａから削除している。しかし、ファイル管理テーブル４にファイル８ａの参照回数を登録しておくことにより、最も参照されていないファイル８ａから削除することも考えられる。
In the embodiment described above, as a method of deleting the
また、上述した一実施の形態例では小規模ストレージ８とＲＡＩＤ装置９への処理をシーケンシャル処理しているが、並列処理により高速化することも可能である。
Further, in the above-described embodiment, the processing to the small-
また、上述した一実施の形態例では、小規模ストレージ８とＲＡＩＤ装置９への書込及び読込単位をファイル毎としたが、例えば、ブロック毎であってもよい。
In the above-described embodiment, the unit for writing and reading to the small-
さらに、上述した一実施の形態例では小規模ストレージ８を蓄積配信サーバ２に内蔵する場合を示したが、小規模ストレージ８を蓄積配信サーバ２の外部に設ける構成としてもよい。
Furthermore, although the case where the small-
また、本発明は上述した実施の形態例に限られるものではなく、特許請求の範囲に記載した本発明の要旨を逸脱しない限りその他種々の応用例、変形例を取り得ることは勿論である。
例えば、上述した実施の形態例は本発明を分かりやすく説明するために装置及びシステムの構成を詳細且つ具体的に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることは可能であり、更にはある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加、削除、置換をすることも可能である。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
Further, the present invention is not limited to the above-described embodiments, and various other application examples and modifications can be taken without departing from the gist of the present invention described in the claims.
For example, the above-described embodiments are detailed and specific descriptions of the configuration of the apparatus and the system in order to explain the present invention in an easy-to-understand manner, and are not necessarily limited to those having all the configurations described. Absent. Further, a part of the configuration of one embodiment can be replaced with the configuration of another embodiment, and the configuration of another embodiment can be added to the configuration of one embodiment. Moreover, it is also possible to add, delete, and replace other configurations for a part of the configuration of each embodiment.
Further, the control lines and information lines indicate what is considered necessary for the explanation, and not all the control lines and information lines on the product are necessarily shown. Actually, it may be considered that almost all the components are connected to each other.
１…蓄積配信システム、２…蓄積配信サーバ、３…データ蓄積制御部、４…ファイル管理テーブル、４ａ…小規模ストレージ用ファイル情報、４ｂ…ＲＡＩＤ装置用ファイル情報、５…データ配信制御部、８…小規模ストレージ、９…ＲＡＩＤ装置 DESCRIPTION OF SYMBOLS 1 ... Accumulation delivery system, 2 ... Accumulation delivery server, 3 ... Data accumulation control part, 4 ... File management table, 4a ... File information for small-scale storage, 4b ... File information for RAID apparatus, 5 ... Data distribution control part, 8 ... Small storage, 9 ... RAID devices
Claims (6)
前記第１ストレージ装置又は前記第２ストレージ装置から読込んだ前記データを転送先装置に転送し、前記管理テーブルに前記管理情報を記録するデータ配信制御部と、
転送元装置から転送された前記データを前記第１ストレージ装置及び前記第２ストレージ装置に書込んで、前記管理テーブルに前記管理情報を記録し、前記第２ストレージ装置に前記データの書込みが行えない書込不能期間に前記第１ストレージ装置に書込んだ前記データを、前記書込不能期間の経過後に、前記管理テーブルを参照して前記第１ストレージ装置から読込んで、前記第２ストレージ装置に書込むデータ蓄積制御部と、を備える
蓄積配信サーバ。 The first storage device having a predetermined recording capacity and storing data, and the second storage device having a recording capacity larger than that of the first storage device and storing the data in a redundant manner, respectively. A management table that holds management information of
A data distribution control unit that transfers the data read from the first storage device or the second storage device to a transfer destination device and records the management information in the management table;
The data transferred from the transfer source device is written to the first storage device and the second storage device, the management information is recorded in the management table, and the data cannot be written to the second storage device. The data written to the first storage device during the unwritable period is read from the first storage device with reference to the management table after the unwritable period elapses, and written to the second storage device. A storage and distribution server.
前記データ配信制御部は、前記第１ストレージ装置及び前記第２ストレージ装置に同じ前記データが蓄積されている場合に、前記第１ストレージ装置から優先して前記データを読込んで前記転送先装置に転送する
請求項１に記載の蓄積配信サーバ。 The first storage device has a higher access speed at which the data storage control unit writes the data and an access speed at which the data distribution control unit reads the data than the second storage device,
The data distribution control unit reads the data preferentially from the first storage device and transfers it to the transfer destination device when the same data is accumulated in the first storage device and the second storage device The storage / delivery server according to claim 1.
請求項２に記載の蓄積配信サーバ。 The storage distribution server according to claim 2, wherein the data distribution control unit reads the data from the first storage device and transfers the data to a transfer destination device during the non-writable period.
前記データ蓄積制御部は、前記管理テーブルを参照し、前記第１ストレージ装置の空き容量が、前記第１ストレージ装置に書込む前記データの容量に対して不足する場合に、前記書込開始日時が古い順に前記第１ストレージ装置に蓄積された前記データを削除する
請求項３に記載の蓄積配信サーバ。 The management table manages, as the management information, a write state, a write start date and time, a read state, and a storage location of the data with respect to the first storage device,
The data accumulation control unit refers to the management table, and when the free capacity of the first storage device is insufficient with respect to the capacity of the data to be written to the first storage device, the write start date and time is The storage / delivery server according to claim 3, wherein the data stored in the first storage device is deleted in chronological order.
請求項４に記載の蓄積配信サーバ。 The data accumulation control unit refers to the management table, and when the data to be deleted from the first storage device is read by the data distribution control unit, the data to be deleted is The accumulation / delivery server according to claim 4, wherein different data is deleted from the first storage device.
前記第１ストレージ装置よりも大きい記録容量を有し、前記データを冗長化して蓄積する第２ストレージ装置と、
前記第１ストレージ装置及び前記第２ストレージ装置がそれぞれ蓄積する前記データの管理情報を保持する管理テーブルと、
前記第１ストレージ装置又は前記第２ストレージ装置から読込んだ前記データを転送先装置に転送し、前記管理テーブルに前記管理情報を記録するデータ配信制御部と、
転送元装置から転送された前記データを前記第１ストレージ装置及び前記第２ストレージ装置に書込んで、前記管理テーブルに前記管理情報を記録し、前記第２ストレージ装置に前記データの書込みが行えない書込不能期間に前記第１ストレージ装置に書込んだ前記データを、前記書込不能期間の経過後に、前記管理テーブルを参照して前記第１ストレージ装置から読込んで、前記第２ストレージ装置に書込むデータ蓄積制御部と、を備える
蓄積配信システム。 A first storage device having a predetermined recording capacity and storing data;
A second storage device having a larger recording capacity than the first storage device and storing the data in a redundant manner;
A management table that holds management information of the data stored in the first storage device and the second storage device;
A data distribution control unit that transfers the data read from the first storage device or the second storage device to a transfer destination device and records the management information in the management table;
The data transferred from the transfer source device is written to the first storage device and the second storage device, the management information is recorded in the management table, and the data cannot be written to the second storage device. The data written to the first storage device during the unwritable period is read from the first storage device with reference to the management table after the unwritable period elapses, and written to the second storage device. And a data storage control unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014183215A JP6220324B2 (en) | 2014-09-09 | 2014-09-09 | Storage and distribution server and storage and distribution system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014183215A JP6220324B2 (en) | 2014-09-09 | 2014-09-09 | Storage and distribution server and storage and distribution system |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2016057811A true JP2016057811A (en) | 2016-04-21 |
| JP2016057811A5 JP2016057811A5 (en) | 2016-10-27 |
| JP6220324B2 JP6220324B2 (en) | 2017-10-25 |
Family
ID=55758585
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014183215A Active JP6220324B2 (en) | 2014-09-09 | 2014-09-09 | Storage and distribution server and storage and distribution system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6220324B2 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019061483A (en) * | 2017-09-26 | 2019-04-18 | キヤノン株式会社 | Storage control apparatus, method and program for controlling same, and information processing apparatus |
| JP2021527286A (en) * | 2018-06-08 | 2021-10-11 | ウェカ．アイオー リミテッド | Encryption for distributed file systems |
| JP7439511B2 (en) | 2019-12-27 | 2024-02-28 | 富士フイルムビジネスイノベーション株式会社 | FAX receiving device, FAX receiving program, and FAX transmitting/receiving system |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005141475A (en) * | 2003-11-06 | 2005-06-02 | Tokyo Institute Of Technology | Content storing system, method and its program |
| JP2005196490A (en) * | 2004-01-07 | 2005-07-21 | Hitachi Ltd | System and method for data duplication |
| JP2014042124A (en) * | 2012-08-21 | 2014-03-06 | Nippon Telegr & Teleph Corp <Ntt> | Content distribution system and content distribution method |
-
2014
- 2014-09-09 JP JP2014183215A patent/JP6220324B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005141475A (en) * | 2003-11-06 | 2005-06-02 | Tokyo Institute Of Technology | Content storing system, method and its program |
| JP2005196490A (en) * | 2004-01-07 | 2005-07-21 | Hitachi Ltd | System and method for data duplication |
| JP2014042124A (en) * | 2012-08-21 | 2014-03-06 | Nippon Telegr & Teleph Corp <Ntt> | Content distribution system and content distribution method |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019061483A (en) * | 2017-09-26 | 2019-04-18 | キヤノン株式会社 | Storage control apparatus, method and program for controlling same, and information processing apparatus |
| JP2021527286A (en) * | 2018-06-08 | 2021-10-11 | ウェカ．アイオー リミテッド | Encryption for distributed file systems |
| JP7238111B2 (en) | 2018-06-08 | 2023-03-13 | ウェカ．アイオー リミテッド | Encryption for distributed file systems |
| US11914736B2 (en) | 2018-06-08 | 2024-02-27 | Weka.IO Ltd. | Encryption for a distributed filesystem |
| JP7439511B2 (en) | 2019-12-27 | 2024-02-28 | 富士フイルムビジネスイノベーション株式会社 | FAX receiving device, FAX receiving program, and FAX transmitting/receiving system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6220324B2 (en) | 2017-10-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10223272B2 (en) | Latency sensitive metadata object persistence operation for storage device | |
| US7310711B2 (en) | Hard disk drive with support for atomic transactions | |
| US9588856B2 (en) | Restoring redundancy in a storage group when a storage device in the storage group fails | |
| US7765372B2 (en) | Storage controller and data management method | |
| CN106055431B (en) | The method and device of backup and recovery based on the online rollback of snapshot | |
| EP1712998B1 (en) | Remote copy system and remote copy method | |
| US7509467B2 (en) | Storage controller and data management method | |
| US11509716B2 (en) | Method and apparatus for performing simple storage service seamless migration using index objects | |
| US20060077726A1 (en) | Data transfer method, storage apparatus and computer-readable storage medium | |
| JP2014137711A (en) | Storage device, backup program and backup method | |
| JP6220324B2 (en) | Storage and distribution server and storage and distribution system | |
| WO2014075586A1 (en) | Method and device for automatically recovering storage of jbod array | |
| US20050033933A1 (en) | Systems and methods for modifying disk drive firmware in a raid storage system | |
| JP6070146B2 (en) | Information processing apparatus and backup method | |
| US11516287B2 (en) | Method and apparatus for performing simple storage service seamless migration using index objects | |
| US9652325B2 (en) | Storage system and method to support scheduled and operational going down of a storing unit | |
| JP5159777B2 (en) | Apparatus and method for managing and storing information and metadata | |
| US10025521B2 (en) | Obtaining additional data storage from another data storage system | |
| US8555007B2 (en) | Storage system with journal disks dynamically assigned | |
| JP2018120317A (en) | Information processing apparatus, control program and information processing method | |
| US7657719B2 (en) | Controller for a copy operation between a host computer and hard disks, a control method thereof, and a recording medium storing a program for executing the control method | |
| KR20100094157A (en) | A method to maintain software raid consistency using journaling file system | |
| JP2013025655A (en) | Log file management module and log file management method | |
| JP2018190192A (en) | Storage device and storage control program | |
| US8549221B2 (en) | RAID management apparatus, RAID management method, and computer product |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160909 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160909 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170619 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170704 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170822 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170926 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170929 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6220324 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |