JP6572574B2 - ストレージ制御システム、ストレージ制御システムのノード、およびストレージ制御方法 - Google Patents
ストレージ制御システム、ストレージ制御システムのノード、およびストレージ制御方法 Download PDFInfo
- Publication number
- JP6572574B2 JP6572574B2 JP2015058847A JP2015058847A JP6572574B2 JP 6572574 B2 JP6572574 B2 JP 6572574B2 JP 2015058847 A JP2015058847 A JP 2015058847A JP 2015058847 A JP2015058847 A JP 2015058847A JP 6572574 B2 JP6572574 B2 JP 6572574B2
- Authority
- JP
- Japan
- Prior art keywords
- distribution destination
- request
- node
- fragment
- destination node
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
(実施の形態)
図1は、本発明の実施の形態におけるストレージ制御システムの構成を示すブロック図である。
利用者2000から書き込み要求を受け取った要求処理部1は、主記憶装置3上でデータをフラグメントに分割し、パリティを作成する。
利用者2000から書き込み要求を受け取った要求処理部1は、TCP制御部5またはUDP制御部6を経由して、他のノード101〜105に要求を分配する。この時、一部のノード(ノード105)に対する通信は、通信障害のため失敗する可能性があるとする。
要求元のノード100および要求分配先のノード101〜105において、主記憶装置3上に記憶されたフラグメントとパリティを、補助記憶装置4に格納する。補助記憶装置4への格納が完了した要求分配先のノード101〜105は、要求元のノード100に、TCP制御部5またはUDP制御部6を経由して、結果(成功または失敗)を返却する。
要求元のノード100は、必要数のノード(要求元のノード100を含んで、フラグメント数N個分)から成功を受け取った時点で、利用者2000に結果(成功)を返却する。逆に、パリティ数Mを超えた数の失敗を受け取った場合は、利用者2000に結果(失敗)を返却するか、結果(失敗)を返却せずにリトライを行う。失敗が、パリティ数を超えるとデータ復旧ができなくなるためである。通信障害のため、一定時間を経過しても利用者2000に結果を返却できない状況の場合も、リトライを行う。これは、要求分配先のノード101〜105の一部から結果が返却されなかったとしても、それがパリティ数Mを超えなければ、書き込み要求に対して遅延なく結果を利用者2000に渡せることを意味する。なお、利用者に結果を返却した時点で、要求元のノード100の主記憶装置3からは、結果(成功)を受け取ったフラグメントとパリティを削除する。
要求元のノード100は、要求分配先のノード101〜105から結果(成功)を受け取らなかったフラグメントとパリティにおいて、後処理を行うためのノードを選択する。後処理を行うためのノードは、結果(成功)を受け取ったノードの中で、現在処理しているフラグメントやパリティが少ないものの中から任意に選ばれる(例えばノード102)。要求元のノード100は、選択されたノード102に対して、対象となるフラグメント・パリティを送り、後処理の委託を行う。
後処理を委託されたノード102は、要求元のノード100に対して、応答(受理または拒否)を返却する。受理された場合、要求元のノード100の主記憶装置3は、後処理を委託したフラグメントとパリティを削除する。
後処理を委託されたノード102は、対象となるフラグメントとパリティが本来格納されているべきノード105に対して、定期的にTCP制御部5またはUDP制御部6を経由して通信を行う。まず最初に、対象となるフラグメントとパリティが本来格納されているべきノード105に対して、対象となるフラグメントとパリティが格納されているか否かを確認する。
利用者2000から読み込み要求を受け取った要求処理部1は、TCP制御部5またはUDP制御部6を経由して、他のノード101〜105に要求を分配する。この時、一部のノードに対する通信は、通信障害のため失敗する可能性があるとする(例えば、105)。
要求元のノード100および要求分配先のノード101〜105において、補助記憶装置4上に記憶されたフラグメントとパリティを、主記憶装置3に読み出す。主記憶装置3への読み出しが完了した要求分配先のノード101〜105は、要求元のノード100に、TCP制御部5またはUDP制御部6を経由して、読み出したフラグメントとパリティを送信する。
要求元のノード100は、必要数のノード(要求元のノード100を含んで、フラグメント数N個分)から成功を受け取った時点で、受け取ったフラグメントとパリティからデータを復元し、利用者2000に返却する。
2 通信制御部
3 主記憶装置
4 補助記憶装置
5 TCP制御部
6 UDP制御部
7 通信装置
100 ノード
101 ノード
102 ノード
103 ノード
104 ノード
105 ノード
1000 CAS
2000 利用者
Claims (7)
- 対象データの書き込みを要求するための書き込み要求を受け付けた場合に、
前記対象データを所定容量のフラグメントに分割し、
分割された前記フラグメントの書き込みの要求を複数の分配先ノードへ送信し、
前記フラグメントの書き込みの要求に対して前記フラグメントの書き込みが成功したことを表す結果を複数の前記分配先ノードから受信する
要求処理手段を備え、
前記要求処理手段は、前記フラグメントの書き込みが成功したことを表す結果を複数の前記分配先ノードのうち第1の分配先ノードから受信しない場合に、前記第1の分配先ノードに対して、前記第1の分配先ノードへ送信された前記フラグメントが格納されているか否かを確認し、格納されていなければ、書き込みが成功するまで、該フラグメントの書き込みを試みる要求を、前記フラグメントの書き込みが成功したことを表す結果を送信した複数の前記分配先ノードのうち第2の分配先ノードへ送信する
ノード。 - 前記要求処理手段は、複数の前記分配先ノードのうち、書き込まれた前記フラグメントの処理数がより少ない第3の分配先ノードを前記第2の分配先ノードとして選択する
請求項1に記載のノード。 - 前記要求処理手段は、前記第2の分配先ノードへ送信した前記フラグメントの書き込みの要求について、前記第1の分配先ノードへの該要求の送信を前記第2の分配先ノードへ委託する
請求項1または2に記載のノード。 - 複数の前記分配先ノードのうち第4の分配先ノードとの間で通信障害が発生した場合に、前記第4の分配先ノードとの間における通信制御方式を第1の通信制御方式から第2の通信制御方式へ切り替える通信制御手段を更に備える
請求項1から3のうち1項に記載のノード。 - 前記第1の通信制御方式はTCP(Transmission Control Protocol)であり、前記第2の通信制御方式はUDP(User Datagram Protocol)である
請求項4に記載のノード。 - 対象データの書き込みを要求するための書き込み要求を受け付けた場合に、
前記対象データを所定容量のフラグメントに分割し、
分割された前記フラグメントの書き込みの要求を複数の分配先ノードへ送信し、
前記フラグメントの書き込みの要求に対して前記フラグメントの書き込みが成功したことを表す結果を複数の前記分配先ノードから受信する
要求処理手順を含むストレージ制御方法であって、
前記要求処理手順において、前記フラグメントの書き込みが成功したことを表す結果を複数の前記分配先ノードのうち第1の分配先ノードから受信しない場合に、前記第1の分配先ノードに対して、前記第1の分配先ノードへ送信された前記フラグメントが格納されているか否かを確認し、格納されていなければ、書き込みが成功するまで、該フラグメントの書き込みを試みる要求を、前記フラグメントの書き込みが成功したことを表す結果を送信した複数の前記分配先ノードのうち第2の分配先ノードへ送信する
ストレージ制御方法。 - 請求項1乃至5の何れか1項に記載のノードと、
複数の前記分配先ノードと
を備えるストレージ制御システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015058847A JP6572574B2 (ja) | 2015-03-23 | 2015-03-23 | ストレージ制御システム、ストレージ制御システムのノード、およびストレージ制御方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015058847A JP6572574B2 (ja) | 2015-03-23 | 2015-03-23 | ストレージ制御システム、ストレージ制御システムのノード、およびストレージ制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016177714A JP2016177714A (ja) | 2016-10-06 |
JP6572574B2 true JP6572574B2 (ja) | 2019-09-11 |
Family
ID=57071408
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015058847A Active JP6572574B2 (ja) | 2015-03-23 | 2015-03-23 | ストレージ制御システム、ストレージ制御システムのノード、およびストレージ制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6572574B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113010119B (zh) * | 2021-04-27 | 2022-09-30 | 宏图智能物流股份有限公司 | 一种通过主备方式实现语音数据分布式存储的方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009193502A (ja) * | 2008-02-18 | 2009-08-27 | Hitachi Ltd | 計算機システム、ストレージ装置、及び、処理代替方法 |
JP5413948B2 (ja) * | 2009-01-27 | 2014-02-12 | 日本電気株式会社 | ストレージシステム |
JP2012088955A (ja) * | 2010-10-20 | 2012-05-10 | Nec Corp | データ複製システム、データ複製サーバ、データ複製方法、及び、データ複製プログラム |
JP5900094B2 (ja) * | 2012-03-28 | 2016-04-06 | 日本電気株式会社 | データ整合システム、データ整合方法およびデータ整合プログラム |
-
2015
- 2015-03-23 JP JP2015058847A patent/JP6572574B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016177714A (ja) | 2016-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6282293B2 (ja) | ネットワーク・パラメータに基づく、完全性点検および選択的な重複排除を実施する方法、コンピュータ・システムおよびコンピュータ・プログラム | |
US7974186B2 (en) | Connection recovery device, method and computer-readable medium storing therein processing program | |
JP5935940B2 (ja) | 通信方法、通信装置、および、通信プログラム | |
US10067719B1 (en) | Methods and systems for storing and accessing data in a distributed data storage system | |
CN113515531B (zh) | 数据访问方法、装置、客户端及存储介质 | |
JP5255035B2 (ja) | フェイルオーバシステム、記憶処理装置及びフェイルオーバ制御方法 | |
KR101768365B1 (ko) | M2M/IoT 시스템의 구독-통지에서 통지 실패 관리 방법 및 시스템 | |
JP2019106697A (ja) | 相互接続ネットワークでのメッセージ再送遅延を動的に管理するための方法及びデバイス | |
US10154079B2 (en) | Pre-boot file transfer system | |
JP2010213150A (ja) | 送信装置、大容量ファイル配信システム、同システムにおけるファィル再送制御方法、再送制御プログラム | |
US9891992B2 (en) | Information processing apparatus, information processing method, storage system and non-transitory computer readable storage media | |
CN113411363A (zh) | 一种镜像文件的上传方法、相关设备及计算机存储介质 | |
JP6572574B2 (ja) | ストレージ制御システム、ストレージ制御システムのノード、およびストレージ制御方法 | |
CN113391759B (zh) | 一种通信方法和设备 | |
JP2010171557A (ja) | 同報送信装置及び受信ノード及び同報送信プログラム及び記録媒体 | |
EP3346671B1 (en) | Service processing method and equipment | |
JP6151365B2 (ja) | 情報処理システム、情報処理方法及びプログラム | |
KR101486546B1 (ko) | 장애 대비를 위한 복제 시스템 및 그 방법 | |
CN110784775A (zh) | 一种视频分片缓存方法、装置及视频点播系统 | |
US20190155510A1 (en) | Expanding a dispersed storage network (dsn) | |
US20120296970A1 (en) | File managing apparatus for managing access to an online storage service | |
US20180018222A1 (en) | Router-based routing selection | |
US10270705B1 (en) | Transmission of stateful data over a stateless communications channel | |
JP7332660B2 (ja) | 中継装置、プログラム、システム、通信端末及び方法 | |
CN113228568B (zh) | 对云存储服务进行网络优化的方法和设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180215 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181204 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190117 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190514 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190703 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190716 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190729 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6572574 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |