JP2016021110A - オブジェクトストレージシステムおよびその制御方法およびその制御プログラム - Google Patents
オブジェクトストレージシステムおよびその制御方法およびその制御プログラム Download PDFInfo
- Publication number
- JP2016021110A JP2016021110A JP2014143949A JP2014143949A JP2016021110A JP 2016021110 A JP2016021110 A JP 2016021110A JP 2014143949 A JP2014143949 A JP 2014143949A JP 2014143949 A JP2014143949 A JP 2014143949A JP 2016021110 A JP2016021110 A JP 2016021110A
- Authority
- JP
- Japan
- Prior art keywords
- file
- object identifier
- storage
- damaged
- identifier
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【解決手段】オブジェクトストレージシステム100は、ファイル11を記憶する記憶装置10と、オペレーティングシステム20(OS)と、ファイル11とオブジェクト1とを対応付けて管理するオブジェクト管理手段30と、を有する。オブジェクト管理手段30は、ファイル11にオブジェクト1との対応を示すオブジェクト識別子2を設定する。OS20はファイルシステム40のマウント時に記憶装置10で更新されたファイル11を検証するマウント時更新ファイル検証手段50を有し、ファイルシステム40は検証で発見されたオブジェクト識別子付破損ファイル5を格納するオブジェクト識別子付破損ファイル格納手段41を有する。
【選択図】 図1
Description
(第1の実施の形態)
本発明のオブジェクトストレージシステムは、オブジェクトを構成するデータをファイルとして記憶する、ファイルベースのオブジェクトストレージシステムに関する。
(第2の実施の形態)
図3は本発明第2の実施の形態を示すブロック図である。本実施の形態のオブジェクト管理手段30は、オブジェクト修復手段32を有している。
(第3の実施の形態)
本実施の形態は、メタデータ4の構成に関する。そこで、メタデータ4の構成について、一般的な技術と比較して説明する。
(第4の実施の形態)
本実施の形態では、ファイル作成に関して説明する。まず、メタデータ4にオブジェクト識別子2を付加して、ファイル11にデータ3を格納する動作について説明する。
(第5の実施の形態)
本実施の形態では、本発明を効果的に用いるための、オブジェクト識別子付破損ファイル格納手段41の構成例を示す。図8は、オブジェクト識別子付破損ファイル格納手段41の一例を示すディレクトリ構成図である。本発明では、例えばファイルシステム40のルートディレクトリ直下に、オブジェクト識別子付破損ファイル格納手段41としてLOSTFILES41aというディレクトリを作成する。そしてLOSTFILES41aの下に、例えば、オブジェクト識別子2の下位3文字をディレクトリ名としたサブディレクトリ42aを作成する。なお、下位3文字以外の方法で分割してもよい。また、オブジェクト識別子2(=ファイル名)が名前空間上衝突しないのであれば単一のディレクトリにしてもよい。ただし、多数のファイルが見込まれる場合、性能問題を引き起こす可能性があるため、前記のように区分することが望ましい。そして、サブディレクトリ42の下にオブジェクト識別子2をファイル名としたオブジェクト識別子付破損ファイル5を配置する。なおオブジェクト識別子2が認識できる形であれば、ファイル名はオブジェクト識別子2そのものでなくても良い。
2 オブジェクト識別子
3 データ
4 メタデータ
5 オブジェクト識別子付破損ファイル
6 破損ファイル
10 記憶装置
11 ファイル
12 ジャーナル
20 オペレーティングシステム
30 オブジェクト管理手段
31 オブジェクト識別子設定手段
32 オブジェクト修復手段
40 ファイルシステム
41 オブジェクト識別子付破損ファイル格納手段
50 マウント時更新ファイル検証手段
60 アプリケーションプログラム
100 オブジェクトストレージシステム
Claims (10)
- オブジェクトを構成するデータをファイルとして記憶するオブジェクトストレージシステムであって、前記ファイルを記憶する記憶装置と、前記ストレージシステムを制御するオペレーティングシステムと、前記ファイルを前記オブジェクトと対応付けて管理するオブジェクト管理手段と、を有し、前記記憶装置は前記ファイルの更新履歴を保持するジャーナルを有し、前記オブジェクト管理手段は前記ファイルに前記オブジェクトとの対応を示すオブジェクト識別子を設定するオブジェクト識別子設定手段を有し、前記オペレーティングシステムは前記記憶装置および前記ファイルを制御するファイルシステムと前記ファイルシステムのマウント時に前記記憶装置で更新された前記ファイルを検証するマウント時更新ファイル検証手段を有し、前記ファイルシステムは前記ファイル検証手段が発見したオブジェクト識別子付破損ファイルを格納するオブジェクト識別子付破損ファイル格納手段を有する、ことを特徴とするオブジェクトストレージシステム。
- 前記オブジェクト管理手段が、前記オブジェクトを他のストレージシステムから複製して前記オブジェクト識別子付破損ファイルを修復するオブジェクト修復手段を有している、ことを特徴とする請求項1に記載のオブジェクトストレージシステム。
- 前記オブジェクト識別子付破損ファイル格納手段が、前記オブジェクト識別子付破損ファイルを前記オブジェクト識別子が識別可能なファイル名で格納する、ことを特徴とする請求項1または請求項2に記載のオブジェクトストレージシステム。
- 前記オブジェクト識別子付破損ファイル格納手段が、前記オブジェクト識別子が識別可能な名前のフォルダを生成するオブジェクト識別子付破損ファイル格納フォルダ生成手段を、有していることを特徴とする請求項3に記載のオブジェクトストレージシステム。
- オブジェクトを構成するデータをファイルとして記憶するオブジェクトストレージシステムの制御方法であって、オブジェクト管理手段が前記ファイルに前記オブジェクトとの対応を示すオブジェクト識別子を設定し、ファイルシステムが記憶装置に前記ファイルを格納し、前記ファイルシステムが前記ファイルの更新履歴を前記記憶装置内のジャーナルに格納し、前記ファイルシステムのマウント時にマウント時更新ファイル検証手段が前記ジャーナルを参照して更新された前記ファイルを検証し、前記マウント時更新ファイル検証手段が発見したオブジェクト識別子付破損ファイルをオブジェクト識別子付破損ファイル格納手段に格納する、ことを特徴とするオブジェクトストレージシステムの制御方法。
- 前記オブジェクトを他のストレージシステムから複製して前記オブジェクト識別子付破損ファイルを修復する、ことを特徴とする請求項5に記載のストレージシステムの制御方法。
- 前記オブジェクト識別子付破損ファイル格納手段が、前記オブジェクト識別子付破損ファイルを前記オブジェクト識別子が識別可能なファイル名で保存する、ことを特徴とする請求項5または請求項6に記載のオブジェクトストレージシステムの制御方法。
- 前記オブジェクト識別子付破損ファイル格納手段が、前記オブジェクト識別子が識別可能な名前のフォルダを生成し、対応する前記フォルダの配下に前記オブジェクト識別子付破損ファイルを格納する、ことを特徴とする請求項7に記載のオブジェクトストレージシステムの制御方法。
- オブジェクトを構成するデータをファイルとして記憶するオブジェクトストレージシステムの制御プログラムであって、オブジェクト管理手段が前記ファイルに前記オブジェクトとの対応を示すオブジェクト識別子を設定するステップと、ファイルシステムが記憶装置に前記ファイルを格納するステップと、前記ファイルシステムが前記ファイルの更新履歴を前記記憶装置内のジャーナルに格納するステップと、前記ファイルシステムのマウント時にマウント時更新ファイル検証手段が前記ジャーナルを参照して更新された前記ファイルを検証するステップと、前記マウント時更新ファイル検証手段が発見したオブジェクト識別子付破損ファイルをオブジェクト識別子付破損ファイル格納手段に格納するステップと、を有することを特徴とするオブジェクトストレージシステムの制御プログラム。
- 前記オブジェクト識別子付破損ファイル格納手段が、前記オブジェクト識別子付破損ファイルを前記オブジェクト識別子が識別可能なファイル名で保存するステップを有する、ことを特徴とする請求項9に記載のオブジェクトストレージシステムの制御プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014143949A JP6327028B2 (ja) | 2014-07-14 | 2014-07-14 | オブジェクトストレージシステムおよびその制御方法およびその制御プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014143949A JP6327028B2 (ja) | 2014-07-14 | 2014-07-14 | オブジェクトストレージシステムおよびその制御方法およびその制御プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016021110A true JP2016021110A (ja) | 2016-02-04 |
JP6327028B2 JP6327028B2 (ja) | 2018-05-23 |
Family
ID=55265921
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014143949A Active JP6327028B2 (ja) | 2014-07-14 | 2014-07-14 | オブジェクトストレージシステムおよびその制御方法およびその制御プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6327028B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10635654B2 (en) | 2017-06-12 | 2020-04-28 | Samsung Electronics Co., Ltd. | Data journaling for large solid state storage devices with low DRAM/SRAM |
JP2021525926A (ja) * | 2018-06-01 | 2021-09-27 | アリババ・グループ・ホールディング・リミテッドAlibaba Group Holding Limited | ファイルシステムデータアクセス方法およびファイルシステム |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005267600A (ja) * | 2004-03-15 | 2005-09-29 | Hitachi Ltd | 長期データ保護システム及び方法 |
JP2005316981A (ja) * | 2004-04-30 | 2005-11-10 | Microsoft Corp | リアルタイムなファイルシステム修復の方法及び記録媒体 |
JP2006146904A (ja) * | 2004-11-17 | 2006-06-08 | Hitachi Ltd | ストレージシステムでオブジェクトレベルのスナップショットを生成するシステムと方法 |
JP2008117091A (ja) * | 2006-11-02 | 2008-05-22 | Nippon Hoso Kyokai <Nhk> | ファイル転送システムおよびその方法、管理装置ならびにサーバ |
JP2009238227A (ja) * | 2008-03-26 | 2009-10-15 | Symantec Corp | 失敗した復元動作においてファイルの破損を防ぐためのボリュームスナップショットの使用 |
US20090271418A1 (en) * | 2008-04-28 | 2009-10-29 | Vmware, Inc. | Computer file system with path lookup tables |
JP2010039966A (ja) * | 2008-08-08 | 2010-02-18 | Hitachi Ltd | データ管理方式 |
JP2010044753A (ja) * | 2008-07-23 | 2010-02-25 | Nvidia Corp | 1つのディレクトリから別のディレクトリへのファイルのコピー |
JP2010533324A (ja) * | 2007-07-10 | 2010-10-21 | インターナショナル・ビジネス・マシーンズ・コーポレーション | クラスタ化されたファイル・システムへのファイル・システムのマウンティング |
US20120143825A1 (en) * | 2010-12-03 | 2012-06-07 | Microsoft Corporation | File system backup using change journal |
-
2014
- 2014-07-14 JP JP2014143949A patent/JP6327028B2/ja active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005267600A (ja) * | 2004-03-15 | 2005-09-29 | Hitachi Ltd | 長期データ保護システム及び方法 |
JP2005316981A (ja) * | 2004-04-30 | 2005-11-10 | Microsoft Corp | リアルタイムなファイルシステム修復の方法及び記録媒体 |
JP2006146904A (ja) * | 2004-11-17 | 2006-06-08 | Hitachi Ltd | ストレージシステムでオブジェクトレベルのスナップショットを生成するシステムと方法 |
JP2008117091A (ja) * | 2006-11-02 | 2008-05-22 | Nippon Hoso Kyokai <Nhk> | ファイル転送システムおよびその方法、管理装置ならびにサーバ |
JP2010533324A (ja) * | 2007-07-10 | 2010-10-21 | インターナショナル・ビジネス・マシーンズ・コーポレーション | クラスタ化されたファイル・システムへのファイル・システムのマウンティング |
JP2009238227A (ja) * | 2008-03-26 | 2009-10-15 | Symantec Corp | 失敗した復元動作においてファイルの破損を防ぐためのボリュームスナップショットの使用 |
US20090271418A1 (en) * | 2008-04-28 | 2009-10-29 | Vmware, Inc. | Computer file system with path lookup tables |
JP2010044753A (ja) * | 2008-07-23 | 2010-02-25 | Nvidia Corp | 1つのディレクトリから別のディレクトリへのファイルのコピー |
JP2010039966A (ja) * | 2008-08-08 | 2010-02-18 | Hitachi Ltd | データ管理方式 |
US20120143825A1 (en) * | 2010-12-03 | 2012-06-07 | Microsoft Corporation | File system backup using change journal |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10635654B2 (en) | 2017-06-12 | 2020-04-28 | Samsung Electronics Co., Ltd. | Data journaling for large solid state storage devices with low DRAM/SRAM |
JP2021525926A (ja) * | 2018-06-01 | 2021-09-27 | アリババ・グループ・ホールディング・リミテッドAlibaba Group Holding Limited | ファイルシステムデータアクセス方法およびファイルシステム |
JP7378870B2 (ja) | 2018-06-01 | 2023-11-14 | アリババ・グループ・ホールディング・リミテッド | ファイルシステムデータアクセス方法およびファイルシステム |
Also Published As
Publication number | Publication date |
---|---|
JP6327028B2 (ja) | 2018-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10877860B2 (en) | Copying data from mirrored storage to auxiliary storage arrays co-located with primary storage arrays | |
US20200210075A1 (en) | Data management system | |
US10776267B2 (en) | Mirrored byte addressable storage | |
CN111480149B (zh) | 持久存储器设备中的预写式日志记录 | |
US9727273B1 (en) | Scalable clusterwide de-duplication | |
CN109690493B (zh) | 用于修复去重存储装置中的映像的系统和方法 | |
WO2017119091A1 (ja) | 分散型ストレージシステム、データ格納方法、およびソフトウェアプログラム | |
US20130339784A1 (en) | Error recovery in redundant storage systems | |
US8266102B2 (en) | Synchronization of sequential access storage components with backup catalog | |
US10613923B2 (en) | Recovering log-structured filesystems from physical replicas | |
CN110058787B (zh) | 用于写入数据的方法、设备和计算机程序产品 | |
US20120084260A1 (en) | Log-shipping data replication with early log record fetching | |
US11609820B2 (en) | Method and system for redundant distribution and reconstruction of storage metadata | |
US20150067442A1 (en) | Information processing apparatus and data repairing method | |
US9430485B2 (en) | Information processor and backup method | |
JP6327028B2 (ja) | オブジェクトストレージシステムおよびその制御方法およびその制御プログラム | |
US8595271B1 (en) | Systems and methods for performing file system checks | |
US8677088B1 (en) | Systems and methods for recovering primary sites after failovers to remote secondary sites | |
JP6251965B2 (ja) | 情報システムおよびデータベース復旧方法 | |
US11379315B2 (en) | System and method for a backup data verification for a file system based backup | |
US11403182B2 (en) | Method and system for any-point in time recovery within traditional storage system via a continuous data protection interceptor | |
US11645333B1 (en) | Garbage collection integrated with physical file verification | |
KR101969799B1 (ko) | 전자 장치 및 제어 방법 | |
JP5488681B2 (ja) | 二重化システム、制御方法および制御プログラム | |
Hristozov | Properties and application of OpenZFS file system for secure data storage |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170615 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180228 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180320 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180402 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6327028 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |