JP2018520402A - 複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ - Google Patents

複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ Download PDF

Info

Publication number
JP2018520402A
JP2018520402A JP2017554482A JP2017554482A JP2018520402A JP 2018520402 A JP2018520402 A JP 2018520402A JP 2017554482 A JP2017554482 A JP 2017554482A JP 2017554482 A JP2017554482 A JP 2017554482A JP 2018520402 A JP2018520402 A JP 2018520402A
Authority
JP
Japan
Prior art keywords
policy
container
data
objects
data processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017554482A
Other languages
English (en)
Other versions
JP6798756B2 (ja
Inventor
イー. ルーセ、ポール
イー. ルーセ、ポール
ディキンソン、ジョン
ゲラルド、クレイ
メリット、サミュエル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of JP2018520402A publication Critical patent/JP2018520402A/ja
Application granted granted Critical
Publication of JP6798756B2 publication Critical patent/JP6798756B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/122File system administration, e.g. details of archiving or snapshots using management policies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/13File access structures, e.g. distributed indices
    • G06F16/137Hash-based

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)
  • Retry When Errors Occur (AREA)

Abstract

方法およびシステムは、オブジェクトと関連付けられるポリシーに基づき、クラスタのストレージデバイス/ノードにオブジェクトをマッピングすることを含む複数の選択可能なデータ処理ポリシーでオブジェクトベースのストレージクラスタを構成する。実施形態において、各々のポリシーは、複数のリングのそれぞれの1つと関連付けられ、そのパーティションは、同一のクラスタのストレージデバイスにマッピングされ、オブジェクトは、バケット/コンテナと関連付けられ、各々のバケット/コンテナは、ポリシーのユーザ選択可能なポリシーの内部で、例えば、メタデータベースのポリシーインデックスと関連付けられ、オブジェクトは、オブジェクトのコンテナのポリシーインデックスと関連付けられるリングに基づき、クラスタのストレージデバイス/ノードにマッピングされる。

Description

オブジェクトベースのストレージ、またはオブジェクトストレージは、オブジェクトと呼ばれる個別のデータユニットにアクセスする、アドレスする、および/またはそれを操作するための技術に言及する。オブジェクトは、テキスト、画像、動画、音声および/または他のコンピュータアクセス可能/操作可能なデータを含み得る。
オブジェクトベースのストレージ、またはオブジェクトストレージは、例えば、階層ディレクトリ/サブディレクトリ/ファイル構造ではなく、本明細書でストレージプールと呼ばれるレベルまたはフラットアドレス空間上のオブジェクトを扱う。
複数のストレージデバイスは、一元のオブジェクトベースのストレージシステムまたはクラスタとして構成/アクセスされ得る。
従来のオブジェクトベースのストレージクラスタは、クラスタのストレージデバイスにオブジェクトをマッピングすべく、コンシステントハッシュリング(リング)を利用する。リングは、ハッシュインデックスの範囲を表す。リングは、各々がハッシュインデックスの範囲の一部を表す複数のパーティションへと分割され、パーティションは、クラスタのストレージデバイスにマッピングまたは割り当てされる。ハッシュインデックスは、オブジェクトの名前に部分的に基づきオブジェクトのために計算される。ハッシュインデックスは、オブジェクトストレージリングのパーティションに相互に関連付けられ、オブジェクトは、パーティションと関連付けられるストレージデバイスにマッピングされる。
パーティションの数は、ストレージデバイスの数を超えるように定義され得、それにより各々のストレージデバイスは、複数のパーティションと関連付けられる。この点で、追加のストレージデバイスが、クラスタに加えられるべきである場合、既存のストレージデバイスの各々と関連付けられるパーティションのサブセットは、新たなストレージデバイスに再割り当てされ得る。逆に、ストレージデバイスがクラスタから除去されるべきである場合、ストレージデバイスと関連付けられるパーティションは、クラスタの他のデバイスに再割り当てされ得る。
オブジェクトベースのストレージクラスタは、クラスタの複製ポリシー(例えば、3倍複製)に基づき、データを(例えば、パーティションベースで)複製するリプリケータを含み得る。オブジェクトおよびその複製は、異なるパーティションに割り当てられ得る。
リプリケータは、結果整合性(すなわち、オブジェクトの全ての例が、経時的に互いに一貫性があることを保証すること)を提供するように構成され得る。結果整合性は、即時整合性に比べてパーティション許容範囲および利用可能性に有利である。結果整合性は、デバイスおよび/または電源故障に起因して時々入手可能でなくなり得る、可能性のある多数のパーティションに部分的に起因してクラスタベースのオブジェクトストレージにおいて役立つ。
従来のオブジェクトベースのストレージクラスタは、クラスタ全体にわたって同一の(すなわち、単一の)複製ポリシーを適用する。追加のデータ複製ポリシーが、各々が対応するリソースセット(例えば、ストレージデバイス、プロキシ層リソース、負荷分散装置、ネットワークインフラストラクチャおよび管理/監視フレームワーク)を含む、追加のクラスタのそれぞれにより提供され得る。複数のクラスタは、クラスタの1または複数のリソースが十分利用されていない場合がある、および/または1または複数の他のクラスタのリソースが使いすぎである場合がある点で、比較的非効率であり得る。
説明のために、本明細書に開示される1または複数の機能が、例としておよび/または以下に列挙され、図で表される1または複数の図面を参照して提示および/または説明されてよい。本明細書で開示される方法およびシステムは、しかしながら、そのような例または例示に限定されない。
オブジェクトのコンテナと関連付けられる選択可能なデータ処理ポリシーに基づき、オブジェクトベースのストレージクラスタにオブジェクトをマッピングする方法のフローチャートである。 オブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づき、ストレージデバイスにオブジェクトをマッピングする複数のストレージデバイスおよびシステムを含むオブジェクトベースのストレージクラスタのブロック図である。 複数のオブジェクトストレージリングに基づきストレージデバイスにオブジェクトをマッピングする方法のフローチャートであり、複数のオブジェクトストレージリングの各々は、複数のデータ処理ポリシーのそれぞれの1つと関連付けられ得る。 分割されたオブジェクトストレージリングの概念図である。 複数のオブジェクトストレージリングに基づきストレージデバイスにオブジェクトをマッピングするシステムを含むオブジェクトベースのストレージクラスタのブロック図であり、複数のオブジェクトストレージリングの各々は、複数の選択可能なデータ処理ポリシーのそれぞれの1つと関連付けられ得る。 複数のオブジェクトストレージリングおよび/または複数のデータ処理ポリシーに基づき、ストレージデバイスにオブジェクトをマッピングするように構成されるコンピュータシステムのブロック図である。 オブジェクトストレージリングのパーティションと、ストレージデバイスとの間のマッピングまたは関連付けの概念図である。 パーティション対デバイスマッピングの別の概念図である。図において、参照番号の左端の数字は、参照番号が最初に現れた図面を特定する。
図1は、選択可能なデータ処理ポリシーに基づきオブジェクトベースのストレージクラスタにオブジェクトをマッピングする方法100のフローチャートであり、そこで、各オブジェクトは、バケット、ビン、コンテナオブジェクトまたはコンテナと本明細書で呼ばれる階層ストレージコンストラクトと関連付けられ、各コンテナは、複数のデータ処理ポリシーの選択可能なものと関連付けられる。方法100は、図2を参照して以下に説明される。しかしながら、方法100は、図2の例に限定されない。
図2は、オブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づきストレージデバイス204にオブジェクトをマッピングする複数のストレージデバイス204およびシステム202を含むオブジェクトベースのストレージクラスタ200のブロック図である。オブジェクトベースのストレージクラスタ200は、分散された結果整合性のオブジェクトベースのストレージクラスタとして構成され得る。
方法100および/またはシステム202は、例えば、限定するものではないが、ストレージデバイス、プロキシ層リソース、負荷分散装置、ネットワークインフラストラクチャおよび管理/監視フレームワークなどのリソースの複製なしで、複数のユーザ選択可能なデータ処理ポリシーを提供するように役立ち得る。
104で、各々のコンテナは、複数の選択可能なデータ処理ポリシーの1つと関連付けられる。
データ処理ポリシーは、データ/オブジェクトの分配、配置、複製、保持、削除、圧縮/重複排除、レイテンシ/スループットおよび/または他の要素に関連し得る。データ処理ポリシーは、限定するものではないが、データ複製パラメータ(例えば、複製の数および/または複製技術/アルゴリズム(例えば、消去コード))、保持時間パラメータ、ストレージの場所パラメータ(例えば、デバイス、ノード、ゾーン、および/または地理的パラメータ)および/または他のデータ処理パラメータを含み得る。例示的なデータ処理ポリシーが、以下にさらに提供される。しかしながら、データ処理ポリシーは、本明細書において提供される例に限定されない。
コンテナは、ユーザの入力に基づきデータ処理ポリシーに関連付けられ得る。
各コンテナは、コンテナオブジェクトまたはコンストラクト(データベースなど)として表され得、コンテナのオブジェクトは、それぞれのコンテナオブジェクトまたはコンストラクトの内部に記録され得る。
コンテナのデータ処理ポリシーとの関連付けは、コンテナデータベースのメタデータフィールドに複数のポリシーインデックスの1つを追加することを含み得、そこで、各々のポリシーインデックスはデータ処理ポリシーのそれぞれの1つに対応する。
図2において、システム202は、ユーザおよび/または他のシステム/デバイスとインタフェースで接続するためのインタフェース216を含む。インタフェース216は、プロキシ層リソースを含み得、および/または表し得る。インタフェース216は、入力/出力(I/O)218を介してアクセス要求を受信し得る。アクセス要求は、限定するものではないが、オブジェクトを書き込み/格納する、オブジェクトを読み出し/取得する、オブジェクトをコピーする、および/またはオブジェクトを削除する要求を含み得る。インタフェース216は、I/O218を介して要求されたオブジェクトを提供するように構成され得る。
インタフェース216は、それぞれのマッピングに基づき、コンテナを作成し、コンテナをアカウントと関連付け、データ処理ポリシーをコンテナと関連付け、オブジェクトをコンテナと関連付け、オブジェクトをストレージデバイス204にマッピングし、および/またはオブジェクトにアクセスすべく、システム202の他のリソースを起動するように構成され得る。
ここでコンテナ情報205として示されているコンテナに関連する情報は、1または複数のストレージデバイス204および/または他のストレージデバイスに格納され得る。図2の例において、コンテナ情報205は、コンテナ/オブジェクト関連206、およびコンテナ/データ処理ポリシーID関連208を含む。
図1の106で、オブジェクトは、それぞれのオブジェクトのコンテナと関連付けられるデータ処理ポリシーに少なくとも部分的に基づき、ストレージデバイスにマッピングされる(例えば、関連付けられる)。
図2において、システム202は、インタフェース216からコンテナ/オブジェクトID214を受信し、コンテナ/オブジェクトID214のコンテナID215の部分に基づき、データ処理ポリシーインデックスまたは識別子(ポリシーID)212を取得するためのコンテナポリシールックアップエンジン210を含む。
コンテナ/オブジェクトID214は、パス名の形式であり得、それは、/{コンテナ名}/{オブジェクト名}として表され得る。コンテナがアカウントと関連付けられる場合、アカウント/コンテナ/オブジェクトIDは、/{アカウント名}/{コンテナ名}/{オブジェクト名}として表され得る。
コンテナがアカウントと関連付けられる場合、コンテナ/オブジェクトID214は、アカウントID(例えば、/{アカウント名}/{コンテナ名}/{オブジェクト名})を含み得、コンテナポリシールックアップエンジン210は、アカウントIDにさらに基づき保持ポリシーID212を取得するように構成され得る。
システム202はさらに、それぞれのコンテナ/オブジェクトID214のために取得されたポリシーID212に基づき、コンテナ/オブジェクトID214をストレージデバイス204にマッピングするオブジェクトマッピングエンジン220を含む。コンテナ/オブジェクトID214および対応するポリシーID212ごとに、オブジェクトマッピングエンジン220は、デバイスID222をインタフェース216に返す。デバイスID222は、ストレージデバイス202、ストレージノード(例えば、1または複数のストレージデバイス204と関連付けられるストレージサーバ)、ストレージゾーン、および/またはストレージデバイス204の他の指定される機能/態様に対応し得る。
システム202は、オブジェクトマッピングパラメータ228をオブジェクトマッピングエンジン220に提供するオブジェクトマッピング構成エンジン226をさらに含み得、その例は、オブジェクトストレージリングに関してさらに以下に提供される。
図1の108で、オブジェクトは、106で決定されたそれぞれのマッピングに基づきストレージデバイス204の内部でアクセスされる。オブジェクトがストレージデバイス204に格納されるべきである場合、108でアクセスすることは、オブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づきオブジェクトを格納することを含む。
図2において、インタフェース216は、デバイスID222に基づき、ストレージデバイス202にアクセス命令またはアクセス要求219を送信するように構成される。オブジェクトが書き込み/格納されるべきである場合、インタフェース216は、ここでオブジェクト224として示されるオブジェクトをストレージデバイスに提供する。
システム202はさらに、コンテナと関連付けられるデータ処理ポリシーを実施するポリシー実施エンジン230を含む。ポリシー実施エンジン230は、コンテナに関連付けられるデータ処理ポリシーに基づいて、コンテナのオブジェクト232を複製する複製エンジンを含み得る。ポリシー実施エンジン230は、それぞれのコンテナのデータ処理ポリシーに従って、オブジェクト232とオブジェクトの複製との間に結果整合性を提供するように構成され得る。
システム202は、他の構成・管理システムおよびインフラストラクチャ232をさらに含み得、それらは、限定するものではないが、プロキシ層リソース、負荷分散装置、ネットワークインフラストラクチャ、保守リソース、および/または監視リソースを含み得る。
方法100は、図3を参照して以下に説明されるように実行され得る。しかしながら、方法100は、図3の例に限定されない。
システム200は、図5を参照して以下に説明されるように構成され得る。しかしながら、システム202は、図5の例に限定されない。
図3は、複数のオブジェクトストレージリングに基づき、オブジェクトをストレージデバイスにマッピングする方法300のフローチャートである。上記に説明されるように、各々のオブジェクトストレージリングは、複数の選択可能なデータ処理ポリシーのそれぞれの1つと関連付けられ得る。方法300は、図4を参照して以下に説明される。しかしながら、方法300は、図4の例に限定されない。
図4は、オブジェクトストレージリング(リング)400の概念図である。リング400は、スタティックデータ構造を表し得る。リング400は、0から2まで(なお、nは正の整数)としてここで示されるハッシュ値またはインデックスの範囲(ハッシュ範囲)を表す。リング400は、コンシステントハッシュリングを表し得る。
オブジェクトストレージリングの各々は、互いに関係のある、固有または別個のハッシュ範囲を表し得る。
図3の302で、各々のリングは、複数のパーティションに分割され、そこで、各々のパーティションは、それぞれのリングのハッシュ範囲の一部を表す。1つのリングは、2またはそれより多いパーティションに分割され得る。
図4で、リング400は、説明のために、402−0から402−31までの32個のパーティションに分割される。
リングは、同じ数のパーティションに分割され得、またはリングの1または複数が、リングの1または複数の他のリングのパーティションの数とは異なる数のパーティションに分割され得る。
図3の304で、リングのパーティションは、ストレージデバイスにマッピングされる(すなわち、ストレージデバイスに割り当てられる、またはそれと関連付けられる)。パーティションは、1または複数の物理ストレージデバイスのリストまたはセットにマッピングされ得る。ストレージデバイスは、1または複数のオブジェクトストレージリングと関連付けられ得、その例は、図7を参照して以下にさらに提供される。
図4において、リング400の各パーティション402が、4つのタイプのシェーディングの1つを用いて示され、キー404が、それぞれのパーティションをストレージデバイスまたはノードの4つのセットの1つにマッピングすることを示すために提供されている。数字の4が、説明のためにここで使用される。パーティション402は、1または複数のストレージデバイス/ノードにマッピング(または再マッピング)され得る。
図4の例において、パーティション402は、周期的なパターンでデバイス/ノード0からデバイス/ノード3までにマッピングされる。パーティション402、および/または複数のオブジェクトストレージリングの他のもののパーティションは、別のパターンに基づき、および/またはランダムまたは疑似ランダムにストレージデバイス/ノードにマッピングされ得る。
図3の306で、各々のオブジェクトストレージリングは、複数のデータ処理ポリシーのそれぞれの1つと関連付けられる。
308で、オブジェクトは、図1の104に関して上記に説明されるようなコンテナと関連付けられる。
310で、各々のコンテナは、図1の106に関して上記に説明されるような複数のデータ処理ポリシーの1つと関連付けられる。
312で、オブジェクトがストレージデバイス/ノードにマッピングされるべきである場合、オブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づき、複数のオブジェクトストレージリングの1つが314で選択される。
316で、選択されたオブジェクトストレージリングのパーティションが、そのオブジェクトについて計算されるハッシュインデックスに基づき、決定される。
318で、316において決定されるパーティションと関連付けられるストレージデバイスが、決定される。318で決定されるストレージデバイス、または対応するデバイスIDは、オブジェクトのマッピングを表し、そのことは、オブジェクトにアクセスするために(すなわち、オブジェクトの書き込み/格納および/または読み出し/取得をするために)使用され得る。
図5は、複数のオブジェクトストレージリングに基づき、オブジェクトをストレージデバイス504にマッピングするシステム502を含むオブジェクトベースのストレージクラスタ500のブロック図である。各々のオブジェクトストレージリングは、複数の選択可能なデータ処理ポリシーのそれぞれの1つと関連付けられ得る。オブジェクトベースのストレージクラスタ500は、分散された結果整合性のオブジェクトベースのストレージクラスタとして構成され得る。
システム502は、図2のインタフェース216に関して上記に説明されるように、I/O518を介してユーザおよび/または他のシステム/デバイスとインタフェースで接続するインタフェース516を含む。
システム502はさらに、図2のコンテナポリシールックアップエンジン210に関して上記に説明されるように、コンテナID515および/またはアカウントIDに基づきポリシーID512を取得するコンテナポリシールックアップエンジン510を含む。
システム502はさらに、それぞれのコンテナ/オブジェクトID514のために取得されるポリシーID512に基づき、コンテナ/オブジェクトID514をストレージデバイス504にマッピングするオブジェクトマッピングエンジン520を含む。コンテナ/オブジェクトID514および対応するポリシーID512ごとに、オブジェクトマッピングエンジン520は、デバイスID522を返す。
オブジェクトマッピングエンジン520は、複数のオブジェクトストレージリング546を含む。オブジェクトストレージリング546は、図3の302に関して上記に説明されるように、分割され得、パーティションは、図3の304に関して上記に説明されるように、ストレージデバイス504にマッピングされ得る。各々のオブジェクトストレージリング546は、図3の306に関して上記に説明されるように、複数のデータ処理ポリシーのそれぞれの1つと関連付けられ得る。
オブジェクトマッピングエンジン520はさらに、コンテナ/オブジェクトID514に基づきハッシュインデックス542を計算するハッシングエンジン540と、ポリシーID512に基づきオブジェクトストレージリング546の1つを選択するリングセレクタ544とを含む。オブジェクトマッピングエンジン520は、ハッシュインデックス542に基づき選択されるオブジェクトストレージリングのパーティションを決定し、そのパーティションと関連付けられるストレージデバイス504のデバイスID522を決定するように構成される。
オブジェクトマッピングエンジン520は、ハッシュインデックス542と、1または複数の他の値および/またはパラメータとの組み合わせに基づき、選択されるオブジェクトストレージリングのパーティションを決定するように構成され得る。オブジェクトマッピングエンジン520は、例えば、ハッシュインデックス542の一部と構成可能なオフセット529との組み合わせに基づき、選択されるオブジェクトストレージリングのパーティションを決定するように構成され得る。構成可能なオフセット529は、選択されたオブジェクトストレージリングのパーティションの数に基づき決定され得、パーティションの乗数またはパーティションの総数に対応され得る。
システム502はさらに、構成・管理システムおよびインフラストラクチャ548を含む。
図5の例において、構成・管理システムおよびインフラストラクチャ548は、パーティショニングおよびデバイスマッピング情報またはパラメータ528、ならびに構成可能なオフセット529をオブジェクトマッピングエンジン520に提供するリング構成エンジン550を含む。
構成・管理システムおよびインフラストラクチャ548は、コンテナおよび/またはオブジェクトストレージリング546と関連付けられるポリシーを実施するポリシー実施エンジン530をさらに含み得る。
システム502は、コンテナID515およびコンテナリングに基づき、ストレージデバイス504にコンテナデータベースをマッピングするコンテナサーバをさらに含み得る。
システム502は、アカウントIDおよびアカウントリングに基づき、アカウントデータベースをストレージデバイス504にマッピングするアカウントサーバをさらに含み得る。
本明細書で開示される1または複数の機能は、回路、機械、コンピュータシステム、プロセッサおよびメモリ、コンピュータ可読媒体の内部に符号化されたコンピュータプログラム、ならびに/またはそれらの組み合わせで実装され得る。回路は、ディスクリート回路および/または集積回路、特定用途向け集積回路(ASIC)、システムオンチップ(SOC)、ならびに、それらの組み合わせを含み得る。ソフトウェアによる情報処理が、ハードウェア資源を用いることにより具体的に実現され得る。
本明細書で説明される1または複数の機能は、プロセッサに、オブジェクトベースのストレージクラスタとして複数のストレージデバイスにアクセスさせるように構成されるコンピュータプログラムおよび/または一組のコンピュータプログラム(例えば、限定するものではないが、OpenStackとして知られ、OpenStack.orgで利用可能な一組のコンピュータプログラム)内に統合され得る。
図6は、複数のオブジェクトストレージリングおよび/または複数のデータ処理ポリシーに基づき、オブジェクトをストレージデバイス650にマッピングするように構成されるコンピュータシステム600のブロック図である。
コンピュータシステム600は、図2のシステム202および/または図5のシステム502の例示的な実施形態または実装を表し得る。
コンピュータシステム600は、コンピュータ可読媒体604の内部の符号化されたコンピュータプログラム606の命令を実行すべく、ここではプロセッサ602として示される1または複数のプロセッサを含む。コンピュータ可読媒体604は、一時的または非一時的なコンピュータ可読媒体を含み得る。
プロセッサ602は、1または複数の命令プロセッサおよび/またはプロセッサコアと、命令プロセッサ/コアとコンピュータ可読媒体604との間をインタフェースで接続する制御ユニットとを含み得る。プロセッサ602は、限定するものではないが、マイクロプロセッサ、グラフィックスプロセッサ、物理プロセッサ、デジタル信号プロセッサ、ネットワークプロセッサ、フロントエンド通信プロセッサ、コプロセッサ、管理エンジン(ME)、コントローラもしくはマイクロコントローラ、中央処理装置(CPU)、汎用命令プロセッサおよび/または特定用途プロセッサを含み得る。
図6において、コンピュータ可読媒体604はさらに、データ608を含み、そのことは、コンピュータプログラム606の実行中にプロセッサ602により使用され得、および/またはコンピュータプログラム606の実行中にプロセッサ602により生成され得る。
図6の例において、本明細書で1または複数の例において説明されるように、コンピュータプログラム606は、プロセッサ602にユーザおよび/または他のシステム/デバイスとインタフェースで接続させるインタフェース命令610を含む。
コンピュータプログラム606はさらに、本明細書で1または複数の例において説明されるように、プロセッサ602にポリシーを決定させるコンテナポリシールックアップ命令を含む。コンテナポリシールックアップ命令612は、コンテナ/アカウントリング614としてここで集合的に図示される、プロセッサ602にコンテナデータベースリングおよび/またはアカウントデータベースリングを参照させる命令を含み得る。
コンピュータプログラム606はさらに、プロセッサ602にオブジェクトをストレージデバイス650にマッピングさせる、オブジェクトマッピング命令616を含む。本明細書の1または複数の例において説明されるように、オブジェクトマッピング命令616は、複数のオブジェクトリング618に基づきプロセッサ602にオブジェクトをストレージデバイス650にマッピングさせる、命令を含み得る。
コンピュータプログラム606はさらに、構成および管理命令620を含む。図6の例において、本明細書の1または複数の例において説明されるように、構成および管理命令620は、プロセッサ602にリング613を定義させ、分割させ、マッピングさせるリング構成命令622を含む。
構成および管理命令620はさらに、本明細書の1または複数の例において説明されるように、プロセッサ602にデータ処理ポリシー626を実施させる、ポリシー実施命令624を含む。
コンピュータシステム600はさらに,コンピュータシステム600のデバイスおよび/またはリソースの間で通信する通信インフラストラクチャ640を含む。
コンピュータシステム600はさらに、ストレージデバイス650および/またはユーザデバイス/アプリケーションプログラミングインタフェース(API)652とインタフェースで接続する1または複数の入力/出力(I/O)デバイスおよび/またはコントローラ(I/Oコントローラ)642を含む。
ストレージデバイスは、図7を参照して以下に説明されるように、1または複数のオブジェクトストレージリング、および/または複数のデータ処理ポリシーと関連付けられ得る。
図7は、オブジェクトストレージリング702のパーティションとストレージデバイス704との間のマッピングまたは関連付けの概念図である。リング702−0のパーティション706、708および710はそれぞれ、ストレージデバイス704−0、704−1および704−iにマッピングされる。これは、それぞれのマッピングまたは関連付け712、714および716により図示される。リング702−1のパーティション718および720はそれぞれ、ストレージデバイス704−1および704−iにマッピングされる。リング702−2のパーティション722は、ストレージデバイス704−1にマッピングされる。
リングのパーティションは、リングのデータ処理ポリシーに基づきストレージデバイスの部分、エリア、または領域にマッピングされ得る。これは、複数のオブジェクトストレージリングがストレージデバイスを共有する(すなわち、複数のオブジェクトストレージリングのパーティションを同じストレージデバイスにマッピングする)のを可能にするのに役立ち得る。別の方法で述べられると、これは、ストレージデバイスが複数のデータ処理ポリシーをサポートするのを可能にするために役立ち得る。
エリアまたは領域は、ストレージデバイスのディレクトリとして概念化され得、および/またはそれに対応し得る。エリアは、パーティションの識別子(例えば、パーティション番号)、およびリングと関連付けられるデータ処理ポリシーの識別子(例えば、ポリシーインデックス)に基づき名前が付けられ得る。パーティション番号は、例えば、ポリシーインデックスが追加され得る。
図7において、リング702−0は、データ処理ポリシー724(ポリシーA)と関連付けられる。リング702−1は、データ処理ポリシー726(ポリシーB)と関連付けられる。リング702−2は、データ処理ポリシー728(ポリシーC)と関連付けられる。
図7においてさらに、リング702−0のパーティション706は、ストレージデバイス704−0のエリア706−Aにマッピングされる。エリア706の名前は、パーティション706のパーティション番号にポリシーAと関連付けられるインデックスを追加することにより割り当て/決定され得る。
さらに図7において、リング702−0のパーティション708は、ストレージデバイス704−1のエリア708−Aにマッピングされる。リング702−0のパーティション710は、ストレージデバイス704−iのエリア710−Aにマッピングされる。リング702−1のパーティション718は、ストレージデバイス704−1のエリア718−Bにマッピングされる。リング702−1のパーティション720は、ストレージデバイス704−iのエリア720−Bにマッピングされる。リング702−2のパーティション722は、ストレージデバイス704−iのエリア722−Cにマッピングされる。
図7の例において、ストレージデバイス704−0は従って、ポリシーAをサポートする。ストレージデバイス704−1は、ポリシーAおよびBをサポートする。ストレージデバイス704−iは、ポリシーA、BおよびCをサポートする。
パーティション識別子およびポリシー識別子の組み合わせに基づきストレージデバイスにパーティションをマッピングすることにより、パーティションごとに固有の識別子を提供する。したがって、複数のリングの同一のパーティション番号でさえも、同じストレージデバイスにマッピングされ得る。例は、図8を参照して以下に提供される。
図8は、図7のパーティション対デバイスマッピングの概念図であり、そこで、リング702−1および702−2はそれぞれ、ストレージデバイス704−iにマッピングされ、ここで824として表される同一のパーティション番号を含む。具体的には、リング702−1のパーティション824は、ストレージデバイス704−iのエリア824−Bにマッピングされるが、リング702−2のパーティション824は、ストレージデバイス704−iのエリア824−Cにマッピングされる。この例において、「824−B」は、ポリシーBの識別子またはインデックスが追加されたパーティション番号を表し、「824−C」は、ポリシーCの識別子またはインデックスが追加されたパーティション番号を表す。
図7および図8の例が、説明のために提供される。本明細書で開示される方法およびシステムは、図7および図8の例に限定されない。
オブジェクトベースのストレージクラスタは、複数のデータ処理ポリシーで構成され得、それは、
コンテナのオブジェクトを格納および複製するポリシー、
複製なしで、コンテナのオブジェクトを格納するポリシー、
コンテナのオブジェクトの第1の数の複製を維持する第1ポリシーおよびコンテナのオブジェクトの第2の数の複製を維持する第2ポリシーであって、第1および第2の数は互いに異なる、第1ポリシーおよび第2ポリシー、
圧縮フォーマットにコンテナのオブジェクトを格納するポリシー、
地理的な場所パラメータを満たすストレージデバイスにコンテナのオブジェクトを格納するポリシー、
オブジェクトの複製なしで、地理的な場所パラメータを満たすストレージデバイスにコンテナのオブジェクトを格納するポリシー、
コンテナのオブジェクトを格納および複製し、オブジェクトベースのストレージクラスタの複数のそれぞれのゾーンに格納されたオブジェクトおよびオブジェクトの複製を分配するポリシーであって、ゾーンは、1または複数のストレージデバイス識別子、ストレージデバイスタイプ、サーバ識別子、パワーグリッド識別子および地理的な場所に関して定義される、ポリシー、
コンテナのオブジェクトを格納および複製し、ある期間後にコンテナのオブジェクトを保管し、格納されたオブジェクトおよびそれぞれのオブジェクトの保管後に格納されたオブジェクトの複製を廃棄するポリシー、
コンテナのオブジェクトを格納および複製し、ある期間後に消去コードに基づきコンテナのオブジェクトを保管し、格納されたオブジェクトおよびそれぞれのオブジェクトの保管後に格納されたオブジェクトの複製を廃棄するポリシー、および/または
外部ストレージシステムのアプリケーションプログラミングインタフェースを介してオブジェクトベースのストレージクラスタの外部にあるストレージシステムにコンテナのオブジェクトをマッピングするポリシー
のうちの1または複数を含み得る。
1または複数の他のデータ処理ポリシーが定義され得る。
データ処理ポリシーは、法的要件に基づき定義および/または選択され得る。
データ処理ポリシーは、災害復帰の検討に基づき定義および/または選択され得る。
ポリシーは、コンテナが作成された場合、コンテナに割り当てられ得る。
各々のコンテナは、ストレージポリシーインデックスコンテナ(例えば、アルファおよび/または数の識別子)と呼ばれる不変のメタデータ要素が提供され得る。コンテナが作成された場合、ヘッダが複数のポリシーインデックスの1つを特定すべく提供され得る。ポリシーインデックスが、新たなコンテナがいつ作成されたかについて特定されない場合、デフォルトポリシーがコンテナに割り当てられ得る。人間可読ポリシー名は、ユーザに提示され得、そのことは、ポリシーインデックスに変換され得る(例えば、プロキシサーバにより)。複数のデータ複製ポリシーのいずれかは、デフォルトポリシーとして設定され得る。
ポリシーインデックスは、複製ポリシー以外の用途のために留保および/または利用され得る。これは、例えば、レガシークラスタ(すなわち、クラスタにわたって適用される単一のオブジェクトリングおよび単一の複製ポリシーを有する)が、(例えば、複数のデータ処理ポリシーをサポートすべく)複数のオブジェクトストレージリングを含むように変更される場合に、役立ち得る。この例において、ユニークなポリシーインデックスは、データ処理ポリシーと関連付けられないレガシーコンテナのオブジェクトにアクセスすべく留保にされ得る。
コンテナは、ポリシーと多対1の関係を有し得、多様なコンテナが、同じポリシーを利用することができることを意味する。
複数の選択可能なデータ処理ポリシーで構成されるオブジェクトベースのストレージクラスタは、アプリケーションの発見および理解(ADU)技術に基づき、複数のデータ処理ポリシーをインタフェースアプリケーション(例えば、ユーザインタフェースおよび/またはアプリケーションプログラミングインタフェース)にさらすようにさらに構成され得る。例えば、コンピュータプログラムは、図1の方法100および/または図3の方法300(またはそれの一部)を実行する命令を含む場合、ADUアプリケーションは、コンピュータプログラムと関連付けられるメタデータ構造(例えば、データ要素および/またはビジネスルールのリスト)を決定すべく、コンピュータプログラムのアーティファクトを分析するために使用され得る。コンピュータプログラムと中央メタデータレジストリとの間に見いだされる関係は、インタフェースアプリケーションによる使用のためのメタデータレジストリに格納され得る。
本明細書で開示されるように、オブジェクトベースのストレージシステムは、例えば、複数のレベルのデータ複製をそれぞれ提供すべく、異なるストレージデバイスが、異なるオブジェクトリングと関連付けられること、またはそれに属することを可能にするように構成され得る。
複数のオブジェクトストレージリングで構成されるオブジェクトベースのストレージシステムは、本明細書で提供される例である、様々な用途のためにストレージデバイスのクラスタを分割するのに役立ち得る。
複数のデータ処理ポリシーおよび/または複数のオブジェクトストレージリングは、アプリケーションおよび/またはデプロイヤが、単一のクラスタ内部のオブジェクトストレージを基本的に分離することを可能にするのに役立ち得る。
複数のデータ処理ポリシーおよび/または複数のオブジェクトストレージリングは、単一のクラスタの内部に複数の複製レベルを提供するのに役立ち得る。プロバイダが、例えば、2倍の複製および3倍の複製を提案したいが、2つの別個のクラスタを維持したくない場合、単一のクラスタは、2倍のポリシーおよび3倍のポリシーで構成され得る。
複数のデータ処理ポリシーは、および/または複数のオブジェクトストレージリングは、パフォーマンス用途のために役立ち得る。例えば、従来のソリッドステートディスク(SSD)は、アカウントまたはデータベースリングの排他的なメンバとして使用され得るが、SSDオンリのオブジェクトリングが、低レイテンシ/高パフォーマンスポリシーを提供すべく、作成および使用され得る。
複数のデータ処理ポリシーおよび/または複数のオブジェクトストレージリングは、ノード一式をグループへと集めるために役立ち得る。異なるオブジェクトリングは、特定のポリシーと関連付けられるオブジェクトが、特定のデータセンターまたは地理に配置されるように異なる物理サーバを有し得る。
複数のデータ処理ポリシーおよび/または複数のオブジェクトストレージリングは、複数のストレージ技術をサポートするために役立ち得る。例えば、ノード一式は、特定のデータストレージ技術またはディスクファイル(すなわち、バックエンドのオブジェクトストレージプラグイン・アーキテクチャ)を使用し得、そのことは、オブジェクトベースのストレージ技術とは異なり得る。この例において、ポリシーは、ノード一式がトラフィックをそれらのノードにのみ誘導するように構成され得る。
複数のデータ処理ポリシーおよび/または複数のオブジェクトストレージリングは、複数の単一ポリシーのクラスタと比較してより良好な効率性を提供し得る。
本明細書での例において、データ処理ポリシーは、コンテナレベルで適用されるように説明されている。代替的には、またはさらに、複数のデータ処理ポリシーは、例えば、オブジェクトレベルなどの別のレベルで適用され得る。
コンテナレベルでのデータ処理ポリシーの適用は、インタフェースのアプリケーションが比較的容易にポリシーを利用するのを可能にするのに役立ち得る。
コンテナレベルでのポリシーの適用は、一度コンテナが作成され、ポリシーと関連付けられると、コンテナと関連付けられる全てのオブジェクトがポリシーに従って保持されることとなる点で、最小のアプリケーション認識を可能とするのに役立ち得る。
既存の単一ポリシーのストレージクラスタが複数の選択可能なストレージポリシーを含むように再構成される場合、コンテナレベルでポリシーを適用することは、現在使用中の承認システムに対する変更を回避するのに役立ち得る。
[例] 以下の例は、さらなる実施形態に関する。
例1は、オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーを提供する方法であり、
コンテナオブジェクトにデータオブジェクトを割り当てる工程と、
コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付ける工程と、
データオブジェクトのそれぞれのコンテナオブジェクトと関連付けられるデータ処理ポリシーに部分的に基づき、ストレージデバイスのクラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てる工程と
を含む。
例2において、方法はさらに、コンテナオブジェクトのそれぞれのデータ処理ポリシーに基づき、ストレージデバイスのクラスタの内部のデータオブジェクトを管理する工程を含む。
例3において、各々のデータオブジェクトを割り当てる工程は、データ処理ポリシーの第1の1つと関連付けられるコンテナオブジェクトのデータオブジェクトをストレージデバイスの第1のストレージデバイスの第1領域に割り当てる工程と、
データ処理ポリシーの第2の1つと関連付けられるコンテナのデータオブジェクトを第1のストレージデバイスの第2領域に割り当てる工程と
を含む。
例4において、各々のデータオブジェクトを割り当てる工程は、
データオブジェクトのコンテナオブジェクトと関連付けられるデータ処理ポリシーに基づき、複数のコンシステントハッシュリングの1つを選択する工程と、
選択されたコンシステントハッシュリングに基づき、データオブジェクトをストレージデバイスの領域に割り当てる工程と
を含む。
例5において、方法はさらに、
複数のコンシステントハッシュリングの各々を複数のパーティションに分割する工程であって、各々のパーティションは、コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表す、工程と、
コンシステントハッシュリングの各々をデータ処理ポリシーのそれぞれの1つのポリシー識別子と関連付ける工程と、
パーティションのそれぞれのパーティション識別子と、コンシステントハッシュリングのそれぞれのポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションをストレージデバイスの1つの領域と関連付ける工程と
を含み、
各々のデータオブジェクトを割り当てる工程は、データオブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づき、データオブジェクトのためにコンシステントハッシュリングの1つを選択する工程と、データオブジェクトのためのハッシュインデックスを計算する工程と、ハッシュインデックスに基づき選択されたコンシステントハッシュリングのパーティションを決定する工程と、パーティションと関連付けられるストレージデバイスの領域にデータオブジェクトを割り当てる工程と
を含む。
例6において、コンシステントハッシュリングの第1のコンシステントハッシュリングのパーティションのパーティション識別子は、コンシステントハッシュリングの第2のコンシステントハッシュリングのパーティションのパーティション識別子と同一であり、各々のパーティションを関連付ける工程は、
パーティション識別子と、第1コンシステントハッシュリングのポリシー識別子とに基づき、第1コンシステントハッシュリングのパーティションをストレージデバイスの第1ストレージデバイスの第1領域と関連付ける工程と、
パーティション識別子と、第2コンシステントハッシュリングのポリシー識別子とに基づき、第2コンシステントハッシュリングのパーティションを第1ストレージデバイスの第2領域と関連付ける工程と、
を有する。
例7において、コンテナオブジェクトの各々を関連付ける工程は、
複数のデータ処理ポリシー識別子の1つをメタデータとして各々のコンテナオブジェクトに関連付ける段階であって、各々のデータ処理ポリシー識別子は、データ処理ポリシーのそれぞれの1つに対応する、工程を有する。
例8は、例1から例7のいずれか1つに従うチップセットを含むコンピューティングデバイスである。
例9は、例1から例7のいずれか1つの方法を実行するように構成される装置である。
例10は、例1から例7のいずれか1つの方法を実行するための手段を含む装置である。 例11は、例1から例7のいずれか1つの方法を実行する機械である。
例12は、コンピューティングデバイス上で実行された場合、例1から例7のいずれか1つに従ってコンピューティングデバイスに方法を実行させる複数の命令を含む少なくとも1つの機械可読媒体である。
例13は、例1から例7のいずれか1つの方法を実行するように構成される通信デバイスである。 例14は、例1から例7のいずれかの方法を実行するコンピュータシステムである。
例15は、オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーを提供するように構成されるプロセッサおよびメモリを含む装置であって、複数のデータ処理ポリシーは、
コンテナオブジェクトにデータオブジェクトを割り当てることと、
コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付けることと、
データオブジェクトのそれぞれのコンテナオブジェクトと関連付けられるデータ処理ポリシーに部分的に基づき、ストレージデバイスのクラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てることと
を含む。
例16において、プロセッサおよびメモリはさらに、コンテナオブジェクトのそれぞれのデータ処理ポリシーに基づき、ストレージデバイスのクラスタの内部のデータオブジェクトを管理するように構成される。
例17において、プロセッサおよびメモリはさらに、データ処理ポリシーの第1の1つと関連付けられるコンテナオブジェクトのデータオブジェクトをストレージデバイスの第1のストレージデバイスの第1領域に割り当て、データ処理ポリシーの第2の1つと関連付けられるコンテナのデータオブジェクトを第1のストレージデバイスの第2領域に割り当てるように構成される。
例18において、プロセッサおよびメモリはさらに、データオブジェクトのコンテナオブジェクトと関連付けられるデータ処理ポリシーに基づき、複数のコンシステントハッシュリングの1つを選択し、選択されたコンシステントハッシュリングに基づき、データオブジェクトをストレージデバイスの領域に割り当てるように構成される。
例19において、プロセッサおよびメモリはさらに、複数のコンシステントハッシュリングの各々を複数のパーティションに分割し、
各々のパーティションは、コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表し、
コンシステントハッシュリングの各々をデータ処理ポリシーのそれぞれの1つのポリシー識別子と関連付け、
パーティションのそれぞれのパーティション識別子と、コンシステントハッシュリングのそれぞれのポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションをストレージデバイスの1つの領域と関連付け、
データオブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づき、データオブジェクトのためにコンシステントハッシュリングの1つを選択し、
データオブジェクトのためのハッシュインデックスを計算し、
ハッシュインデックスに基づき、選択されたコンシステントハッシュリングのパーティションを決定し、
パーティションと関連付けられるストレージデバイスの領域にデータオブジェクトを割り当てる
ように構成される。
例20において、コンシステントハッシュリングの第1のコンシステントハッシュリングのパーティションのパーティション識別子は、コンシステントハッシュリングの第2のコンシステントハッシュリングのパーティションのパーティション識別子と同一であり、プロセッサおよびメモリはさらに、
パーティション識別子と、第1コンシステントハッシュリングのポリシー識別子とに基づき、第1コンシステントハッシュリングのパーティションをストレージデバイスの第1ストレージデバイスの第1領域と関連付け、
パーティション識別子と、第2コンシステントハッシュリングのポリシー識別子とに基づき、第2コンシステントハッシュリングのパーティションを第1ストレージデバイスの第2領域と関連付ける
ように構成される。
例21において、プロセッサおよびメモリはさらに、複数のデータ処理ポリシー識別子の1つをメタデータとして各々のコンテナオブジェクトに関連付け、各々のデータ処理ポリシー識別子は、データ処理ポリシーのそれぞれの1つに対応する
ように構成される。
例22は、オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーをプロセッサに提供させる命令を含む、コンピュータプログラムで符号化される非一時的なコンピュータ可読媒体であって、複数のデータ処理ポリシーは、
コンテナオブジェクトにデータオブジェクトを割り当てること、
コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付けること、
データオブジェクトのそれぞれのコンテナオブジェクトと関連付けられるデータ処理ポリシーに部分的に基づき、ストレージデバイスのクラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てること
を含む。
例23は、コンテナオブジェクトのそれぞれのデータ処理ポリシーに基づき、ストレージデバイスのクラスタの内部のデータオブジェクトをプロセッサに管理させる命令を含む。
例24は、プロセッサに、データ処理ポリシーの第1の1つと関連付けられるコンテナオブジェクトのデータオブジェクトをストレージデバイスの第1のストレージデバイスの第1領域に割り当てさせ、データ処理ポリシーの第2の1つと関連付けられるコンテナのデータオブジェクトを第1のストレージデバイスの第2領域に割り当てさせる命令を含む。
例25は、プロセッサに、データオブジェクトのコンテナオブジェクトと関連付けられるデータ処理ポリシーに基づき複数のコンシステントハッシュリングの1つを選択させ、選択されたコンシステントハッシュリングに基づきデータオブジェクトをストレージデバイスの領域に割り当てさせる命令を含む。
例26は、プロセッサに、
複数のコンシステントハッシュリングの各々を複数のパーティションに分割し、各々のパーティションは、コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表させ、
コンシステントハッシュリングの各々をデータ処理ポリシーのそれぞれの1つのポリシー識別子と関連付けさせ、
パーティションのそれぞれのパーティション識別子と、コンシステントハッシュリングのそれぞれのポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションをストレージデバイスの1つの領域と関連付けさせ、
データオブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づきデータオブジェクトのためにコンシステントハッシュリングの1つを選択させ、
データオブジェクトのためのハッシュインデックスを計算させ、
ハッシュインデックスに基づき選択されたコンシステントハッシュリングのパーティションを決定させ、
パーティションと関連付けられるストレージデバイスの領域にデータオブジェクトを割り当てさせる
命令を含む。
例27において、コンシステントハッシュリングの第1のコンシステントハッシュリングのパーティションの記パーティション識別子は、コンシステントハッシュリングの第2のコンシステントハッシュリングのパーティションのパーティション識別子と同一であり、命令は、プロセッサに、
パーティション識別子と、第1コンシステントハッシュリングのポリシー識別子とに基づき、第1コンシステントハッシュリングのパーティションをストレージデバイスの第1ストレージデバイスの第1領域と関連付けさせ、
パーティション識別子と、第2コンシステントハッシュリングのポリシー識別子とに基づき、第2コンシステントハッシュリングのパーティションを第1ストレージデバイスの第2領域と関連付けさせる
命令を含む。
例28は、プロセッサに、複数のデータ処理ポリシー識別子の1つをメタデータとして各々のコンテナオブジェクトに関連付けさせる命令を含み、各々のデータ処理ポリシー識別子は、データ処理ポリシーのそれぞれの1つに対応する。
例29において、例1から例28のいずれか1つのデータ処理ポリシーは、
コンテナオブジェクトのデータオブジェクトを格納および複製するポリシー、および複製なしで、コンテナオブジェクトのデータオブジェクトを格納するポリシーと、
コンテナオブジェクトのデータオブジェクトの第1の数の複製を維持するポリシー、およびコンテナオブジェクトのデータオブジェクトの第2の数の複製を維持するポリシーであって、第1の数と第2の数は互いに異なる、ポリシーと、
圧縮フォーマットにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
データオブジェクトの複製なしで、地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ストレージデバイスのクラスタの複数のゾーンのそれぞれに格納されたデータオブジェクトおよびデータオブジェクトの複製を分配するポリシーであって、ゾーンは、1または複数のストレージデバイス識別子、ストレージデバイスタイプ、サーバ識別子、パワーグリッド識別子および地理的な場所に関して定義される、ポリシーと、
ストレージデバイスのクラスタの外部にあるストレージシステムにコンテナオブジェクトのデータオブジェクトをマッピングするポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後にコンテナオブジェクトのデータオブジェクトを保管し、データオブジェクトのそれぞれの保管後に格納されたデータオブジェクトおよび格納されたデータオブジェクトの複製を廃棄するポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に消去コードに基づきコンテナオブジェクトのデータオブジェクトを保管し、データオブジェクトのそれぞれの保管後に格納されたデータオブジェクトおよび格納されたデータオブジェクトの複製を廃棄するポリシーと
のうちの1または複数を有する。
方法およびシステムは、機能、特徴およびそれらの関係を例示する機能的構成要素を用いて本明細書で開示される。説明の簡便化を目的として、これらの機能的構成要素の複数の境界の少なくともいくつかは、本明細書において任意に定められた。特定の機能、および、それらの関係が適切に実行される限りにおいて、代替的な境界が定められてもよい。本明細書において様々な実施形態が開示されるが、それらは例として提示されていることは理解されるべきである。請求項の範囲は、本明細書で開示される例示的な実施形態のいずれかにより限定されるべきではない。

Claims (25)

  1. オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーを提供する機械に実装される方法であって、
    コンテナオブジェクトにデータオブジェクトを割り当てる段階と、
    前記コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付ける段階と、
    前記データオブジェクトのそれぞれの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに部分的に基づき、ストレージデバイスの前記クラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てる段階と
    を備える方法。
  2. 前記コンテナオブジェクトのそれぞれの前記データ処理ポリシーに基づき、ストレージデバイスの前記クラスタの内部の前記データオブジェクトを管理する段階をさらに備える請求項1に記載の方法。
  3. 各々のデータオブジェクトを割り当てる前記段階は、
    前記データ処理ポリシーの第1の1つと関連付けられるコンテナオブジェクトのデータオブジェクトを前記ストレージデバイスの第1のストレージデバイスの第1領域に割り当てる段階と、
    前記データ処理ポリシーの第2の1つと関連付けられるコンテナのデータオブジェクトを前記第1のストレージデバイスの第2領域に割り当てる段階と
    を有する請求項1に記載の方法。
  4. 各々のデータオブジェクトを割り当てる前記段階は、
    データオブジェクトの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに基づき、複数のコンシステントハッシュリングの1つを選択する段階と、
    前記選択されたコンシステントハッシュリングに基づき、前記データオブジェクトをストレージデバイスの領域に割り当てる段階と
    を有する請求項1に記載の方法。
  5. 複数のコンシステントハッシュリングの各々を複数のパーティションに分割する段階であって、各々のパーティションは、前記コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表す、段階と、
    前記コンシステントハッシュリングの各々を前記データ処理ポリシーのそれぞれの1つのポリシー識別子と関連付ける段階と、
    前記パーティションのそれぞれのパーティション識別子と、前記コンシステントハッシュリングのそれぞれの前記ポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションを前記ストレージデバイスの1つの領域と関連付ける段階と
    をさらに備え、
    前記各々のデータオブジェクトを割り当てる段階は、前記データオブジェクトの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに基づきデータオブジェクトのために前記コンシステントハッシュリングの1つを選択する段階、前記データオブジェクトのためのハッシュインデックスを計算する段階、前記ハッシュインデックスに基づき前記選択されたコンシステントハッシュリングのパーティションを決定する段階、および前記パーティションと関連付けられる前記ストレージデバイスの前記領域に前記データオブジェクトを割り当てる段階
    を有する請求項1に記載の方法。
  6. 前記コンシステントハッシュリングの第1コンシステントハッシュリングのパーティションの前記パーティション識別子は、前記コンシステントハッシュリングの第2コンシステントハッシュリングのパーティションの前記パーティション識別子と同一であり、前記各々のパーティションを関連付ける段階は、
    前記パーティション識別子と、前記第1コンシステントハッシュリングの前記ポリシー識別子とに基づき、前記第1コンシステントハッシュリングの前記パーティションを前記ストレージデバイスの第1ストレージデバイスの第1領域と関連付ける段階と、
    前記パーティション識別子と、前記第2コンシステントハッシュリングの前記ポリシー識別子とに基づき、前記第2コンシステントハッシュリングの前記パーティションを前記第1ストレージデバイスの第2領域と関連付ける段階と、
    を有する、
    請求項5に記載の方法。
  7. 前記コンテナオブジェクトの各々を関連付ける前記段階は、
    複数のデータ処理ポリシー識別子の1つをメタデータとして各々のコンテナオブジェクトに関連付ける段階であって、各々のデータ処理ポリシー識別子は、前記データ処理ポリシーのそれぞれの1つに対応する、段階を有する、
    請求項1に記載の方法。
  8. 前記データ処理ポリシーは、
    コンテナオブジェクトのデータオブジェクトを格納および複製するポリシー、および複製なしで、コンテナオブジェクトのデータオブジェクトを格納するポリシーと、
    コンテナオブジェクトのデータオブジェクトの第1の数の複製を維持するポリシー、およびコンテナオブジェクトのデータオブジェクトの第2の数の複製を維持するポリシーであって、前記第1の数と前記第2の数は互いに異なる、ポリシーと、
    圧縮フォーマットにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
    地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
    データオブジェクトの複製なしで、地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトの前記データオブジェクトを格納するポリシーと、
    コンテナオブジェクトのデータオブジェクトを格納および複製し、ストレージデバイスの前記クラスタの複数のゾーンのそれぞれに前記格納されたデータオブジェクトおよび前記データオブジェクトの複製を分配するポリシーであって、前記複数のゾーンは、1または複数のストレージデバイス識別子、ストレージデバイスタイプ、サーバ識別子、パワーグリッド識別子および地理的な場所に関して定義される、ポリシーと、
    ストレージデバイスの前記クラスタの外部にあるストレージシステムにコンテナオブジェクトのデータオブジェクトをマッピングするポリシーと、
    コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に前記コンテナオブジェクトの前記データオブジェクトを保管し、前記データオブジェクトのそれぞれの保管後に前記格納されたデータオブジェクトおよび前記格納されたデータオブジェクトの複製を廃棄するポリシーと、
    コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に消去コードに基づき前記コンテナオブジェクトの前記データオブジェクトを保管し、前記データオブジェクトのそれぞれの保管後に前記格納されたデータオブジェクトおよび前記格納されたデータオブジェクトの複製を廃棄するポリシーと、
    の1または複数を有する請求項1から7のいずれか一項に記載の方法。
  9. 請求項1から7のいずれか一項に記載の方法を実行する装置。
  10. 請求項1から7のいずれか一項に記載の方法を実行するための手段を備える装置。
  11. 請求項1から7のいずれか一項に記載の方法を実行するための機械。
  12. コンピューティングデバイス上で実行された場合、請求項1から7のいずれか一項に記載の方法をコンピューティングデバイスに実行させる複数の命令を備える少なくとも1つの機械可読媒体。
  13. 請求項1から7のいずれか一項に記載の方法を実行するように構成される通信デバイス。
  14. 請求項1から7のいずれか一項に記載の方法を実行するコンピュータシステム。
  15. 請求項1から7のいずれか一項に従うチップセットを備えるコンピューティングデバイス。
  16. オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーを提供するプロセッサおよびメモリを備える装置であって、前記複数のデータ処理ポリシーは、
    コンテナオブジェクトにデータオブジェクトを割り当てることと、
    前記コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付けることと、
    前記データオブジェクトのそれぞれの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに部分的に基づき、ストレージデバイスの前記クラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てることと
    を有する装置。
  17. 前記プロセッサおよびメモリはさらに、前記コンテナオブジェクトのそれぞれの前記データ処理ポリシーに基づき、ストレージデバイスの前記クラスタの内部の前記データオブジェクトを管理する、請求項16に記載の装置。
  18. 前記プロセッサおよびメモリはさらに、
    前記データ処理ポリシーの第1の1つと関連付けられるコンテナオブジェクトのデータオブジェクトを前記ストレージデバイスの第1のストレージデバイスの第1領域に割り当て、
    前記データ処理ポリシーの第2の1つと関連付けられるコンテナのデータオブジェクトを前記第1のストレージデバイスの第2領域に割り当てる、
    請求項16に記載の装置。
  19. 前記プロセッサおよびメモリはさらに、
    データオブジェクトの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに基づき、複数のコンシステントハッシュリングの1つを選択し、
    前記選択されたコンシステントハッシュリングに基づき、前記データオブジェクトをストレージデバイスの領域に割り当てる、
    請求項16に記載の装置。
  20. 前記プロセッサおよびメモリはさらに、
    複数のコンシステントハッシュリングの各々を複数のパーティションに分割し、各々のパーティションは、前記コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表し、
    前記コンシステントハッシュリングの各々を前記データ処理ポリシーのそれぞれの1つのポリシー識別子と関連付け、
    前記パーティションのそれぞれのパーティション識別子と、前記コンシステントハッシュリングのそれぞれの前記ポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションを前記ストレージデバイスの1つの領域と関連付け、
    前記データオブジェクトの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに基づき、データオブジェクトのために前記コンシステントハッシュリングの1つを選択し、
    前記データオブジェクトのためのハッシュインデックスを計算し、
    前記ハッシュインデックスに基づき、前記選択されたコンシステントハッシュリングのパーティションを決定し、
    前記パーティションと関連付けられる前記ストレージデバイスの前記領域に前記データオブジェクトを割り当てる、
    請求項16に記載の装置。
  21. 前記コンシステントハッシュリングの第1コンシステントハッシュリングのパーティションの前記パーティション識別子は、前記コンシステントハッシュリングの第2コンシステントハッシュリングのパーティションの前記パーティション識別子と同一であり、前記プロセッサおよびメモリはさらに、
    前記パーティション識別子と、前記第1コンシステントハッシュリングの前記ポリシー識別子とに基づき、前記第1コンシステントハッシュリングの前記パーティションを前記ストレージデバイスの第1ストレージデバイスの第1領域と関連付け、
    前記パーティション識別子と、前記第2コンシステントハッシュリングの前記ポリシー識別子とに基づき、前記第2コンシステントハッシュリングの前記パーティションを前記第1ストレージデバイスの第2領域と関連付ける、
    請求項20に記載の装置。
  22. 前記プロセッサおよびメモリはさらに、複数のデータ処理ポリシー識別子の1つをメタデータとして各々のコンテナオブジェクトに関連付け、各々のデータ処理ポリシー識別子は、前記データ処理ポリシーのそれぞれの1つに対応する、
    請求項16に記載の装置。
  23. 前記データ処理ポリシーは、
    コンテナオブジェクトのデータオブジェクトを格納および複製するポリシー、および複製なしで、コンテナオブジェクトのデータオブジェクトを格納するポリシーと、
    コンテナオブジェクトのデータオブジェクトの第1の数の複製を維持するポリシー、およびコンテナオブジェクトのデータオブジェクトの第2の数の複製を維持するポリシーであって、前記第1の数と前記第2の数は互いに異なる、ポリシーと、
    圧縮フォーマットにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
    地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
    前記データオブジェクトの複製なしで、地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
    コンテナオブジェクトのデータオブジェクトを格納および複製し、ストレージデバイスの前記クラスタの複数のゾーンのそれぞれに前記格納されたデータオブジェクトおよび前記データオブジェクトの複製を分配するポリシーであって、前記複数のゾーンは、1または複数のストレージデバイス識別子、ストレージデバイスタイプ、サーバ識別子、パワーグリッド識別子および地理的な場所に関して定義される、ポリシーと、
    ストレージデバイスの前記クラスタの外部にあるストレージシステムにコンテナオブジェクトのデータオブジェクトをマッピングするポリシーと、
    コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に前記コンテナオブジェクトの前記データオブジェクトを保管し、前記データオブジェクトのそれぞれの保管後に前記格納されたデータオブジェクトおよび前記格納されたデータオブジェクトの複製を廃棄するポリシーと、
    コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に消去コードに基づき前記コンテナオブジェクトの前記データオブジェクトを保管し、前記データオブジェクトのそれぞれの保管後に前記格納されたデータオブジェクトおよび前記格納されたデータオブジェクトの複製を廃棄するポリシーと
    のうちの1または複数を有する、請求項16から22のいずれか一項に記載の装置。
  24. オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーをプロセッサに提供させる命令を含む、コンピュータプログラムで符号化される非一時的なコンピュータ可読媒体であって、前記複数のデータ処理ポリシーは、コンテナオブジェクトにデータオブジェクトを割り当てること、
    前記コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付けること、および
    前記データオブジェクトのそれぞれの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに部分的に基づき、ストレージデバイスの前記クラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てること
    を有する非一時的なコンピュータ可読媒体。
  25. 前記コンテナオブジェクトのそれぞれの前記データ処理ポリシーに基づき、ストレージデバイスの前記クラスタの内部の前記データオブジェクトをさらに前記プロセッサに管理させる命令をさらに備える請求項24に記載の非一時的なコンピュータ可読媒体。
JP2017554482A 2015-06-26 2016-06-27 複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ Active JP6798756B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/751,957 2015-06-26
US14/751,957 US20160378846A1 (en) 2015-06-26 2015-06-26 Object based storage cluster with multiple selectable data handling policies
PCT/US2016/039547 WO2016210411A1 (en) 2015-06-26 2016-06-27 Object based storage cluster with multiple selectable data handling policies

Publications (2)

Publication Number Publication Date
JP2018520402A true JP2018520402A (ja) 2018-07-26
JP6798756B2 JP6798756B2 (ja) 2020-12-09

Family

ID=57586537

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017554482A Active JP6798756B2 (ja) 2015-06-26 2016-06-27 複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ

Country Status (5)

Country Link
US (1) US20160378846A1 (ja)
EP (1) EP3314481A4 (ja)
JP (1) JP6798756B2 (ja)
CN (1) CN107667363B (ja)
WO (1) WO2016210411A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022038934A1 (ja) * 2020-08-18 2022-02-24 富士フイルム株式会社 情報処理装置、情報処理方法及び情報処理プログラム
WO2022038935A1 (ja) * 2020-08-21 2022-02-24 富士フイルム株式会社 情報処理装置、情報処理方法、及び情報処理プログラム
WO2022038933A1 (ja) * 2020-08-18 2022-02-24 富士フイルム株式会社 情報処理装置、情報処理方法及び情報処理プログラム

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10248678B2 (en) 2015-08-25 2019-04-02 International Business Machines Corporation Enabling placement control for consistent hashing-based object stores
US11089099B2 (en) * 2015-09-26 2021-08-10 Intel Corporation Technologies for managing data object requests in a storage node cluster
US10761758B2 (en) * 2015-12-21 2020-09-01 Quantum Corporation Data aware deduplication object storage (DADOS)
US10503654B2 (en) 2016-09-01 2019-12-10 Intel Corporation Selective caching of erasure coded fragments in a distributed storage system
US10567397B2 (en) * 2017-01-31 2020-02-18 Hewlett Packard Enterprise Development Lp Security-based container scheduling
US11226980B2 (en) * 2017-03-13 2022-01-18 International Business Machines Corporation Replicating containers in object storage using intents
US11190733B1 (en) * 2017-10-27 2021-11-30 Theta Lake, Inc. Systems and methods for application of context-based policies to video communication content
JP2019105964A (ja) * 2017-12-12 2019-06-27 ルネサスエレクトロニクス株式会社 車載システム及びその制御方法
CN108845862A (zh) * 2018-05-25 2018-11-20 浪潮软件集团有限公司 一种多容器管理方法和装置
US10841115B2 (en) 2018-11-07 2020-11-17 Theta Lake, Inc. Systems and methods for identifying participants in multimedia data streams
CN111444036B (zh) * 2020-03-19 2021-04-20 华中科技大学 数据关联性感知的纠删码内存替换方法、设备及内存系统
US11140220B1 (en) * 2020-12-11 2021-10-05 Amazon Technologies, Inc. Consistent hashing using the power of k choices in server placement
US11310309B1 (en) 2020-12-11 2022-04-19 Amazon Technologies, Inc. Arc jump: per-key selection of an alternative server when implemented bounded loads
CN117539962B (zh) * 2024-01-09 2024-05-14 腾讯科技(深圳)有限公司 数据处理方法、装置、计算机设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006099748A (ja) * 2004-08-30 2006-04-13 Hitachi Ltd ストレージシステム及びデータ再配置制御装置。
JP2013120537A (ja) * 2011-12-08 2013-06-17 Hitachi Solutions Ltd 情報処理システム
WO2014025821A2 (en) * 2012-08-08 2014-02-13 Amazon Technologies, Inc. Archival data identification
US20140143217A1 (en) * 2010-11-03 2014-05-22 Netapp, Inc. System and method for managing data policies on application objects
US20140379715A1 (en) * 2013-06-25 2014-12-25 Google Inc. Grouping of Objects in a Distributed Storage System Based on Journals and Placement Policies
JP2015512551A (ja) * 2012-04-06 2015-04-27 エグザブロックス・コーポレーション ネットワーク・インフラストラクチャにおけるデータ記憶及び編成を容易にするコンシステント・リング名前空間

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7269612B2 (en) * 2002-05-31 2007-09-11 International Business Machines Corporation Method, system, and program for a policy based storage manager
US7096338B2 (en) * 2004-08-30 2006-08-22 Hitachi, Ltd. Storage system and data relocation control device
US8131723B2 (en) * 2007-03-30 2012-03-06 Quest Software, Inc. Recovering a file system to any point-in-time in the past with guaranteed structure, content consistency and integrity
US8316064B2 (en) * 2008-08-25 2012-11-20 Emc Corporation Method and apparatus for managing data objects of a data storage system
US20100070466A1 (en) * 2008-09-15 2010-03-18 Anand Prahlad Data transfer techniques within data storage devices, such as network attached storage performing data migration
US8484259B1 (en) * 2009-12-08 2013-07-09 Netapp, Inc. Metadata subsystem for a distributed object store in a network storage system
US9251186B2 (en) * 2012-06-13 2016-02-02 Commvault Systems, Inc. Backup using a client-side signature repository in a networked storage system
US8918586B1 (en) * 2012-09-28 2014-12-23 Emc Corporation Policy-based storage of object fragments in a multi-tiered storage system
US8935474B1 (en) * 2012-09-28 2015-01-13 Emc Corporation Policy based storage of object fragments in a multi-tiered storage system
US9210219B2 (en) * 2013-07-15 2015-12-08 Red Hat, Inc. Systems and methods for consistent hashing using multiple hash rings

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006099748A (ja) * 2004-08-30 2006-04-13 Hitachi Ltd ストレージシステム及びデータ再配置制御装置。
US20140143217A1 (en) * 2010-11-03 2014-05-22 Netapp, Inc. System and method for managing data policies on application objects
JP2013120537A (ja) * 2011-12-08 2013-06-17 Hitachi Solutions Ltd 情報処理システム
JP2015512551A (ja) * 2012-04-06 2015-04-27 エグザブロックス・コーポレーション ネットワーク・インフラストラクチャにおけるデータ記憶及び編成を容易にするコンシステント・リング名前空間
WO2014025821A2 (en) * 2012-08-08 2014-02-13 Amazon Technologies, Inc. Archival data identification
US20140379715A1 (en) * 2013-06-25 2014-12-25 Google Inc. Grouping of Objects in a Distributed Storage System Based on Journals and Placement Policies

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022038934A1 (ja) * 2020-08-18 2022-02-24 富士フイルム株式会社 情報処理装置、情報処理方法及び情報処理プログラム
WO2022038933A1 (ja) * 2020-08-18 2022-02-24 富士フイルム株式会社 情報処理装置、情報処理方法及び情報処理プログラム
WO2022038935A1 (ja) * 2020-08-21 2022-02-24 富士フイルム株式会社 情報処理装置、情報処理方法、及び情報処理プログラム

Also Published As

Publication number Publication date
WO2016210411A1 (en) 2016-12-29
EP3314481A1 (en) 2018-05-02
EP3314481A4 (en) 2018-11-07
JP6798756B2 (ja) 2020-12-09
CN107667363A (zh) 2018-02-06
US20160378846A1 (en) 2016-12-29
CN107667363B (zh) 2022-03-04

Similar Documents

Publication Publication Date Title
JP6798756B2 (ja) 複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ
US10901796B2 (en) Hash-based partitioning system
US20170161351A1 (en) Processing data in a distributed database across a plurality of clusters
US10129333B2 (en) Optimization of computer system logical partition migrations in a multiple computer system environment
JP6607901B2 (ja) スケーラブル分散ストレージアーキテクチャ
JP2022166198A (ja) リソース管理システム及び方法
US9201896B2 (en) Managing distributed storage quotas
US20200042454A1 (en) System and method for facilitating cluster-level cache and memory space
US10356150B1 (en) Automated repartitioning of streaming data
US20170374136A1 (en) Server computer management system for supporting highly available virtual desktops of multiple different tenants
US10871911B2 (en) Reducing data amplification when replicating objects across different sites
US20140380007A1 (en) Block level storage
WO2016069034A1 (en) Data management for tenants
CN111488198A (zh) 一种超融合环境下的虚拟机调度方法、系统及介质
CN108268614B (zh) 一种森林资源空间数据的分布式管理方法
US20130318086A1 (en) Distributed file hierarchy management in a clustered redirect-on-write file system
US11580078B2 (en) Providing enhanced security for object access in object-based datastores
US11068192B1 (en) Utilizing mutiple snapshot sources for creating new copy of volume in a networked environment wherein additional snapshot sources are reserved with lower performance levels than a primary snapshot source
US20220318042A1 (en) Distributed memory block device storage
KR20100091757A (ko) 분산 스페이스를 이용하여 분산 프로그래밍 환경을 제공하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
US20230328137A1 (en) Containerized gateways and exports for distributed file systems
US11971902B1 (en) Data retrieval latency management system
Chum et al. SLA-Aware Adaptive Mapping Scheme in Bigdata Distributed Storage Systems
Jain et al. Bloom Filter in Cloud Storage for Efficient Data Membership Identification
CN113918644A (zh) 一种管理应用程序的数据的方法及相关装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180104

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190621

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200527

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200616

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200911

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201020

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201117

R150 Certificate of patent or registration of utility model

Ref document number: 6798756

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250