JP2018520402A - 複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ - Google Patents
複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ Download PDFInfo
- Publication number
- JP2018520402A JP2018520402A JP2017554482A JP2017554482A JP2018520402A JP 2018520402 A JP2018520402 A JP 2018520402A JP 2017554482 A JP2017554482 A JP 2017554482A JP 2017554482 A JP2017554482 A JP 2017554482A JP 2018520402 A JP2018520402 A JP 2018520402A
- Authority
- JP
- Japan
- Prior art keywords
- policy
- container
- data
- objects
- data processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/122—File system administration, e.g. details of archiving or snapshots using management policies
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/13—File access structures, e.g. distributed indices
- G06F16/137—Hash-based
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
- Retry When Errors Occur (AREA)
Abstract
Description
コンテナのオブジェクトを格納および複製するポリシー、
複製なしで、コンテナのオブジェクトを格納するポリシー、
コンテナのオブジェクトの第1の数の複製を維持する第1ポリシーおよびコンテナのオブジェクトの第2の数の複製を維持する第2ポリシーであって、第1および第2の数は互いに異なる、第1ポリシーおよび第2ポリシー、
圧縮フォーマットにコンテナのオブジェクトを格納するポリシー、
地理的な場所パラメータを満たすストレージデバイスにコンテナのオブジェクトを格納するポリシー、
オブジェクトの複製なしで、地理的な場所パラメータを満たすストレージデバイスにコンテナのオブジェクトを格納するポリシー、
コンテナのオブジェクトを格納および複製し、オブジェクトベースのストレージクラスタの複数のそれぞれのゾーンに格納されたオブジェクトおよびオブジェクトの複製を分配するポリシーであって、ゾーンは、1または複数のストレージデバイス識別子、ストレージデバイスタイプ、サーバ識別子、パワーグリッド識別子および地理的な場所に関して定義される、ポリシー、
コンテナのオブジェクトを格納および複製し、ある期間後にコンテナのオブジェクトを保管し、格納されたオブジェクトおよびそれぞれのオブジェクトの保管後に格納されたオブジェクトの複製を廃棄するポリシー、
コンテナのオブジェクトを格納および複製し、ある期間後に消去コードに基づきコンテナのオブジェクトを保管し、格納されたオブジェクトおよびそれぞれのオブジェクトの保管後に格納されたオブジェクトの複製を廃棄するポリシー、および/または
外部ストレージシステムのアプリケーションプログラミングインタフェースを介してオブジェクトベースのストレージクラスタの外部にあるストレージシステムにコンテナのオブジェクトをマッピングするポリシー
のうちの1または複数を含み得る。
コンテナオブジェクトにデータオブジェクトを割り当てる工程と、
コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付ける工程と、
データオブジェクトのそれぞれのコンテナオブジェクトと関連付けられるデータ処理ポリシーに部分的に基づき、ストレージデバイスのクラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てる工程と
を含む。
データ処理ポリシーの第2の1つと関連付けられるコンテナのデータオブジェクトを第1のストレージデバイスの第2領域に割り当てる工程と
を含む。
データオブジェクトのコンテナオブジェクトと関連付けられるデータ処理ポリシーに基づき、複数のコンシステントハッシュリングの1つを選択する工程と、
選択されたコンシステントハッシュリングに基づき、データオブジェクトをストレージデバイスの領域に割り当てる工程と
を含む。
複数のコンシステントハッシュリングの各々を複数のパーティションに分割する工程であって、各々のパーティションは、コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表す、工程と、
コンシステントハッシュリングの各々をデータ処理ポリシーのそれぞれの1つのポリシー識別子と関連付ける工程と、
パーティションのそれぞれのパーティション識別子と、コンシステントハッシュリングのそれぞれのポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションをストレージデバイスの1つの領域と関連付ける工程と
を含み、
各々のデータオブジェクトを割り当てる工程は、データオブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づき、データオブジェクトのためにコンシステントハッシュリングの1つを選択する工程と、データオブジェクトのためのハッシュインデックスを計算する工程と、ハッシュインデックスに基づき選択されたコンシステントハッシュリングのパーティションを決定する工程と、パーティションと関連付けられるストレージデバイスの領域にデータオブジェクトを割り当てる工程と
を含む。
パーティション識別子と、第1コンシステントハッシュリングのポリシー識別子とに基づき、第1コンシステントハッシュリングのパーティションをストレージデバイスの第1ストレージデバイスの第1領域と関連付ける工程と、
パーティション識別子と、第2コンシステントハッシュリングのポリシー識別子とに基づき、第2コンシステントハッシュリングのパーティションを第1ストレージデバイスの第2領域と関連付ける工程と、
を有する。
複数のデータ処理ポリシー識別子の1つをメタデータとして各々のコンテナオブジェクトに関連付ける段階であって、各々のデータ処理ポリシー識別子は、データ処理ポリシーのそれぞれの1つに対応する、工程を有する。
コンテナオブジェクトにデータオブジェクトを割り当てることと、
コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付けることと、
データオブジェクトのそれぞれのコンテナオブジェクトと関連付けられるデータ処理ポリシーに部分的に基づき、ストレージデバイスのクラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てることと
を含む。
各々のパーティションは、コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表し、
コンシステントハッシュリングの各々をデータ処理ポリシーのそれぞれの1つのポリシー識別子と関連付け、
パーティションのそれぞれのパーティション識別子と、コンシステントハッシュリングのそれぞれのポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションをストレージデバイスの1つの領域と関連付け、
データオブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づき、データオブジェクトのためにコンシステントハッシュリングの1つを選択し、
データオブジェクトのためのハッシュインデックスを計算し、
ハッシュインデックスに基づき、選択されたコンシステントハッシュリングのパーティションを決定し、
パーティションと関連付けられるストレージデバイスの領域にデータオブジェクトを割り当てる
ように構成される。
パーティション識別子と、第1コンシステントハッシュリングのポリシー識別子とに基づき、第1コンシステントハッシュリングのパーティションをストレージデバイスの第1ストレージデバイスの第1領域と関連付け、
パーティション識別子と、第2コンシステントハッシュリングのポリシー識別子とに基づき、第2コンシステントハッシュリングのパーティションを第1ストレージデバイスの第2領域と関連付ける
ように構成される。
ように構成される。
コンテナオブジェクトにデータオブジェクトを割り当てること、
コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付けること、
データオブジェクトのそれぞれのコンテナオブジェクトと関連付けられるデータ処理ポリシーに部分的に基づき、ストレージデバイスのクラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てること
を含む。
複数のコンシステントハッシュリングの各々を複数のパーティションに分割し、各々のパーティションは、コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表させ、
コンシステントハッシュリングの各々をデータ処理ポリシーのそれぞれの1つのポリシー識別子と関連付けさせ、
パーティションのそれぞれのパーティション識別子と、コンシステントハッシュリングのそれぞれのポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションをストレージデバイスの1つの領域と関連付けさせ、
データオブジェクトのコンテナと関連付けられるデータ処理ポリシーに基づきデータオブジェクトのためにコンシステントハッシュリングの1つを選択させ、
データオブジェクトのためのハッシュインデックスを計算させ、
ハッシュインデックスに基づき選択されたコンシステントハッシュリングのパーティションを決定させ、
パーティションと関連付けられるストレージデバイスの領域にデータオブジェクトを割り当てさせる
命令を含む。
パーティション識別子と、第1コンシステントハッシュリングのポリシー識別子とに基づき、第1コンシステントハッシュリングのパーティションをストレージデバイスの第1ストレージデバイスの第1領域と関連付けさせ、
パーティション識別子と、第2コンシステントハッシュリングのポリシー識別子とに基づき、第2コンシステントハッシュリングのパーティションを第1ストレージデバイスの第2領域と関連付けさせる
命令を含む。
コンテナオブジェクトのデータオブジェクトを格納および複製するポリシー、および複製なしで、コンテナオブジェクトのデータオブジェクトを格納するポリシーと、
コンテナオブジェクトのデータオブジェクトの第1の数の複製を維持するポリシー、およびコンテナオブジェクトのデータオブジェクトの第2の数の複製を維持するポリシーであって、第1の数と第2の数は互いに異なる、ポリシーと、
圧縮フォーマットにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
データオブジェクトの複製なしで、地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ストレージデバイスのクラスタの複数のゾーンのそれぞれに格納されたデータオブジェクトおよびデータオブジェクトの複製を分配するポリシーであって、ゾーンは、1または複数のストレージデバイス識別子、ストレージデバイスタイプ、サーバ識別子、パワーグリッド識別子および地理的な場所に関して定義される、ポリシーと、
ストレージデバイスのクラスタの外部にあるストレージシステムにコンテナオブジェクトのデータオブジェクトをマッピングするポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後にコンテナオブジェクトのデータオブジェクトを保管し、データオブジェクトのそれぞれの保管後に格納されたデータオブジェクトおよび格納されたデータオブジェクトの複製を廃棄するポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に消去コードに基づきコンテナオブジェクトのデータオブジェクトを保管し、データオブジェクトのそれぞれの保管後に格納されたデータオブジェクトおよび格納されたデータオブジェクトの複製を廃棄するポリシーと
のうちの1または複数を有する。
Claims (25)
- オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーを提供する機械に実装される方法であって、
コンテナオブジェクトにデータオブジェクトを割り当てる段階と、
前記コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付ける段階と、
前記データオブジェクトのそれぞれの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに部分的に基づき、ストレージデバイスの前記クラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てる段階と
を備える方法。 - 前記コンテナオブジェクトのそれぞれの前記データ処理ポリシーに基づき、ストレージデバイスの前記クラスタの内部の前記データオブジェクトを管理する段階をさらに備える請求項1に記載の方法。
- 各々のデータオブジェクトを割り当てる前記段階は、
前記データ処理ポリシーの第1の1つと関連付けられるコンテナオブジェクトのデータオブジェクトを前記ストレージデバイスの第1のストレージデバイスの第1領域に割り当てる段階と、
前記データ処理ポリシーの第2の1つと関連付けられるコンテナのデータオブジェクトを前記第1のストレージデバイスの第2領域に割り当てる段階と
を有する請求項1に記載の方法。 - 各々のデータオブジェクトを割り当てる前記段階は、
データオブジェクトの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに基づき、複数のコンシステントハッシュリングの1つを選択する段階と、
前記選択されたコンシステントハッシュリングに基づき、前記データオブジェクトをストレージデバイスの領域に割り当てる段階と
を有する請求項1に記載の方法。 - 複数のコンシステントハッシュリングの各々を複数のパーティションに分割する段階であって、各々のパーティションは、前記コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表す、段階と、
前記コンシステントハッシュリングの各々を前記データ処理ポリシーのそれぞれの1つのポリシー識別子と関連付ける段階と、
前記パーティションのそれぞれのパーティション識別子と、前記コンシステントハッシュリングのそれぞれの前記ポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションを前記ストレージデバイスの1つの領域と関連付ける段階と
をさらに備え、
前記各々のデータオブジェクトを割り当てる段階は、前記データオブジェクトの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに基づきデータオブジェクトのために前記コンシステントハッシュリングの1つを選択する段階、前記データオブジェクトのためのハッシュインデックスを計算する段階、前記ハッシュインデックスに基づき前記選択されたコンシステントハッシュリングのパーティションを決定する段階、および前記パーティションと関連付けられる前記ストレージデバイスの前記領域に前記データオブジェクトを割り当てる段階
を有する請求項1に記載の方法。 - 前記コンシステントハッシュリングの第1コンシステントハッシュリングのパーティションの前記パーティション識別子は、前記コンシステントハッシュリングの第2コンシステントハッシュリングのパーティションの前記パーティション識別子と同一であり、前記各々のパーティションを関連付ける段階は、
前記パーティション識別子と、前記第1コンシステントハッシュリングの前記ポリシー識別子とに基づき、前記第1コンシステントハッシュリングの前記パーティションを前記ストレージデバイスの第1ストレージデバイスの第1領域と関連付ける段階と、
前記パーティション識別子と、前記第2コンシステントハッシュリングの前記ポリシー識別子とに基づき、前記第2コンシステントハッシュリングの前記パーティションを前記第1ストレージデバイスの第2領域と関連付ける段階と、
を有する、
請求項5に記載の方法。 - 前記コンテナオブジェクトの各々を関連付ける前記段階は、
複数のデータ処理ポリシー識別子の1つをメタデータとして各々のコンテナオブジェクトに関連付ける段階であって、各々のデータ処理ポリシー識別子は、前記データ処理ポリシーのそれぞれの1つに対応する、段階を有する、
請求項1に記載の方法。 - 前記データ処理ポリシーは、
コンテナオブジェクトのデータオブジェクトを格納および複製するポリシー、および複製なしで、コンテナオブジェクトのデータオブジェクトを格納するポリシーと、
コンテナオブジェクトのデータオブジェクトの第1の数の複製を維持するポリシー、およびコンテナオブジェクトのデータオブジェクトの第2の数の複製を維持するポリシーであって、前記第1の数と前記第2の数は互いに異なる、ポリシーと、
圧縮フォーマットにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
データオブジェクトの複製なしで、地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトの前記データオブジェクトを格納するポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ストレージデバイスの前記クラスタの複数のゾーンのそれぞれに前記格納されたデータオブジェクトおよび前記データオブジェクトの複製を分配するポリシーであって、前記複数のゾーンは、1または複数のストレージデバイス識別子、ストレージデバイスタイプ、サーバ識別子、パワーグリッド識別子および地理的な場所に関して定義される、ポリシーと、
ストレージデバイスの前記クラスタの外部にあるストレージシステムにコンテナオブジェクトのデータオブジェクトをマッピングするポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に前記コンテナオブジェクトの前記データオブジェクトを保管し、前記データオブジェクトのそれぞれの保管後に前記格納されたデータオブジェクトおよび前記格納されたデータオブジェクトの複製を廃棄するポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に消去コードに基づき前記コンテナオブジェクトの前記データオブジェクトを保管し、前記データオブジェクトのそれぞれの保管後に前記格納されたデータオブジェクトおよび前記格納されたデータオブジェクトの複製を廃棄するポリシーと、
の1または複数を有する請求項1から7のいずれか一項に記載の方法。 - 請求項1から7のいずれか一項に記載の方法を実行する装置。
- 請求項1から7のいずれか一項に記載の方法を実行するための手段を備える装置。
- 請求項1から7のいずれか一項に記載の方法を実行するための機械。
- コンピューティングデバイス上で実行された場合、請求項1から7のいずれか一項に記載の方法をコンピューティングデバイスに実行させる複数の命令を備える少なくとも1つの機械可読媒体。
- 請求項1から7のいずれか一項に記載の方法を実行するように構成される通信デバイス。
- 請求項1から7のいずれか一項に記載の方法を実行するコンピュータシステム。
- 請求項1から7のいずれか一項に従うチップセットを備えるコンピューティングデバイス。
- オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーを提供するプロセッサおよびメモリを備える装置であって、前記複数のデータ処理ポリシーは、
コンテナオブジェクトにデータオブジェクトを割り当てることと、
前記コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付けることと、
前記データオブジェクトのそれぞれの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに部分的に基づき、ストレージデバイスの前記クラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てることと
を有する装置。 - 前記プロセッサおよびメモリはさらに、前記コンテナオブジェクトのそれぞれの前記データ処理ポリシーに基づき、ストレージデバイスの前記クラスタの内部の前記データオブジェクトを管理する、請求項16に記載の装置。
- 前記プロセッサおよびメモリはさらに、
前記データ処理ポリシーの第1の1つと関連付けられるコンテナオブジェクトのデータオブジェクトを前記ストレージデバイスの第1のストレージデバイスの第1領域に割り当て、
前記データ処理ポリシーの第2の1つと関連付けられるコンテナのデータオブジェクトを前記第1のストレージデバイスの第2領域に割り当てる、
請求項16に記載の装置。 - 前記プロセッサおよびメモリはさらに、
データオブジェクトの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに基づき、複数のコンシステントハッシュリングの1つを選択し、
前記選択されたコンシステントハッシュリングに基づき、前記データオブジェクトをストレージデバイスの領域に割り当てる、
請求項16に記載の装置。 - 前記プロセッサおよびメモリはさらに、
複数のコンシステントハッシュリングの各々を複数のパーティションに分割し、各々のパーティションは、前記コンシステントハッシュリングのそれぞれのハッシュインデックスの範囲を表し、
前記コンシステントハッシュリングの各々を前記データ処理ポリシーのそれぞれの1つのポリシー識別子と関連付け、
前記パーティションのそれぞれのパーティション識別子と、前記コンシステントハッシュリングのそれぞれの前記ポリシー識別子とに基づき、各々のコンシステントハッシュリングの各々のパーティションを前記ストレージデバイスの1つの領域と関連付け、
前記データオブジェクトの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに基づき、データオブジェクトのために前記コンシステントハッシュリングの1つを選択し、
前記データオブジェクトのためのハッシュインデックスを計算し、
前記ハッシュインデックスに基づき、前記選択されたコンシステントハッシュリングのパーティションを決定し、
前記パーティションと関連付けられる前記ストレージデバイスの前記領域に前記データオブジェクトを割り当てる、
請求項16に記載の装置。 - 前記コンシステントハッシュリングの第1コンシステントハッシュリングのパーティションの前記パーティション識別子は、前記コンシステントハッシュリングの第2コンシステントハッシュリングのパーティションの前記パーティション識別子と同一であり、前記プロセッサおよびメモリはさらに、
前記パーティション識別子と、前記第1コンシステントハッシュリングの前記ポリシー識別子とに基づき、前記第1コンシステントハッシュリングの前記パーティションを前記ストレージデバイスの第1ストレージデバイスの第1領域と関連付け、
前記パーティション識別子と、前記第2コンシステントハッシュリングの前記ポリシー識別子とに基づき、前記第2コンシステントハッシュリングの前記パーティションを前記第1ストレージデバイスの第2領域と関連付ける、
請求項20に記載の装置。 - 前記プロセッサおよびメモリはさらに、複数のデータ処理ポリシー識別子の1つをメタデータとして各々のコンテナオブジェクトに関連付け、各々のデータ処理ポリシー識別子は、前記データ処理ポリシーのそれぞれの1つに対応する、
請求項16に記載の装置。 - 前記データ処理ポリシーは、
コンテナオブジェクトのデータオブジェクトを格納および複製するポリシー、および複製なしで、コンテナオブジェクトのデータオブジェクトを格納するポリシーと、
コンテナオブジェクトのデータオブジェクトの第1の数の複製を維持するポリシー、およびコンテナオブジェクトのデータオブジェクトの第2の数の複製を維持するポリシーであって、前記第1の数と前記第2の数は互いに異なる、ポリシーと、
圧縮フォーマットにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
前記データオブジェクトの複製なしで、地理的な場所パラメータを満たすストレージデバイスにコンテナオブジェクトのデータオブジェクトを格納するポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ストレージデバイスの前記クラスタの複数のゾーンのそれぞれに前記格納されたデータオブジェクトおよび前記データオブジェクトの複製を分配するポリシーであって、前記複数のゾーンは、1または複数のストレージデバイス識別子、ストレージデバイスタイプ、サーバ識別子、パワーグリッド識別子および地理的な場所に関して定義される、ポリシーと、
ストレージデバイスの前記クラスタの外部にあるストレージシステムにコンテナオブジェクトのデータオブジェクトをマッピングするポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に前記コンテナオブジェクトの前記データオブジェクトを保管し、前記データオブジェクトのそれぞれの保管後に前記格納されたデータオブジェクトおよび前記格納されたデータオブジェクトの複製を廃棄するポリシーと、
コンテナオブジェクトのデータオブジェクトを格納および複製し、ある期間後に消去コードに基づき前記コンテナオブジェクトの前記データオブジェクトを保管し、前記データオブジェクトのそれぞれの保管後に前記格納されたデータオブジェクトおよび前記格納されたデータオブジェクトの複製を廃棄するポリシーと
のうちの1または複数を有する、請求項16から22のいずれか一項に記載の装置。 - オブジェクトベースのストレージクラスタとして管理されるストレージデバイスのクラスタの内部に複数のデータ処理ポリシーをプロセッサに提供させる命令を含む、コンピュータプログラムで符号化される非一時的なコンピュータ可読媒体であって、前記複数のデータ処理ポリシーは、コンテナオブジェクトにデータオブジェクトを割り当てること、
前記コンテナオブジェクトの各々を複数の選択可能なデータ処理ポリシーの1つと関連付けること、および
前記データオブジェクトのそれぞれの前記コンテナオブジェクトと関連付けられる前記データ処理ポリシーに部分的に基づき、ストレージデバイスの前記クラスタの内部のストレージデバイスの領域に各々のデータオブジェクトを割り当てること
を有する非一時的なコンピュータ可読媒体。 - 前記コンテナオブジェクトのそれぞれの前記データ処理ポリシーに基づき、ストレージデバイスの前記クラスタの内部の前記データオブジェクトをさらに前記プロセッサに管理させる命令をさらに備える請求項24に記載の非一時的なコンピュータ可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/751,957 | 2015-06-26 | ||
US14/751,957 US20160378846A1 (en) | 2015-06-26 | 2015-06-26 | Object based storage cluster with multiple selectable data handling policies |
PCT/US2016/039547 WO2016210411A1 (en) | 2015-06-26 | 2016-06-27 | Object based storage cluster with multiple selectable data handling policies |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018520402A true JP2018520402A (ja) | 2018-07-26 |
JP6798756B2 JP6798756B2 (ja) | 2020-12-09 |
Family
ID=57586537
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017554482A Active JP6798756B2 (ja) | 2015-06-26 | 2016-06-27 | 複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ |
Country Status (5)
Country | Link |
---|---|
US (1) | US20160378846A1 (ja) |
EP (1) | EP3314481A4 (ja) |
JP (1) | JP6798756B2 (ja) |
CN (1) | CN107667363B (ja) |
WO (1) | WO2016210411A1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022038934A1 (ja) * | 2020-08-18 | 2022-02-24 | 富士フイルム株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
WO2022038935A1 (ja) * | 2020-08-21 | 2022-02-24 | 富士フイルム株式会社 | 情報処理装置、情報処理方法、及び情報処理プログラム |
WO2022038933A1 (ja) * | 2020-08-18 | 2022-02-24 | 富士フイルム株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10248678B2 (en) | 2015-08-25 | 2019-04-02 | International Business Machines Corporation | Enabling placement control for consistent hashing-based object stores |
US11089099B2 (en) * | 2015-09-26 | 2021-08-10 | Intel Corporation | Technologies for managing data object requests in a storage node cluster |
US10761758B2 (en) * | 2015-12-21 | 2020-09-01 | Quantum Corporation | Data aware deduplication object storage (DADOS) |
US10503654B2 (en) | 2016-09-01 | 2019-12-10 | Intel Corporation | Selective caching of erasure coded fragments in a distributed storage system |
US10567397B2 (en) * | 2017-01-31 | 2020-02-18 | Hewlett Packard Enterprise Development Lp | Security-based container scheduling |
US11226980B2 (en) * | 2017-03-13 | 2022-01-18 | International Business Machines Corporation | Replicating containers in object storage using intents |
US11190733B1 (en) * | 2017-10-27 | 2021-11-30 | Theta Lake, Inc. | Systems and methods for application of context-based policies to video communication content |
JP2019105964A (ja) * | 2017-12-12 | 2019-06-27 | ルネサスエレクトロニクス株式会社 | 車載システム及びその制御方法 |
CN108845862A (zh) * | 2018-05-25 | 2018-11-20 | 浪潮软件集团有限公司 | 一种多容器管理方法和装置 |
US10841115B2 (en) | 2018-11-07 | 2020-11-17 | Theta Lake, Inc. | Systems and methods for identifying participants in multimedia data streams |
CN111444036B (zh) * | 2020-03-19 | 2021-04-20 | 华中科技大学 | 数据关联性感知的纠删码内存替换方法、设备及内存系统 |
US11140220B1 (en) * | 2020-12-11 | 2021-10-05 | Amazon Technologies, Inc. | Consistent hashing using the power of k choices in server placement |
US11310309B1 (en) | 2020-12-11 | 2022-04-19 | Amazon Technologies, Inc. | Arc jump: per-key selection of an alternative server when implemented bounded loads |
CN117539962B (zh) * | 2024-01-09 | 2024-05-14 | 腾讯科技(深圳)有限公司 | 数据处理方法、装置、计算机设备和存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006099748A (ja) * | 2004-08-30 | 2006-04-13 | Hitachi Ltd | ストレージシステム及びデータ再配置制御装置。 |
JP2013120537A (ja) * | 2011-12-08 | 2013-06-17 | Hitachi Solutions Ltd | 情報処理システム |
WO2014025821A2 (en) * | 2012-08-08 | 2014-02-13 | Amazon Technologies, Inc. | Archival data identification |
US20140143217A1 (en) * | 2010-11-03 | 2014-05-22 | Netapp, Inc. | System and method for managing data policies on application objects |
US20140379715A1 (en) * | 2013-06-25 | 2014-12-25 | Google Inc. | Grouping of Objects in a Distributed Storage System Based on Journals and Placement Policies |
JP2015512551A (ja) * | 2012-04-06 | 2015-04-27 | エグザブロックス・コーポレーション | ネットワーク・インフラストラクチャにおけるデータ記憶及び編成を容易にするコンシステント・リング名前空間 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7269612B2 (en) * | 2002-05-31 | 2007-09-11 | International Business Machines Corporation | Method, system, and program for a policy based storage manager |
US7096338B2 (en) * | 2004-08-30 | 2006-08-22 | Hitachi, Ltd. | Storage system and data relocation control device |
US8131723B2 (en) * | 2007-03-30 | 2012-03-06 | Quest Software, Inc. | Recovering a file system to any point-in-time in the past with guaranteed structure, content consistency and integrity |
US8316064B2 (en) * | 2008-08-25 | 2012-11-20 | Emc Corporation | Method and apparatus for managing data objects of a data storage system |
US20100070466A1 (en) * | 2008-09-15 | 2010-03-18 | Anand Prahlad | Data transfer techniques within data storage devices, such as network attached storage performing data migration |
US8484259B1 (en) * | 2009-12-08 | 2013-07-09 | Netapp, Inc. | Metadata subsystem for a distributed object store in a network storage system |
US9251186B2 (en) * | 2012-06-13 | 2016-02-02 | Commvault Systems, Inc. | Backup using a client-side signature repository in a networked storage system |
US8918586B1 (en) * | 2012-09-28 | 2014-12-23 | Emc Corporation | Policy-based storage of object fragments in a multi-tiered storage system |
US8935474B1 (en) * | 2012-09-28 | 2015-01-13 | Emc Corporation | Policy based storage of object fragments in a multi-tiered storage system |
US9210219B2 (en) * | 2013-07-15 | 2015-12-08 | Red Hat, Inc. | Systems and methods for consistent hashing using multiple hash rings |
-
2015
- 2015-06-26 US US14/751,957 patent/US20160378846A1/en not_active Abandoned
-
2016
- 2016-06-27 WO PCT/US2016/039547 patent/WO2016210411A1/en active Application Filing
- 2016-06-27 EP EP16815483.9A patent/EP3314481A4/en not_active Ceased
- 2016-06-27 CN CN201680030442.8A patent/CN107667363B/zh active Active
- 2016-06-27 JP JP2017554482A patent/JP6798756B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006099748A (ja) * | 2004-08-30 | 2006-04-13 | Hitachi Ltd | ストレージシステム及びデータ再配置制御装置。 |
US20140143217A1 (en) * | 2010-11-03 | 2014-05-22 | Netapp, Inc. | System and method for managing data policies on application objects |
JP2013120537A (ja) * | 2011-12-08 | 2013-06-17 | Hitachi Solutions Ltd | 情報処理システム |
JP2015512551A (ja) * | 2012-04-06 | 2015-04-27 | エグザブロックス・コーポレーション | ネットワーク・インフラストラクチャにおけるデータ記憶及び編成を容易にするコンシステント・リング名前空間 |
WO2014025821A2 (en) * | 2012-08-08 | 2014-02-13 | Amazon Technologies, Inc. | Archival data identification |
US20140379715A1 (en) * | 2013-06-25 | 2014-12-25 | Google Inc. | Grouping of Objects in a Distributed Storage System Based on Journals and Placement Policies |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022038934A1 (ja) * | 2020-08-18 | 2022-02-24 | 富士フイルム株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
WO2022038933A1 (ja) * | 2020-08-18 | 2022-02-24 | 富士フイルム株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
WO2022038935A1 (ja) * | 2020-08-21 | 2022-02-24 | 富士フイルム株式会社 | 情報処理装置、情報処理方法、及び情報処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
WO2016210411A1 (en) | 2016-12-29 |
EP3314481A1 (en) | 2018-05-02 |
EP3314481A4 (en) | 2018-11-07 |
JP6798756B2 (ja) | 2020-12-09 |
CN107667363A (zh) | 2018-02-06 |
US20160378846A1 (en) | 2016-12-29 |
CN107667363B (zh) | 2022-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6798756B2 (ja) | 複数の選択可能なデータ処理ポリシーを有するオブジェクトベースのストレージクラスタ | |
US10901796B2 (en) | Hash-based partitioning system | |
US20170161351A1 (en) | Processing data in a distributed database across a plurality of clusters | |
US10129333B2 (en) | Optimization of computer system logical partition migrations in a multiple computer system environment | |
JP6607901B2 (ja) | スケーラブル分散ストレージアーキテクチャ | |
JP2022166198A (ja) | リソース管理システム及び方法 | |
US9201896B2 (en) | Managing distributed storage quotas | |
US20200042454A1 (en) | System and method for facilitating cluster-level cache and memory space | |
US10356150B1 (en) | Automated repartitioning of streaming data | |
US20170374136A1 (en) | Server computer management system for supporting highly available virtual desktops of multiple different tenants | |
US10871911B2 (en) | Reducing data amplification when replicating objects across different sites | |
US20140380007A1 (en) | Block level storage | |
WO2016069034A1 (en) | Data management for tenants | |
CN111488198A (zh) | 一种超融合环境下的虚拟机调度方法、系统及介质 | |
CN108268614B (zh) | 一种森林资源空间数据的分布式管理方法 | |
US20130318086A1 (en) | Distributed file hierarchy management in a clustered redirect-on-write file system | |
US11580078B2 (en) | Providing enhanced security for object access in object-based datastores | |
US11068192B1 (en) | Utilizing mutiple snapshot sources for creating new copy of volume in a networked environment wherein additional snapshot sources are reserved with lower performance levels than a primary snapshot source | |
US20220318042A1 (en) | Distributed memory block device storage | |
KR20100091757A (ko) | 분산 스페이스를 이용하여 분산 프로그래밍 환경을 제공하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체 | |
US20230328137A1 (en) | Containerized gateways and exports for distributed file systems | |
US11971902B1 (en) | Data retrieval latency management system | |
Chum et al. | SLA-Aware Adaptive Mapping Scheme in Bigdata Distributed Storage Systems | |
Jain et al. | Bloom Filter in Cloud Storage for Efficient Data Membership Identification | |
CN113918644A (zh) | 一种管理应用程序的数据的方法及相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180104 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190621 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200527 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200616 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200911 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201020 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201117 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6798756 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |