JP6034512B2 - 計算機システム及びデータ管理方法 - Google Patents
計算機システム及びデータ管理方法 Download PDFInfo
- Publication number
- JP6034512B2 JP6034512B2 JP2015554353A JP2015554353A JP6034512B2 JP 6034512 B2 JP6034512 B2 JP 6034512B2 JP 2015554353 A JP2015554353 A JP 2015554353A JP 2015554353 A JP2015554353 A JP 2015554353A JP 6034512 B2 JP6034512 B2 JP 6034512B2
- Authority
- JP
- Japan
- Prior art keywords
- file
- key
- information
- data
- type data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/172—Caching, prefetching or hoarding of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
- G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture
- G06F16/183—Provision of network file services by network file servers, e.g. by using NFS, CIFS
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/13—File access structures, e.g. distributed indices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/14—Details of searching files based on file metadata
- G06F16/148—File search processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
図1は、本発明の実施例1における計算機システムの構成例を示すブロック図である。
KV型データの追加処理は、図11に示すKV型データ更新処理とほぼ同様であるが、一部処理が異なる。
KV型データの削除処理は、図11に示す処理とほぼ同様であるが、一部処理が異なる。
実施例1では、ファイル管理情報132及びレコード定義情報133を用いてファイル181のレコード構造を把握していたが、予め、分散KVSサーバ102にファイル181のレコード定義情報を設定してもよい。
実施例2では、一つのファイル181が複数のサブファイル1811に分割され、複数の分散KVSサーバ102に接続されるストレージ装置105にサブファイル1811が格納される点が異なる。以下、実施例1との差異を中心に実施例2について説明する。
Claims (10)
- ネットワークを介して接続される複数の計算機を備える計算機システムであって、
前記複数の計算機の各々は、
プロセッサ、前記プロセッサに接続されるメモリ及び前記プロセッサに接続されるネットワークインタフェースを有し、
複数のレコードを含むファイルを一以上格納するストレージ装置と接続し、
前記ストレージ装置に格納される前記ファイルを管理するファイルシステムと、
前記複数の計算機が有する記憶領域を統合することによってデータ格納領域を一つ以上生成し、前記データ格納領域に配置されたキーバリュー型データを管理するキーバリュー型データ管理部と、
前記ファイルを分割して、検索キーと前記レコードの内容を示すバリューとを対応づけることによって前記キーバリュー型データを生成し、前記生成されたキーバリュー型データを前記データ格納領域に分散して格納するローダと、を有し、
前記キーバリュー型データ毎に、前記検索キー、前記バリューのサイズ、及び前記キーバリュー型データに対応する前記レコードのファイルにおける位置が対応付けられたキーバリュー型データ構造情報と、前記データ格納領域の識別情報を含む前記データ格納領域に格納される前記キーバリュー型データを管理するためのキーバリュー型データ管理情報と、を保持し、
前記キーバリュー型データ管理部は、
前記キーバリュー型データの更新要求を受け付けた場合、前記データ格納領域を構成する前記記憶領域に格納される前記キーバリュー型データを更新し、
前記更新されたキーバリュー型データのリストであるダーティリストが生成されているか否かを判定し、
前記ダーティリストが生成されていると判定された場合、新たに更新されたキーバリュー型データを前記ダーティリストに追加し、
前記ダーティリストが生成されていないと判定された場合、前記ダーティリストを生成して、前記生成されたダーティリストへのポインタを前記キーバリュー型データ管理情報に設定し、
前記ローダは、更新された前記キーバリュー型データの前記ファイルへの反映を指示する永続化指示を受け付けた場合、前記複数の計算機の各々の前記キーバリュー型データ管理部に、前記更新されたキーバリュー型データを取得するための要求であって、処理対象のデータ格納領域の識別情報を含む読出要求を送信し、
前記キーバリュー型データ管理部は、
前記読出要求を受信した場合、前記読出要求に含まれる前記データ格納領域の識別情報に一致する前記キーバリュー型データ管理情報を検索し、
前記検索されたキーバリュー型データ管理情報の前記ダーティリストへのポインタに基づいて前記ダーティリストを参照して、前記処理対象のデータ格納領域に格納される前記キーバリュー型データの中から前記更新されたキーバリュー型データを取得し、
前記読出要求を送信した前記ローダに前記更新されたキーバリュー型データを送信し、
前記ローダは、
前記複数の計算機の各々のキーバリュー型データ管理部から取得された前記更新されたキーバリュー型データに基づいて、前記更新されたキーバリュー型データを反映させる処理対象のファイルを特定し、
前記処理対象のファイルを格納する前記ストレージ装置と接続する前記計算機を特定し、
前記特定された計算機に、前記更新されたキーバリュー型データを含むファイルの更新要求を送信し、
前記ファイルシステムは、
前記ファイルの更新要求を受信した場合、前記キーバリュー型データ構造情報に基づいて、前記更新されたキーバリュー型データに対応する前記レコードの前記ファイルにおける位置を特定し、
前記特定されたファイルの位置に、前記更新されたキーバリュー型データを書き込むことによって前記ファイルを更新することを特徴とする計算機システム。 - 請求項1に記載の計算機システムであって、
少なくとも一つの計算機は、前記ファイルの構成を管理するためのファイル管理情報を保持し、
前記ファイル管理情報は、前記ファイルの識別情報及び前記ファイルを格納するストレージ装置の情報を含み、
前記複数の計算機の各々は、前記データ格納領域の識別情報と、前記データ格納領域に格納される前記キーバリュー型データの元データである前記ファイルの識別情報とを対応付けたファイル配置情報を保持し、
前記永続化指示には処理対象のデータ格納領域の識別情報が含まれ、
前記ローダは、
前記更新されたキーバリュー型データを取得した後、前記ファイル管理情報を取得し、
前記永続化指示に含まれる前記処理対象のデータ格納領域の識別情報に対応する前記ファイル配置情報を参照して、前記処理対象のファイルを特定し、
前記処理対象のファイルに対応する前記ファイル管理情報を取得し、
前記処理対象のファイルに対応するファイル管理情報を参照して、前記処理対象のファイルを格納する前記ストレージ装置と接続する前記計算機を特定することを特徴とする計算機システム。 - 請求項2に記載の計算機システムであって、
前記少なくとも一つの計算機は、
前記ファイルにおけるレコードの構造を定義するレコード定義情報を保持し、
前記ファイル管理情報と前記レコード定義情報とを対応付けて管理し、
前記ローダは、
前記データ格納領域への新規ファイルの配置を指示するロード指示を受け付けた場合、前記ファイル管理情報及び前記レコード定義情報を取得し、
前記ファイル管理情報を参照して、前記新規ファイルを格納する前記ストレージ装置と接続される前記計算機から当該新規ファイルを取得し、
前記データ格納領域の識別情報と、前記新規ファイルの識別情報とを対応付けることによって前記ファイル配置情報を生成し、
前記新規ファイルに含まれる前記複数のレコードの各々から前記複数のキーバリュー型データを生成し、
前記レコード定義情報に基づいて、前記複数のレコードの各々の前記検索キー、前記バリューのサイズ、及び前記ファイルにおける前記レコードの位置を対応付けることによって、前記キーバリュー型データ構造情報を生成し、
前記複数のキーバリュー型データ管理部の各々に、前記複数の前記データ格納領域への前記複数のキーバリュー型データの配置要求を送信し、
前記複数の計算機に、前記ファイル配置情報及び前記キーバリュー型データ構造情報を送信することを特徴とする計算機システム。 - 請求項1に記載の計算機システムであって、
前記ストレージ装置に格納されるファイルは、一つのソースファイルが分割されたサブファイルであって、
少なくとも一つの計算機は、前記サブファイルの構成を管理するためのファイル管理情報を保持し、
前記ファイル管理情報は、前記サブファイルの識別情報及び前記サブファイルを格納するストレージ装置の識別情報を含み、
前記複数の計算機の各々は、前記データ格納領域の識別情報と、前記データ格納領域に格納される前記キーバリュー型データの元データである前記サブファイルの識別情報とを対応付けたファイル配置情報を保持し、
前記永続化指示には処理対象のデータ格納領域の識別情報が含まれ、
前記ローダは、
前記更新されたキーバリュー型データを取得した後、前記ファイル管理情報を取得し、
前記永続化指示に含まれる前記処理対象のデータ格納領域の識別情報に基づいて前記ファイル配置情報を参照して、前記処理対象のソースファイルを特定し、
前記処理対象のソースファイルに対応する前記ファイル管理情報を取得し、
前記処理対象のソースファイルに対応するファイル管理情報を参照して、前記処理対象のソースファイルに対応する前記サブファイルを格納する前記ストレージ装置と接続する前記計算機を特定することを特徴とする計算機システム。 - 請求項4に記載の計算機システムであって、
前記少なくとも一つの計算機は、
前記ファイルにおけるレコードの構造を定義するレコード定義情報を保持し、
前記ファイル管理情報と前記レコード定義情報とを対応付けて管理し、
前記ローダは、
前記データ格納領域への新規ソースファイルの配置を指示するロード指示を受け付けた場合、前記ファイル管理情報及び前記レコード定義情報を取得し、
前記ファイル管理情報に基づいて、前記新規ソースファイルが分割された前記複数のサブファイルを特定し、
前記複数のサブファイル毎に、前記サブファイルを格納する前記ストレージ装置と接続する前記計算機を特定し、
前記複数のサブファイル毎に、前記サブファイルに含まれる前記レコードを特定することによって、当該サブファイルを格納する前記ストレージ装置と接続する前記計算機が担当するレコードを決定し、
前記決定されたレコードの情報を含む前記サブファイルの配置を指示するロード指示を前記計算機に送信し、
前記ロード指示を受け付けた場合、前記ファイル管理情報及び前記レコード定義情報を取得し、
前記ファイル管理情報を参照して、前記ストレージ装置から前記決定されたレコードを含む前記サブファイルを取得し、
前記データ格納領域の識別情報と、前記サブファイルの識別情報とを対応付けることによって前記ファイル配置情報を生成し、
前記サブファイルに含まれる前記複数のレコードの各々から前記複数のキーバリュー型データを生成し、
前記レコード定義情報に基づいて、前記複数のレコードの各々の前記検索キー、前記バリューのサイズ、及び前記ファイルにおける前記レコードの位置を対応付けることによって、前記キーバリュー型データ構造情報を生成し、
前記複数のキーバリュー型データ管理部の各々に、前記複数の前記データ格納領域への前記複数のキーバリュー型データの配置要求を送信し、
前記複数の計算機に、前記ファイル配置情報及び前記キーバリュー型データ構造情報を送信することを特徴とする計算機システム。 - ネットワークを介して接続される複数の計算機を有する計算機システムにおけるデータ管理方法であって、
前記複数の計算機の各々は、
プロセッサ、前記プロセッサに接続されるメモリ及び前記プロセッサに接続されるネットワークインタフェースを有し、
複数のレコードを含むファイルを一以上格納するストレージ装置と接続し、
前記ストレージ装置に格納される前記ファイルを管理するファイルシステムと、
前記複数の計算機が有する記憶領域を統合することによってデータ格納領域を一つ以上生成し、前記データ格納領域に配置されたキーバリュー型データを管理するキーバリュー型データ管理部と、
前記ファイルを分割して、検索キーと前記レコードの内容を示すバリューとを対応づけることによって前記キーバリュー型データを生成し、前記生成されたキーバリュー型データを前記データ格納領域に分散して格納するローダと、を有し、
前記キーバリュー型データ毎に、前記検索キー、前記バリューのサイズ、及び前記キーバリュー型データに対応する前記レコードのファイルにおける位置が対応付けられたキーバリュー型データ構造情報と、前記データ格納領域の識別情報を含む前記データ格納領域に格納される前記キーバリュー型データを管理するためのキーバリュー型データ管理情報と、を保持し、
前記データ管理方法は、
前記キーバリュー型データ管理部が、前記キーバリュー型データの更新要求を受け付けた場合、前記データ格納領域を構成する前記記憶領域に格納される前記キーバリュー型データを更新する第1のステップと、
前記キーバリュー型データ管理部が、前記更新されたキーバリュー型データのリストであるダーティリストが生成されているか否かを判定する第2のステップと、
前記キーバリュー型データ管理部が、前記ダーティリストが生成されていると判定された場合、新たに更新されたキーバリュー型データを前記ダーティリストに追加する第3のステップと、
前記キーバリュー型データ管理部が、前記ダーティリストが生成されていないと判定された場合、前記ダーティリストを生成して、前記生成されたダーティリストへのポインタを前記キーバリュー型データ管理情報に設定する第4のステップと、
前記ローダが、更新された前記キーバリュー型データの前記ファイルへの反映を指示する永続化指示を受け付けた場合、前記複数の計算機の各々の前記キーバリュー型データ管理部に、前記更新されたキーバリュー型データを取得するための要求であって、処理対象のデータ格納領域の識別情報を含む読出要求を送信する第5のステップと、
前記キーバリュー型データ管理部が、前記読出要求を受信した場合、前記データ格納領域を構成する前記記憶領域に格納される前記キーバリュー型データの中から前記更新されたキーバリュー型データを検索する第6のステップと、
前記キーバリュー型データ管理部が、前記読出要求を送信した前記ローダに前記更新されたキーバリュー型データを送信する第7のステップと、
前記ローダが、前記複数の計算機の各々のキーバリュー型データ管理部から取得された前記更新されたキーバリュー型データに基づいて、前記更新されたキーバリュー型データを反映させる処理対象のファイルを特定して、前記処理対象のファイルを格納する前記ストレージ装置と接続する前記計算機を特定する第8のステップと、
前記ローダが、前記特定された計算機に、前記更新されたキーバリュー型データを含むファイルの更新要求を送信する第9のステップと、
前記ファイルシステムが、前記ファイルの更新要求を受信した場合、前記キーバリュー型データ構造情報に基づいて、前記更新されたキーバリュー型データに対応する前記レコードの前記ファイルにおける位置を特定する第10のステップと、
前記ファイルシステムが、前記特定されたファイルの位置に、前記更新されたキーバリュー型データを書き込むことによって前記ファイルを更新する第11のステップと、を含み、
前記第6のステップは、
前記読出要求に含まれる前記データ格納領域の識別情報に一致する前記キーバリュー型データ管理情報を検索するステップと、
前記検索されたキーバリュー型データ管理情報の前記ダーティリストへのポインタに基づいて前記ダーティリストを参照して、前記処理対象のデータ格納領域に格納される前記キーバリュー型データの中から前記更新されたキーバリュー型データを取得するステップと、を含むことを特徴とするデータ管理方法。 - 請求項6に記載のデータ管理方法であって、
少なくとも一つの計算機は、前記ファイルの構成を管理するためのファイル管理情報を保持し、
前記ファイル管理情報は、前記ファイルの識別情報及び前記ファイルを格納するストレージ装置の情報を含み、
前記複数の計算機の各々は、前記データ格納領域の識別情報と、前記データ格納領域に格納される前記キーバリュー型データの元データである前記ファイルの識別情報とを対応付けたファイル配置情報を保持し、
前記永続化指示には処理対象のデータ格納領域の識別情報が含まれ、
前記第8のステップは、
前記ファイル管理情報を取得するステップと、
前記永続化指示に含まれる前記処理対象のデータ格納領域の識別情報に対応する前記ファイル配置情報を参照して、前記処理対象のファイルを特定するステップと、
前記処理対象のファイルに対応する前記ファイル管理情報を取得するステップと、
前記処理対象のファイルに対応するファイル管理情報を参照して、前記処理対象のファイルを格納する前記ストレージ装置と接続する前記計算機を特定するステップと、を含むことを特徴とするデータ管理方法。 - 請求項7に記載のデータ管理方法であって、
前記少なくとも一つの計算機は、
前記ファイルにおけるレコードの構造を定義するレコード定義情報を保持し、
前記ファイル管理情報と前記レコード定義情報とを対応付けて管理し、
前記データ管理方法は、
前記ローダが、前記データ格納領域への新規ファイルの配置を指示するロード指示を受け付けた場合、前記ファイル管理情報及び前記レコード定義情報を取得するステップと、
前記ローダが、前記ファイル管理情報を参照して、前記新規ファイルを格納する前記ストレージ装置と接続される前記計算機から当該新規ファイルを取得するステップと、
前記ローダが、前記データ格納領域の識別情報と、前記新規ファイルの識別情報とを対応付けることによって前記ファイル配置情報を生成するステップと、
前記ローダが、前記新規ファイルに含まれる前記複数のレコードの各々から前記複数のキーバリュー型データを生成するステップと、
前記ローダが、前記レコード定義情報に基づいて、前記複数のレコードの各々の前記検索キー、前記バリューのサイズ、及び前記ファイルにおける前記レコードの位置を対応付けることによって、前記キーバリュー型データ構造情報を生成するステップと、
前記ローダが、前記複数のキーバリュー型データ管理部の各々に、前記複数の前記データ格納領域への前記複数のキーバリュー型データの配置要求を送信するステップと、
前記ローダが、前記複数の計算機に、前記ファイル配置情報及び前記キーバリュー型データ構造情報を送信するステップと、を含むことを特徴とするデータ管理方法。 - 請求項6に記載のデータ管理方法であって、
前記ストレージ装置に格納されるファイルは、一つのソースファイルが分割されたサブファイルであって、
少なくとも一つの計算機は、前記サブファイルの構成を管理するためのファイル管理情報を保持し、
前記ファイル管理情報は、前記サブファイルの識別情報及び前記サブファイルを格納するストレージ装置の識別情報を含み、
前記複数の計算機の各々は、前記データ格納領域の識別情報と、前記データ格納領域に格納される前記キーバリュー型データの元データである前記サブファイルの識別情報とを対応付けたファイル配置情報を保持し、
前記永続化指示には処理対象のデータ格納領域の識別情報が含まれ、
前記第8のステップは、
前記更新されたキーバリュー型データを取得した後、前記ファイル管理情報を取得するステップと、
前記永続化指示に含まれる前記処理対象のデータ格納領域の識別情報に基づいて前記ファイル配置情報を参照して、前記処理対象のソースファイルを特定するステップと、
前記処理対象のソースファイルに対応する前記ファイル管理情報を取得するステップと、
前記処理対象のソースファイルに対応するファイル管理情報を参照して、前記処理対象のソースファイルに対応する前記サブファイルを格納する前記ストレージ装置と接続する前記計算機を特定するステップと、を含むことを特徴とするデータ管理方法。 - 請求項9に記載のデータ管理方法であって、
前記少なくとも一つの計算機は、
前記ファイルにおけるレコードの構造を定義するレコード定義情報を保持し、
前記ファイル管理情報と前記レコード定義情報とを対応付けて管理し、
前記データ管理方法は、
前記ローダが、前記データ格納領域への新規ソースファイルの配置を指示するロード指示を受け付けた場合、前記ファイル管理情報及び前記レコード定義情報を取得するステップと、
前記ローダが、前記ファイル管理情報に基づいて、前記新規ソースファイルが分割された前記複数のサブファイルを特定するステップと、
前記ローダが、前記複数のサブファイル毎に、前記サブファイルを格納する前記ストレージ装置と接続する前記計算機を特定するステップと、
前記ローダが、前記複数のサブファイル毎に、前記サブファイルに含まれる前記レコードを特定することによって、当該サブファイルを格納する前記ストレージ装置と接続する前記計算機が担当するレコードを決定するステップと、
前記ローダが、前記決定されたレコードの情報を含む前記サブファイルの配置を指示するロード指示を前記計算機に送信するステップと、
前記ローダが、前記ロード指示を受け付けた場合、前記ファイル管理情報及び前記レコード定義情報を取得するステップと、
前記ローダが、前記ファイル管理情報を参照して、前記ストレージ装置から前記決定されたレコードを含む前記サブファイルを取得するステップと、
前記ローダが、前記データ格納領域の識別情報と、前記サブファイルの識別情報とを対応付けることによって前記ファイル配置情報を生成するステップと、
前記ローダが、前記サブファイルに含まれる前記複数のレコードの各々から前記複数のキーバリュー型データを生成するステップと、
前記ローダが、前記レコード定義情報に基づいて、前記複数のレコードの各々の前記検索キー、前記バリューのサイズ、及び前記ファイルにおける前記レコードの位置を対応付けることによって、前記キーバリュー型データ構造情報を生成するステップと、
前記ローダが、前記複数のキーバリュー型データ管理部の各々に、前記複数の前記データ格納領域への前記複数のキーバリュー型データの配置要求を送信するステップと、
前記ローダが、前記複数の計算機に、前記ファイル配置情報及び前記キーバリュー型データ構造情報を送信するステップと、を含むことを特徴とするデータ管理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2013/084631 WO2015097774A1 (ja) | 2013-12-25 | 2013-12-25 | 計算機システム及びデータ管理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6034512B2 true JP6034512B2 (ja) | 2016-11-30 |
JPWO2015097774A1 JPWO2015097774A1 (ja) | 2017-03-23 |
Family
ID=53477716
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015554353A Active JP6034512B2 (ja) | 2013-12-25 | 2013-12-25 | 計算機システム及びデータ管理方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9934248B2 (ja) |
JP (1) | JP6034512B2 (ja) |
WO (1) | WO2015097774A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016138657A1 (en) * | 2015-03-05 | 2016-09-09 | Intel Corporation | Techniques for storing or accessing key-value item |
US10061629B2 (en) * | 2015-07-22 | 2018-08-28 | Optumsoft, Inc. | Compact binary event log generation |
US10742491B2 (en) | 2017-07-20 | 2020-08-11 | Vmware, Inc. | Reducing initial network launch time of container applications |
US9934287B1 (en) | 2017-07-25 | 2018-04-03 | Capital One Services, Llc | Systems and methods for expedited large file processing |
US11030218B2 (en) | 2017-08-10 | 2021-06-08 | Hitachi, Ltd. | Computer system and data processing method |
US10922096B2 (en) * | 2018-02-28 | 2021-02-16 | Vmware, Inc. | Reducing subsequent network launch time of container applications |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010198258A (ja) * | 2009-02-25 | 2010-09-09 | Nippon Telegr & Teleph Corp <Ntt> | キャッシュメンテナンス装置、その方法及びそのプログラム |
WO2010114006A1 (ja) * | 2009-03-31 | 2010-10-07 | 日本電気株式会社 | ストレージシステムとストレージアクセス方法とプログラム |
WO2012114531A1 (ja) * | 2011-02-23 | 2012-08-30 | 株式会社日立製作所 | 計算機システム及びデータ管理方法 |
JP2013004067A (ja) * | 2011-06-22 | 2013-01-07 | Nippon Telegr & Teleph Corp <Ntt> | ストレージシステム、ストレージ制御方法、プログラム |
JP2013088920A (ja) * | 2011-10-14 | 2013-05-13 | Hitachi Ltd | 計算機システム及びデータ管理方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5439236B2 (ja) | 2010-03-12 | 2014-03-12 | 株式会社日立製作所 | 計算機システムおよびアプリケーションプログラムの実行方法 |
US9838242B2 (en) * | 2011-04-13 | 2017-12-05 | Jetflow Technologies | Flowlet-based processing with key/value store checkpointing |
US8676951B2 (en) * | 2011-07-27 | 2014-03-18 | Hitachi, Ltd. | Traffic reduction method for distributed key-value store |
JP5762878B2 (ja) * | 2011-08-08 | 2015-08-12 | 株式会社東芝 | key−valueストアを有するメモリシステム |
JP5524144B2 (ja) * | 2011-08-08 | 2014-06-18 | 株式会社東芝 | key−valueストア方式を有するメモリシステム |
US20130332608A1 (en) * | 2012-06-06 | 2013-12-12 | Hitachi, Ltd. | Load balancing for distributed key-value store |
JP6025149B2 (ja) * | 2013-11-06 | 2016-11-16 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | データを管理するシステムおよび方法 |
US9323457B2 (en) * | 2013-12-09 | 2016-04-26 | Xilinx, Inc. | Memory arrangement for implementation of high-throughput key-value stores |
-
2013
- 2013-12-25 US US14/770,659 patent/US9934248B2/en active Active
- 2013-12-25 WO PCT/JP2013/084631 patent/WO2015097774A1/ja active Application Filing
- 2013-12-25 JP JP2015554353A patent/JP6034512B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010198258A (ja) * | 2009-02-25 | 2010-09-09 | Nippon Telegr & Teleph Corp <Ntt> | キャッシュメンテナンス装置、その方法及びそのプログラム |
WO2010114006A1 (ja) * | 2009-03-31 | 2010-10-07 | 日本電気株式会社 | ストレージシステムとストレージアクセス方法とプログラム |
US20120036317A1 (en) * | 2009-03-31 | 2012-02-09 | Takashi Torii | Storage system and storage access method and program |
WO2012114531A1 (ja) * | 2011-02-23 | 2012-08-30 | 株式会社日立製作所 | 計算機システム及びデータ管理方法 |
JP2013004067A (ja) * | 2011-06-22 | 2013-01-07 | Nippon Telegr & Teleph Corp <Ntt> | ストレージシステム、ストレージ制御方法、プログラム |
JP2013088920A (ja) * | 2011-10-14 | 2013-05-13 | Hitachi Ltd | 計算機システム及びデータ管理方法 |
Also Published As
Publication number | Publication date |
---|---|
US9934248B2 (en) | 2018-04-03 |
WO2015097774A1 (ja) | 2015-07-02 |
US20160012075A1 (en) | 2016-01-14 |
JPWO2015097774A1 (ja) | 2017-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6034512B2 (ja) | 計算機システム及びデータ管理方法 | |
US7765189B2 (en) | Data migration apparatus, method, and program for data stored in a distributed manner | |
US7849282B2 (en) | Filesystem building method | |
US10242050B2 (en) | Database caching in a database system | |
JP5775177B2 (ja) | クローンファイル作成方法と、それを用いたファイルシステム | |
CN110321301B (zh) | 一种数据处理的方法及装置 | |
JP5589205B2 (ja) | 計算機システム及びデータ管理方法 | |
CN103154948B (zh) | 可丢弃文件的基于卡的管理 | |
JP4568115B2 (ja) | ハードウェアベースのファイルシステムのための装置および方法 | |
CN110062925A (zh) | 用于云集成的快照元数据布置 | |
CN107180092B (zh) | 一种文件系统的控制方法、装置及终端 | |
US20120005307A1 (en) | Storage virtualization | |
US20110153606A1 (en) | Apparatus and method of managing metadata in asymmetric distributed file system | |
CN110119425A (zh) | 固态驱动器、分布式数据存储系统和利用键值存储的方法 | |
US20100036872A1 (en) | Data management method | |
US20160364407A1 (en) | Method and Device for Responding to Request, and Distributed File System | |
US10503693B1 (en) | Method and system for parallel file operation in distributed data storage system with mixed types of storage media | |
CN109684282A (zh) | 一种构建元数据缓存的方法及装置 | |
US20120005233A1 (en) | Computer system and recording medium | |
KR20080033264A (ko) | 공간을 비워두기 위해 저장 볼륨 상의 파일로부터 대안의장소로의 데이터 이동 | |
CN104516974A (zh) | 一种文件系统目录项的管理方法及装置 | |
JP2011191835A (ja) | 計算機システムおよびアプリケーションプログラムの実行方法 | |
CN113853778A (zh) | 一种文件系统的克隆方法及装置 | |
JP2015114913A (ja) | ストレージ装置、ストレージシステム及びデータ管理プログラム | |
US9483199B1 (en) | Data deduplication using multiple devices |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160914 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161011 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161027 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6034512 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |