JP2010182011A - Distributed file system, and distributed file management method - Google Patents
Distributed file system, and distributed file management method Download PDFInfo
- Publication number
- JP2010182011A JP2010182011A JP2009023751A JP2009023751A JP2010182011A JP 2010182011 A JP2010182011 A JP 2010182011A JP 2009023751 A JP2009023751 A JP 2009023751A JP 2009023751 A JP2009023751 A JP 2009023751A JP 2010182011 A JP2010182011 A JP 2010182011A
- Authority
- JP
- Japan
- Prior art keywords
- metadata
- file
- server
- object server
- response information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、分散型ファイルシステムおよび分散型ファイル管理方法に関する。 The present invention relates to a distributed file system and a distributed file management method.
分散型ファイルシステムでは、ファイルサービスを行うクライアントが、まずメタサーバにファイル管理用メタデータ（以下、これをメタデータという。）を要求する。そして、クライアントは、メタデータを取得して、そのメタデータに基づいて、ファイルサーバであるオブジェクトサーバに対して改めてデータの入出力要求を行う。このように、分散型ファイルシステムでは、クライアントは、２段階の取得処理を行うことによって、データを取得していた。 In the distributed file system, a client that performs a file service first requests file management metadata (hereinafter referred to as metadata) from a meta server. Then, the client acquires the metadata and makes a data input / output request to the object server, which is a file server, based on the metadata. As described above, in the distributed file system, the client acquires data by performing two-stage acquisition processing.
そして、このような構成を採用することより、分散型ファイルシステムは、オブジェクトサーバの追加などが容易となり、拡張性の高いストレージサービスを提供することができる。 By adopting such a configuration, the distributed file system can easily add an object server, and can provide a highly scalable storage service.
一方、クライアントとメタサーバとの間において、メタデータの送受信が必要となるため、上述した分散型ファイルシステムでは、通常のファイル入出力動作に対して、余計なプロトコルオーバーヘッドが発生していた。また、このようなプロトコルオーバーヘッドの発生を避けるため、メタデータを一時的にキャッシュするなどして、性能改善を行うなどの対策が必要となっていた。 On the other hand, since it is necessary to transmit and receive metadata between the client and the meta server, the above-described distributed file system has an extra protocol overhead for a normal file input / output operation. In addition, in order to avoid the occurrence of such protocol overhead, it is necessary to take measures such as temporarily caching metadata to improve performance.
また、メタデータのキャッシュにおいては、ファイルの属性情報などに基づいて、メタデータキャッシュを管理するなどの対策が必要となり、メタサーバの管理が複雑化し、メタサーバの処理負荷が増大を招いていた。 Further, in the metadata cache, measures such as management of the metadata cache are required based on file attribute information and the like, which complicates the management of the metaserver and increases the processing load of the metaserver.
例えば、特許文献１には、分散型のファイルシステムにおいて、メタデータサーバマシン（メタサーバ）に対して、メタデータを要求後にデータサーバマシン（オブジェクトサーバ）にデータを要求するデータ処理システムの記載がある。また、そのメタデータのアクセスのオーバーヘッドを軽減するために、メタデータキャッシュ機構をクライアントマシンに導入し、メタデータキャッシュのヒット率を向上することで、性能を向上させる旨の記載がある。また、その際に、メタデータの属性が類似しているメタデータを検索してキャッシュヒット率の向上を図る方式の記載がある。
For example,
図１３は、特許文献１に記載されたデータ処理システムの構成図を示した図である。図１３に示したデータ処理システムでは、メタデータキャッシュの効率を向上するために、メタデータサーバ、すなわちファイルサーバ側でメタデータを検索し、クライアント側にキャッシュする構成が開示されている。
ところで、第一の課題として、一般的な分散型ファイルシステムでは、クライアントの要求に対する応答性が悪かった。なぜなら、一般的な分散型ファイルシステムでは、クライアントがメタサーバに対してファイルの構成情報を示したメタデータを問い合わせた後、実際のデータを保持しているオブジェクトサーバに、データを要求する手順をとる必要があった。そのため、メタデータを送受信する必要があり、送受信プロトコルのオーバーヘッドが発生し、クライアントを介しての入出力要求の応答性が悪くなる、という課題があった。 By the way, as a first problem, a general distributed file system has poor response to a client request. This is because, in a general distributed file system, after a client inquires metadata that indicates file configuration information to a meta server, a procedure is performed to request data from an object server holding actual data. There was a need. For this reason, it is necessary to transmit / receive metadata, which causes overhead of a transmission / reception protocol, resulting in poor responsiveness of input / output requests via a client.
また、第二の課題として、分散型ファイルシステムの応答性を改善するためには、メタサーバの処理負荷が増大して処理能力が低下する可能性があった。例えば、一般的な分散型ファイルシステムでは、メタサーバにおいて各種のファイル管理データを管理している。そこで、メタデータキャッシュを導入することによって応答性の改善を図る場合には、メタデータに対するアクセスを予め予測して、メタデータを読み出すなどの対策を行う必要が生じるため、メタサーバの負荷が増大する結果となっていた。したがって、メタサーバの処理内容を複雑化せずに、ファイル入出力処理の応答性を改善する、ということが課題であった。 As a second problem, in order to improve the responsiveness of the distributed file system, there is a possibility that the processing load of the meta server increases and the processing capacity decreases. For example, in a general distributed file system, various file management data are managed in a meta server. Therefore, when improving responsiveness by introducing a metadata cache, it is necessary to take measures such as predicting access to the metadata in advance and reading out the metadata, which increases the load on the metadata server. It was a result. Therefore, there has been a problem of improving the responsiveness of the file input / output processing without complicating the processing contents of the metaserver.
本発明は上記事情に鑑みてなされたものであり、その目的とするところは、分散型ファイルシステムのファイル入出力における応答性を改善し、スムーズな応答を行うことにより、快適なファイル提供環境を生成する分散型ファイルシステムおよび分散型ファイル管理方法を提供することにある。 The present invention has been made in view of the above circumstances, and the object of the present invention is to improve the responsiveness in file input / output of a distributed file system and to provide a smooth file response, thereby providing a comfortable file providing environment. A distributed file system to be generated and a distributed file management method are provided.
本発明によれば、ファイルを記憶するオブジェクトサーバと、前記ファイルに対応づけられたメタデータを格納するメタサーバと、前記オブジェクトサーバに対して前記ファイルの入出力を行うクライアントと、を備える分散型ファイルシステムであって、
前記クライアントは、
前記メタサーバに対し、前記ファイルの所在情報を示すメタデータの要求を送信するメタデータ要求送信手段と、
前記メタサーバから前記要求に応じて送信されたメタデータを、第１のレスポンス情報として受信する第１のメタデータ受信手段と、
前記第１のメタデータ受信手段によって受信されたメタデータが示す所在情報に対応するファイルを記憶する前記オブジェクトサーバに対し、当該ファイルの入出力を行うファイル入出力手段と、を備え、
前記メタサーバは、
前記メタデータ要求送信手段によって送信された前記要求を受信するメタデータ要求受信手段と、
前記メタデータ要求受信手段によって受信された前記要求に基づいて、当該メタデータを前記第１のレスポンス情報として前記クライアントに送信する第１のメタデータ送信手段と、
前記メタデータ要求受信手段によって受信された前記要求に基づいて、当該メタデータに対応づけられたファイルが記憶されている前記オブジェクトサーバに、当該メタデータを第２のレスポンス情報として送信する第２のメタデータ送信手段と、を備え、
前記オブジェクトサーバは、
前記第２のメタデータ送信手段によって送信された前記第２のレスポンス情報を受信する第２のメタデータ受信手段と、
前記第２のメタデータ受信手段によって受信された前記第２のレスポンス情報に基づいて、当該メタデータに対応づけられたファイルに対して予備動作を実行する予備動作手段と、
を備えることを特徴とする分散型ファイルシステムが提供される。
According to the present invention, a distributed file comprising: an object server that stores a file; a meta server that stores metadata associated with the file; and a client that inputs / outputs the file to / from the object server. A system,
The client
Metadata request transmission means for transmitting a request for metadata indicating the location information of the file to the metadata server;
First metadata receiving means for receiving metadata transmitted in response to the request from the meta server as first response information;
File input / output means for inputting / outputting the file to / from the object server storing the file corresponding to the location information indicated by the metadata received by the first metadata receiving means;
The metaserver is
Metadata request receiving means for receiving the request transmitted by the metadata request transmitting means;
First metadata transmission means for transmitting the metadata as the first response information to the client based on the request received by the metadata request reception means;
Based on the request received by the metadata request receiving means, a second response information is transmitted as second response information to the object server storing a file associated with the metadata. Metadata transmission means,
The object server
Second metadata receiving means for receiving the second response information transmitted by the second metadata transmitting means;
Preliminary operation means for performing a preliminary operation on a file associated with the metadata based on the second response information received by the second metadata reception means;
A distributed file system is provided.
本発明によれば、ファイルを記憶するオブジェクトサーバと、前記ファイルに対応づけられたメタデータを格納するメタサーバと、前記オブジェクトサーバに対して前記ファイルの入出力を行うクライアントと、を備える分散型ファイル管理方法であって、
前記クライアントが、前記メタサーバに対し、前記ファイルの所在情報を示すメタデータの要求を送信するメタデータ要求送信ステップと、
前記メタサーバが、前記メタデータ要求送信ステップで送信された前記要求を受信するメタデータ要求受信ステップと、
前記メタサーバが、前記メタデータ要求受信ステップで受信された前記要求に基づいて、当該メタデータを第１のレスポンス情報として前記クライアントに送信する第１のメタデータ送信ステップと、
前記メタサーバが、前記メタデータ要求受信ステップで受信された前記要求に基づいて、当該メタデータに対応づけられたファイルが記憶されている前記オブジェクトサーバに、当該メタデータを第２のレスポンス情報として送信する第２のメタデータ送信ステップと、
前記クライアントが、前記第１のメタデータ送信ステップで送信された前記第１のレスポンス情報を受信する第１のメタデータ受信ステップと、
前記オブジェクトサーバが、前記第２のメタデータ送信ステップで送信された前記第２のレスポンス情報を受信する第２のメタデータ受信ステップと、
前記オブジェクトサーバが、前記第２のメタデータ受信ステップで受信された前記第２のレスポンス情報に基づいて、当該メタデータに対応づけられたファイルに対して予備動作を実行する予備動作ステップと、
前記クライアントが、前記第１のメタデータ受信ステップで受信されたメタデータが示す所在情報に対応するファイルを記憶する前記オブジェクトサーバに対し、当該ファイルの入出力を行うファイル入出力ステップと、
を含むことを特徴とする分散型ファイル管理方法が提供される。
According to the present invention, a distributed file comprising: an object server that stores a file; a meta server that stores metadata associated with the file; and a client that inputs / outputs the file to / from the object server. A management method,
A metadata request sending step in which the client sends a metadata request indicating the location information of the file to the metadata server;
A metadata request receiving step in which the metadata server receives the request transmitted in the metadata request transmitting step;
A first metadata transmission step in which the metadata server transmits the metadata to the client as first response information based on the request received in the metadata request reception step;
Based on the request received in the metadata request reception step, the metadata server transmits the metadata as second response information to the object server in which a file associated with the metadata is stored. A second metadata transmission step,
A first metadata reception step in which the client receives the first response information transmitted in the first metadata transmission step;
A second metadata receiving step in which the object server receives the second response information transmitted in the second metadata transmitting step;
A preliminary operation step in which the object server performs a preliminary operation on a file associated with the metadata based on the second response information received in the second metadata reception step;
A file input / output step in which the client inputs / outputs the file to / from the object server storing the file corresponding to the location information indicated by the metadata received in the first metadata reception step;
A distributed file management method is provided.
本発明によれば、分散型ファイルシステムのファイル入出力における応答性を改善して、スムーズな応答を行うことにより、快適なファイル提供環境を生成する分散型ファイルシステムおよび分散型ファイル管理方法が提供される。 According to the present invention, a distributed file system and a distributed file management method for generating a comfortable file providing environment by improving the responsiveness in file input / output of the distributed file system and performing a smooth response are provided. Is done.
（第１の実施の形態）
以下、本発明の実施の形態について、図面を用いて詳細に説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。
(First embodiment)
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In all the drawings, the same reference numerals are given to the same components, and the description will be omitted as appropriate.
図１は、第1の実施の形態に係る分散型ファイルシステムの構成図を示した図である。図１に示す分散型ファイルシステムは、ファイルを記憶するオブジェクトサーバと、ファイルに対応づけられたメタデータを格納するメタサーバと、オブジェクトサーバに対してファイルの入出力を行うクライアントと、を備える分散型ファイルシステムである。 FIG. 1 is a diagram showing the configuration of the distributed file system according to the first embodiment. The distributed file system shown in FIG. 1 includes a distributed server that includes an object server that stores a file, a meta server that stores metadata associated with the file, and a client that inputs and outputs files to the object server. It is a file system.
クライアント１０１は、メタサーバ１０２に対し、ファイルの所在情報を示すメタデータの要求を送信するメタデータ要求送信部１１５と、メタサーバ１０２から要求に応じて送信されたメタデータを、第１のレスポンス情報として受信する第１のメタデータ受信部１１６と、第１のメタデータ受信部１１６によって受信されたメタデータが示す所在情報に対応するファイルを記憶するオブジェクトサーバ１０３に対し、当該ファイルの入出力を行うファイル制御部（ファイル入出力手段）１１１と、を備えている。
The
そして、メタデータ要求送信部１１５と、第１のメタデータ受信部１１６は、ネットワークＩ／Ｆ１１４に設けられている。従って、ネットワークＩ／Ｆ１１４は、メタデータ要求送信部１１５の有する機能と、第１のメタデータ受信部１１６の有する機能を持ち合わせている。
The metadata
メタサーバ１０２は、メタデータ要求送信部１１５によって送信された要求を受信するメタデータ要求受信部１２５と、メタデータ要求受信部１２５によって受信された要求に基づいて、当該メタデータを第１のレスポンス情報としてクライアントに送信する第１のメタデータ送信部１２６と、メタデータ要求受信部１２５によって受信された要求に基づいて、当該メタデータに対応づけられたファイルが記憶されているオブジェクトサーバ１０３に、当該メタデータを第２のレスポンス情報として送信する第２のメタデータ送信部１２７と、を備えている。
The
そして、メタデータ要求受信部１２５と、第１のメタデータ送信部１２６と、第２のメタデータ送信部１２７は、ネットワークＩ／Ｆ１２４に設けられている。従って、ネットワークＩ／Ｆ１２４は、メタデータ要求受信部１２５の有する機能と、第１のメタデータ送信部１２６の有する機能と、第２のメタデータ送信部１２７の有する機能を持ち合わせている。
The metadata
オブジェクトサーバ１０３は、第２のメタデータ送信部１２７によって送信された第２のレスポンス情報を受信する第２のメタデータ受信部１３６と、第２のメタデータ受信部１３６によって受信された第２のレスポンス情報に基づいて、当該メタデータに対応づけられたファイルに対して予備動作を開始する入出力制御部（予備動作手段）１３２と、を備えている。
The
そして、第２のメタデータ受信部１３６は、ネットワークＩ／Ｆ１３４に設けられている。従って、ネットワークＩ／Ｆ１３４は、第２のメタデータ受信部１３６の機能を持ち合わせている。
The second
本実施の形態では、ファイルとは、オブジェクトで構成されていることとする。そして、オブジェクトサーバ１０３は、ファイルもしくはファイルを構成するオブジェクトを保持している。クライアント１０１は、クライアント１０１内に格納されているアプリケーションを実行することによって、オブジェクトサーバ１０３に格納されているファイルまたはオブジェクトの入出力動作を行う。また、メタサーバ１０２は、オブジェクトサーバ１０３が保持しているファイルやオブジェクトを管理する。
In the present embodiment, it is assumed that a file is composed of objects. The
ここで、メタデータとは、ファイルやオブジェクトに関する情報であり、例えば、ファイルやオブジェクトが格納されている所在を示す所在情報である。また、メタデータの要求とは、クライアント１０１が、メタサーバ１０２に対して、オブジェクトサーバ１０３に保持されているファイルやオブジェクトの所在情報を要求することをいう。また、第１のレスポンス情報とは、メタデータの要求に対して、メタサーバ１０２からクライアント１０１に送信されるメタデータのことである。また、第２のレスポンス情報とは、メタサーバ１０２において受信されたメタデータの要求に対して、メタサーバ１０２からオブジェクトサーバ１０３に送信されるメタデータのことである。
Here, the metadata is information regarding a file or object, for example, location information indicating a location where the file or object is stored. The request for metadata means that the
また、予備動作とは、メタデータに対応づけられたファイルに対して、クライアント１０１から入出力の要求が来る前に、オブジェクトサーバ１０３が、そのファイルの入出力に対して所定の動作を開始することをいう。この所定の動作には、例えば、データやファイルの入出力動作または先読み動作などが該当する。
Further, the preliminary operation refers to the
具体的には、データやファイルの入出力動作は、メタサーバ１０２から送信された第２のレスポンス情報に基づいて、所定のデータ（ファイル）の入出力動作を予め開始することである。この場合、例えば、出力されるべきデータやファイルを検索したり、出力されるべきデータのアドレス値の設定などが該当する。また、先読み動作は、出力されるべきデータに関連づけられたファイルやデータの事前読み出しや、スクリプトファイルの設定などが該当する。
Specifically, the data / file input / output operation is to start the input / output operation of predetermined data (file) in advance based on the second response information transmitted from the
また、入力動作に関しては、書き込むべき領域の確保や関連するデータの検索などが該当する。このように、オブジェクトサーバ１０３は、第２のレスポンス情報に基づいて、クライアント１０１から要求される動作について、予め開始することができる。
In addition, as for the input operation, securing of an area to be written, retrieval of related data, and the like are applicable. As described above, the
本実施の形態では、以上の構成を備えることにより、分散型ファイルシステム全体として、以下のように動作する。 In the present embodiment, with the above configuration, the entire distributed file system operates as follows.
まず、クライアント１０１は、メタサーバ１０２にファイルの所在場所を問合せる。ここで、メタサーバ１０２は、ファイル及びその一部を構成するオブジェクトの所在を管理しているメタデータをデータベース（記憶装置）として保持している。そのため、メタサーバ１０２は、データベースを検索し、問合せのあったファイルのメタデータ（第１のレスポンス情報）をクライアント１０１に送信する。
First, the
また、メタサーバ１０２は、メタデータバスＭＢを介して、メタデータ情報（第２のレスポンス情報）を、オブジェクトサーバ１０３に送信する。そして、オブジェクトサーバ１０３は、受信したメタデータ情報（第２のレスポンス情報）に基づいて、予備動作を開始する。クライアント１０１は、受け取ったメタデータ（第１のレスポンス情報）に基づいて、ファイルを保持するオブジェクトサーバ１０３に、ファイルもしくはデータの入出力を要求する。そして、オブジェクトサーバ１０３は、クライアント１０１との間で、ファイルもしくはデータを送受信する。
Further, the
これにより、本実施の形態では、分散型ファイルシステムのファイルの入出力における応答性を改善し、スムーズな応答を行うことにより、快適なファイル提供環境を生成する分散型ファイルシステムを実現できる。 Thus, in this embodiment, it is possible to realize a distributed file system that generates a comfortable file providing environment by improving the responsiveness in file input / output of the distributed file system and performing a smooth response.
なお、本実施の形態では、メタデータバスＭＢとして、専用の通信経路を記載しているが、分散型ファイルシステムにおいては、コマンドデータのやり取りを行うチャネル、あるいはネットワークなどと同じ通信経路を使用しても実現できる。 In the present embodiment, a dedicated communication path is described as the metadata bus MB. However, in the distributed file system, the same communication path as a channel for exchanging command data or a network is used. Can be realized.
また、図１では、クライアント１０１とオブジェクトサーバ１０３は、それぞれ１台によって構成されているが、これは例示であって、複数台の構成においても同様に適用可能である。
In FIG. 1, the
次に、図１に示した分散型ファイルシステムの各構成について、詳細に説明する。 Next, each configuration of the distributed file system shown in FIG. 1 will be described in detail.
まず、クライアント１０１は、ネットワークＩ／Ｆ１１４と、ファイル制御部１１１と、ユーザーアプリケーション実行部１１０とを備えている。また、ネットワークＩ／Ｆ１１４は、メタデータ要求送信部１１５と、第１のメタデータ受信部１１６とを備えている。
First, the
クライアント１０１は、ユーザーアプリケーション実行部１１０が、オブジェクトサーバ１０３に記憶されているファイルの参照を行うためのプログラムを実行する。
In the
このとき行われるファイル参照要求は、プログラムが実行されることによって、ユーザーアプリケーション実行部１１０からファイル制御部１１１に送られる。また、ファイル参照要求は、ファイルの所在を特定した上で、該当するファイルを構成するオブジェクトが記憶されているオブジェクトサーバ１０３へネットワークＩ／Ｆ１１４経由で送られる。このように、クライアント１０１は、ファイルやオブジェクトのファイル参照要求を送付することにより、ファイルの入出力要求をオブジェクトサーバ１０３に送信することができる。
The file reference request made at this time is sent from the user
なお、ファイル制御部１１１において、ファイルの所在を特定できる情報を保持していないときは、ネットワークＩ／Ｆ１１４を経由して、ファイルの所在をメタサーバ１０２に問合せる。そして、クライアント１０１は、ファイルの所在情報を示すメタデータをメタサーバ１０２から取得する。そして、クライアント１０１は、取得したメタデータを元に、ファイルの入出力要求を送付する動作を行う。
If the
次に、メタサーバ１０２の構成について説明する。メタサーバ１０２は、ネットワークＩ／Ｆ１２４と、メタデータ管理部１２１と、入出力制御部１２２と、記憶装置１２３とを備えている。また、ネットワークＩ／Ｆ１２４は、メタデータ要求受信部１２５と、第１のメタデータ送信部１２６と、第２のメタデータ送信部１２７とを備えている。
Next, the configuration of the
メタサーバ１０２は、ネットワークＩ／Ｆ１２４を経由して受信したファイルの入出力要求に基づいて、メタデータ管理部１２１に、該当するファイルのメタデータの入出力処理を要求する。
Based on the file input / output request received via the network I /
記憶装置１２３は、ファイルやデータのメタデータを格納している。
The
メタデータ管理部１２１では、入出力要求に記述されたファイルＩＤ（identifier）で識別されるファイルのメタデータを、入出力制御部１２２経由で記憶装置１２３から読み出す。そして、メタデータ管理部１２１は、読み出した結果（すなわち第１のレスポンス情報である。）を、ネットワークＩ／Ｆ１２４経由でクライアント１０１に送信する。
The
ここで、メタデータの記憶装置１２３への格納方法は、通常のデータベース管理と同様に、ファイルＩＤをキーとしてメタデータを取得できる機構であれば良い。また、単純な表形式のデータとして保持する形態であっても構わない。
Here, the storage method of the metadata in the
次に、オブジェクトサーバ１０３の構成について説明する。オブジェクトサーバ１０３は、ネットワークＩ／Ｆ１３４と、データ管理部１３１と、入出力制御部１３２と、記憶装置１３３とを備えている。また、ネットワークＩ／Ｆ１３４は、第２のメタデータ受信部１３６を備えている。
Next, the configuration of the
オブジェクトサーバ１０３は、ネットワークＩ／Ｆ１３４経由で受信したオブジェクトの入出力要求に基づいて、データ管理部１３１に、該当するオブジェクトのデータ入出力処理を要求する。
Based on the object input / output request received via the network I /
データ管理部１３１は、オブジェクトのデータの読み出し動作の場合には、オブジェクトのデータを入出力制御部１３２経由で記憶装置１３３から読み出す。そして、データ管理部１３１は、読み出された結果を、ネットワークＩ／Ｆ１３４経由でクライアント１０１に送信する。
In the case of an object data read operation, the
一方、データ管理部１３１は、データの書き込みの場合には、ネットワークＩ／Ｆ１３４経由でクライアント１０１から書き込むデータを受信した後、入出力制御部１３２経由で記憶装置１３３に書き込みを行う。
On the other hand, in the case of data writing, the
ここで、オブジェクトのデータの読み出し動作の場合には、データ管理部１３１は、読み出すオブジェクトのデータを特定する。なお、本実施の形態では、キャッシュやバッファにそのデータをストアしてもよい。また、データを書き込む場合には、書き込み領域の確保を行う。また、読み出し動作および書き込み動作ともにメモリ上にリソースを確保する形態であってもよい。
Here, in the case of an object data read operation, the
また、記憶装置１３３へ書き込みを行う方法としては、ディスクの領域管理を行う分散型ファイルシステムでは、オブジェクトＩＤをファイル名として、データエリアをオブジェクトとして管理しても良い。また、オブジェクトは、固定長でも可変長でもよい。また、単に固定長のブロックで管理し、それぞれのインデックスをオブジェクトＩＤとして管理する形態であってもよい。
In addition, as a method for writing data to the
また、本実施の形態では、データの記憶装置１３３として、主に磁気ディスク装置を想定して記述しているが、これは特に限定されるものではなく、光ディスク、シリコンディスク、コントローラ上のメモリにより代用した記憶装置などであっても適用できる。
Further, in this embodiment, the
次に、第１の実施の形態におけるファイル入出力動作について、図面を用いて説明する。図２は、クライアント１０１のファイル制御部１１１における処理動作を示したフローチャートである。
Next, a file input / output operation in the first embodiment will be described with reference to the drawings. FIG. 2 is a flowchart showing processing operations in the
まず、クライアント１０１は、ユーザーアプリケーション実行部１１０によって、ユーザーアプリケーションが起動する。そして、ユーザーアプリケーション実行部１１０は、ユーザーアプリケーションを動作して、ファイルの入出力要求を発行すると、クライアントコマンド処理が起動される。そして、クライアント１０１は、要求のあったファイルの入出力要求をメタサーバ１０２に発行する（ステップＳ１０１）。
First, in the
この入出力要求は、例えば、図３に示すように、対象となるファイルを特定するファイルＩＤと、それに対する入出力要求のコマンド、アクセスする位置を与えるｏｆｆｓｅｔ、アクセスする長さを与えるｌｅｎｇｔｈなどから構成される。 For example, as shown in FIG. 3, the input / output request is based on a file ID for specifying a target file, an input / output request command for the file, an offset for giving an access position, and a length for giving an access length. Composed.
ここで、コマンド自体を特定するためのコマンドＩＤや、ハンドルＩＤ、入出力要求を行ったクライアントを識別するクライアントＩＤおよび要求先のメタサーバを識別するメタサーバＩＤなども格納しておく。これらのＩＤは、それぞれを一意に識別するための情報であるが、ハンドルＩＤは、ファイルを操作している間、操作対象のファイルを一意に特定するためのＩＤである。 Here, a command ID for specifying the command itself, a handle ID, a client ID for identifying a client that has made an input / output request, a meta server ID for identifying a meta server at a request destination, and the like are also stored. These IDs are information for uniquely identifying each, but the handle ID is an ID for uniquely identifying the operation target file while operating the file.
次に、クライアント１０１は、この入出力要求に対して、メタサーバ１０２からクライアント１０１への応答結果を取得する（ステップＳ１０２）。例えば、図４に示すように、入出力要求コマンドに含まれていた、コマンドＩＤ／ハンドルＩＤ、クライアントＩＤ、サーバＩＤなどに加え、レスポンス結果を格納する。
Next, the
これらの応答は、必要に応じて大きなデータを伴うため、パラメータとして、後述するようなメタデータを付加する以外に、別途別のブロックをパケットとして返すプロトコルを利用しても良い。 Since these responses are accompanied by a large amount of data as necessary, in addition to adding metadata as will be described later as a parameter, a protocol that returns another block as a packet may be used.
クライアント１０１は、メタサーバ１０２から送信された第１のレスポンスに基づいて、実際のコマンド処理を実行する。具体的には、データの入出力要求のように、メタデータに基づいた入出力処理の要否を判断する（ステップＳ１０３）。
The
そして、送信された第１のレスポンスがデータの入出力を伴わない場合には（ステップＳ１０３のＮｏ）、そのまま処理を終了する。 Then, if the transmitted first response does not involve data input / output (No in step S103), the processing ends.
一方、送信された第１のレスポンスが、データの入出力処理を伴う場合には（ステップＳ１０３のＹｅｓ）、オブジェクトサーバ１０３への入出力要求を発行する（ステップＳ１０４）。そして、クライアント１０１は、入出力要求に対する入出力結果がオブジェクトサーバ１０３から送信されるのを待ち受け、結果を取得し（ステップＳ１０５）、処理を終了する。以下、クライアントコマンド処理を繰り返すことになる。
On the other hand, if the transmitted first response involves data input / output processing (Yes in step S103), an input / output request to the
次に、メタサーバ１０２のメタデータ管理部１２１における処理動作について、フローチャートを用いて説明する。図５は、メタサーバ１０２のメタデータ管理部１２１における処理動作を示したフローチャートである。
Next, a processing operation in the
メタサーバ１０２は、クライアント１０１から、ネットワークＩ／Ｆ１２４を経由して、メタデータを要求するコマンドをメタデータ管理部１２１が受信すると（ステップＳ２０１）、メタサーバコマンド処理を起動する。そして、メタデータ管理部１２１は、そのコマンドに含まれる処理要求内容が、Ｏｐｅｎ，Ｃｌｏｓｅなどのファイル管理だけを目的としたコマンドであるか否かを判断する（ステップＳ２０２）。
When the
ここで、ファイル管理だけを目的としたコマンドの場合には（ステップＳ２０２のＹｅｓ）、メタサーバ１０２が保持しているメモリ上のオープン管理テーブルに、対象のファイルのメタデータを記憶装置１２３から読み込む。そして、その対象ファイルを展開し、もしくは書き戻しを実行する（ステップＳ２０９）。そして、ファイル管理の結果に基づいたレスポンスを生成して、ステップＳ２０７に移行する。
Here, in the case of a command intended only for file management (Yes in step S202), the metadata of the target file is read from the
一方、ステップＳ２０２において、Ｏｐｅｎ，Ｃｌｏｓｅなどのファイル管理の処理でないと判断された場合には（ステップＳ２０２のＮｏ）、メタデータの取得が必要な処理か否かを判断する（ステップＳ２０３）。もし、メタデータの取得が必要な処理の場合には（ステップＳ２０３のＹｅｓ）、メタデータを取得する動作を実行し（ステップＳ２０６）、ステップＳ２０７に移行する。 On the other hand, if it is determined in step S202 that the file management process is not Open or Close (No in step S202), it is determined whether the process requires acquisition of metadata (step S203). If the process requires acquisition of metadata (Yes in step S203), an operation for acquiring metadata is executed (step S206), and the process proceeds to step S207.
ステップＳ２０７において、メタサーバ１０２は、メタデータを含む形態の第１のレスポンス情報を生成し、クライアント１０１に送付する（ステップＳ２０７）。
In step S207, the
なお、ここで生成される第１のレスポンス情報は、例えば、図６に示すように、図４のレスポンスに、ファイルのメタデータを付加したメタデータ情報を生成する。ここで、メタデータとしては、ファイルの属性としてのＡｔｔｒｉｂｕｔｅに加え、ファイルを構成するオブジェクトを保持しているＯｂｊｅｃｔ Ｓｅｒｖｅｒ ＩＤ、オブジェクトサーバ１０３内でのオブジェクトを識別するＯｂｊｅｃｔ ＩＤを保持している。また、オブジェクトサーバ１０３内での有効範囲を示すＯｆｆｓｅｔ、ｌｅｎｇｔｈなどの情報も保持している。また、メタサーバ１０２は、メタデータ情報にオブジェクトＩＤとして記載されている関連するオブジェクトサーバ１０３に対して、メタデータを含む同様のレスポンス（第２のレスポンス情報）を送付する（ステップＳ２０８）。
Note that the first response information generated here is, for example, metadata information in which file metadata is added to the response shown in FIG. 4 as shown in FIG. Here, as metadata, in addition to Attribute as an attribute of a file, an Object Server ID holding an object constituting the file and an Object ID identifying an object in the
ここで、本実施の形態では、メタサーバ１０２のネットワークＩ／Ｆ１２４は、第２のレスポンス情報としてのメタデータに対応づけられたファイルの入出力を命令するコマンド（コマンド情報）を、第２のレスポンス情報とともに送信するようにしてもよい。すなわち、メタサーバ１０２は、メタデータを含む第２のレスポンス情報に相当するレスポンスを送信するだけでなく、そのメタデータに対するコマンドを併せて送信するようにしてもよい。この場合、送信されるコマンドは、命令されるコマンドに限定されるものではなく、例えば、複数のコマンドをバッチファイルとしてコマンド情報を生成し、そのコマンド情報を送信するようにしてもよい。
Here, in the present embodiment, the network I /
また、ネットワークＩ／Ｆ１２４は、第２のレスポンス情報としてのメタデータに対応づけられたファイルに関連する関連データについて、入出力が行われた履歴を示すログ情報（実行ログ情報）を、第２のレスポンス情報とともに送信するようにしてもよい。この関連データのログ情報は、メタデータ管理部１２１の任意の設定により、必要な関連データのログ情報だけ送信するように設定することができる。
Further, the network I /
ここで、関連データとは、あるファイルを構成するオブジェクトであったり、任意のオブジェクトに関連づけられているオブジェクトや、あるいは関連するファイルなどが該当する。 Here, the related data corresponds to an object constituting a certain file, an object associated with an arbitrary object, or a related file.
また、ログ情報とは、例えば、クライアント１０１からメタデータの取得要求があったことを示す履歴情報や、クライアント１０１へ第１のレスポンス情報を送信したことを示す履歴情報などが該当する。また、履歴情報とは、例えば、関連データ名、実行された実行コマンド名、または実行時刻などの情報が該当する。
The log information corresponds to, for example, history information indicating that there is a metadata acquisition request from the
また、第２のレスポンス情報の送付の際には、メタデータバスＭＢなどの通知専用のバスなどを利用して通知してもよく、もしくはコマンド、レスポンスと同様のネットワークＩ／Ｆ１２４を使用して通知してもよい。
Further, when sending the second response information, it may be notified using a notification-dedicated bus such as the metadata bus MB, or the network I /
一方、ステップＳ２０３において、メタデータの取得が不要のコマンドの場合には（ステップＳ２０３のＮｏ）、コマンドの処理を実行する（ステップＳ２０４）。そして、メタサーバ１０２は、その処理結果であるレスポンス（第１のレスポンス情報に相当する。）をクライアント１０１に送信し（ステップＳ２０５）、処理を終了する。
On the other hand, in step S203, if the command does not require acquisition of metadata (No in step S203), command processing is executed (step S204). Then, the
次に、オブジェクトサーバ１０３のデータ管理部１３１における処理動作について、フローチャートを用いて説明する。図７は、オブジェクトサーバ１０３のデータ管理部１３１における処理動作を示したフローチャートである。
Next, a processing operation in the
オブジェクトサーバ１０３のネットワークＩ／Ｆ１３４は、クライアント１０１またはメタサーバ１０２から送信されたコマンドを受信する（ステップＳ３０１）。オブジェクトサーバ１０３は、ネットワークＩ／Ｆ１３４を経由して、データ管理部１３１がコマンドを受信すると、オブジェクトサーバ処理を起動する。
The network I /
すなわち、ネットワークＩ／Ｆ１３４は、メタサーバ１０２から送信された第２のレスポンス情報を受信する。また、ネットワークＩ／Ｆ１３４は、第２のレスポンス情報としてのメタデータに対応づけられたファイルに関連する関連データについて、入出力が行われた履歴を示すログ情報がある場合には、このログ情報も受信する。
That is, the network I /
データ管理部１３１は、そのコマンドに含まれる処理要求内容がクライアント１０１とのデータの入出力を伴うコマンドか否かを判断する（ステップＳ３０２）。ここで、データの入出力を伴うコマンドの場合には（ステップＳ３０２のＹｅｓ）、入出力コマンド要求に沿ったデータの入出力を実行し、その結果をクライアント１０１に送信する（ステップＳ３０３）。
The
すなわち、オブジェクトサーバ１０３の入出力制御部１３２は、データ管理部１３１によって受信されたコマンドに基づいて、当該メタデータに対応づけられたデータ（ファイル）の入出力動作または先読み動作を実行する。
That is, the input /
一方、データの入出力を伴うコマンドでない場合には（ステップＳ３０２のＮｏ）、メタサーバ１０２からの入出力コマンド実行に関するログ情報であるため、その入出力コマンド実行の内容を解析する（ステップＳ３０４）。
On the other hand, if the command is not a command that involves data input / output (No in step S302), the log information is related to the execution of the input / output command from the
すなわち、オブジェクトサーバ１０３のデータ管理部１３１は、メタサーバ１０２から送信されたログ情報（実行ログ情報）と第２のレスポンス情報とを受信し、コマンドの内容を解析する。
That is, the
そして、オブジェクトサーバ１０３の入出力制御部１３２は、クライアント１０１によるファイル制御部１１１の動作が開始する前に、ログ情報に示された関連データの読込みまたは領域確保動作を開始する。
Then, the input /
具体的には、データ管理部１３１は、ログ情報に記載されているコマンドについて、時系列に沿ったコマンドの順番で、近い将来に実行されるコマンドと推測する。例えば、クライアント１０１からファイルの入出力の要求を予測したり、他の実行されるであろうコマンドを予測する。
Specifically, the
そのため、オブジェクトサーバ１０３のリソースの使用状況などを考慮し、バッファなどのリソースに余裕があると判断されるときには、投機的な実行が可能と判断する（ステップＳ３０５のＹｅｓ）。そして、ログ情報に基づくデータの投機的な読み込み、領域確保動作などの処理動作を開始する（ステップＳ３０６）。
For this reason, in consideration of the resource usage status of the
ここで、投機的な実行とは、クライアント１０１によるファイル制御部１１１の動作が開始する前に、ログに示された関連データの読込みまたは領域確保動作を開始することである。これは、クライアント１０１の次の動作を予測して、予測された動作を先行して予め処理を開始することを意味している。また、関連データの読み込みや領域確保動作は、投機的な実行の例示であって、これらに限定されるものではない。
Here, speculative execution is to start reading related data or area securing operation shown in the log before the operation of the
一方、オブジェクトサーバ１０３のリソースの使用状況などを考慮し、バッファなどのリソースに余裕がないと判断されるときには投機的に実行が不可能と判断し（ステップＳ３０５のＮｏ）、そのまま処理を終了する。
On the other hand, considering the resource usage status of the
以上説明したように本実施の形態によれば、クライアント１０１からオブジェクトサーバ１０３に対してファイルの要求が発生する前に、オブジェクトサーバ１０３は、メタサーバ１０２から第２のレスポンス情報（メタデータ）を受信することができる。そして、オブジェクトサーバ１０３は、通知された第２のレスポンス情報に基づいて、ファイルの入出力に関する入出力動作や読み出し動作などの予備動作を予め開始することができる。
As described above, according to the present embodiment, the
このように、本実施の形態によれば、オブジェクトサーバ１０３が、ファイルデータの入出力に関する入出力動作や読み出し動作を開始することができるので、分散型ファイルシステムの応答性を改善することができる。
As described above, according to the present embodiment, the
また、本実施の形態によれば、オブジェクトサーバ１０３は、クライアント１０１からの次のデータの入出力要求を高い確率で予測することができる。したがって、オブジェクトサーバ１０３は、オブジェクトサーバ１０３上に入出力されるデータ、バッファを確保し、先読み動作用キャッシュにデータを読み込むことができる。これにより、分散型ファイルシステムの応答性を改善することができる。
Also, according to the present embodiment, the
また、本実施の形態によれば、メタデータに関する関連情報をオブジェクトサーバ間で共有することができるので、メタサーバ１０２の負荷を増大させること無く、分散型ファイルシステムの応答性の改善を実現することができる。
Also, according to the present embodiment, since related information related to metadata can be shared between object servers, the responsiveness of the distributed file system can be improved without increasing the load on the
また、本実施の形態によれば、クライアント１０１にメタデータキャッシュ機構を導入しなくても、メタサーバ１０２がメタデータの属性などに基づいた検索動作などの複雑な処理を行うことができるので、メタサーバ１０２の負荷を増大させないで、分散型ファイルシステムの応答性を改善することができる。
Further, according to the present embodiment, the
（第２の実施の形態）
次に、本発明の第２の実施の形態について図面を参照して詳細に説明する。図８は、第２の実施の形態に係る分散型ファイルシステムの構成図を示した図である。
(Second Embodiment)
Next, a second embodiment of the present invention will be described in detail with reference to the drawings. FIG. 8 is a diagram showing a configuration diagram of a distributed file system according to the second embodiment.
第１の実施の形態と異なる点は、オブジェクトサーバ３０３を構成する２台のオブジェクトサーバ３０３ａ、３０３ｂが、データ管理部１３１ａ、１３１ｂ内に、メタデータを一時的にキャッシュするメタデータキャッシュ１３５ａ、１３５ｂを備えている点である。また、オブジェクトサーバ３０３ａ、３０３ｂは、メタデータバスＭＢを介して、メタデータの送受信ができる構成となっている。
The difference from the first embodiment is that
これらの点以外は、第１の実施の形態と同じであるため、詳細な構成の説明は省略する。また、同一の処理には同一のステップを付し、適宜、説明を省略する。 Except for these points, the second embodiment is the same as the first embodiment, and a detailed description of the configuration is omitted. In addition, the same step is attached to the same process, and the description is omitted as appropriate.
すなわち、第２の実施の形態では、少なくとも第１のオブジェクトサーバ３０３ａと、当該第１のオブジェクトサーバが受信した第２のレスポンス情報としてのメタデータに対応づけられた関連ファイルを記憶する第２のオブジェクトサーバ３０３ｂと、を有している。
That is, in the second embodiment, at least the
そして、第１のオブジェクトサーバ３０３ａは、入出力制御部１３２ａにより予備動作が実行されると、当該予備動作が実行されたことを示す動作ログ情報を、第２のオブジェクトサーバ３０３ｂに送信することができる。
When the preliminary operation is executed by the input /
ここで、動作ログ情報とは、例えば、オブジェクトサーバ３０３ａが予備動作として実行されたコマンド情報、コマンドが開始された時刻、オブジェクトサーバ３０３ａの識別情報またはメタデータなどを含んでいる。但し、動作ログ情報は、これらに限定されるものではなく、必要に応じて、他の動作履歴情報を付加したり、あるいは不要な履歴情報を削除してもよい。
Here, the operation log information includes, for example, command information executed by the
図９は、オブジェクトサーバ３０３ａのデータ管理部１３１ａおよびオブジェクトサーバ３０３ｂのデータ管理部１３１ｂにおける処理動作を示したフローチャートである。
FIG. 9 is a flowchart showing processing operations in the
オブジェクトサーバ３０３ａのデータ管理部１３１ａは、クライアント１０１またはメタサーバ１０２から、ネットワークＩ／Ｆ１３４ａを経由してコマンドを受信すると（ステップＳ３０１）、オブジェクトサーバ処理を起動する。
When the
データ管理部１３１ａは、そのコマンドに含まれる処理要求内容がクライアント１０１とのデータの入出力を伴うコマンドか否かを判断する（ステップＳ３０２）。ここで、データの入出力を伴うコマンドの場合には（ステップＳ３０２のＹｅｓ）、入出力コマンド要求に沿ったデータの入出力を実行し、その結果をクライアント１０１に送信する（ステップＳ３０３）。
The
ここで、第２の実施の形態では、データの入出力処理を実行した際に、この入出力処理の動作ログ情報を、他の関連するオブジェクトサーバ（例えば、オブジェクトサーバ３０３ｂである。）に対して送信する。具体的には、オブジェクトサーバ３０３ａが実行した入出力処理に関連したメタデータが、メタデータキャッシュ１３５ａ、１３５ｂにあるかどうかを判断する（ステップＳ３０７）。
Here, in the second embodiment, when data input / output processing is executed, the operation log information of the input / output processing is sent to other related object servers (for example, the
もし、メタデータキャッシュ１３５ａおよび１３５ｂにメタデータが無い場合には（ステップＳ３０７のＮｏ）、データ管理部１３１ａはメタサーバ１０２に要求することにより、メタデータを取得する（ステップＳ３０８）。
If there is no metadata in the
そして、データ管理部１３１ａは、このメタデータキャッシュ１３５ａ、１３５ｂ上に取得し、保持されたメタデータをチェックし、今回のコマンドに関連する他の関連するオブジェクトサーバの有無を判断する（ステップ３０９）。本実施の形態では、オブジェクトサーバ３０３ｂがオブジェクトサーバ３０３ａに関連する他のオブジェクトサーバ（関連オブジェクトサーバともいう。）に該当する。
The
そこで、他の関連オブジェクトサーバ３０３ｂが存在する場合には（ステップＳ３０９のＹｅｓ）、データ管理部１３１aは、発生した入出力コマンドの動作ログ情報を、他の関連オブジェクトサーバ３０３ｂに対して送付して通知する（ステップＳ３１０）。
Therefore, when another
すなわち、オブジェクトサーバ３０３ｂは、オブジェクトサーバ３０３ａから送信された動作ログ情報を、ネットワークＩ／Ｆ１３４ｂを経由して受信する。
That is, the
一方、もし、他の関連オブジェクトサーバが存在しない場合には（ステップＳ３０９のＮｏ）、処理を終了する。 On the other hand, if there is no other related object server (No in step S309), the process ends.
ステップＳ３０２において、入出力コマンドでなかった場合には（ステップＳ３０２のＮｏ）、ステップＳ３０１で受信したコマンドは、メタサーバ１０２からの入出力コマンド実行に関するログ情報であることを意味している。このため、オブジェクトサーバ３０３ａは、ログ情報から入出力コマンド実行の内容を解析する（ステップＳ３０４）。
If the command is not an input / output command in step S302 (No in step S302), it means that the command received in step S301 is log information regarding execution of the input / output command from the
ここで、ログ情報に記載されている入出力コマンドは、近い将来に実行されるコマンドと推測されるため、オブジェクトサーバ３０３ａのリソースの使用状況などを考慮して、上述と同様に、投機的に実行が可能か否か判断する（ステップＳ３０５）。そして、投機的な実行が可能な場合には（ステップＳ３０５のＹｅｓ）、ログ情報に基づくデータの投機的な読み込みまたは領域確保動作などを実行する（ステップＳ３０６）。
Here, since the input / output commands described in the log information are presumed to be executed in the near future, speculatively in the same manner as described above in consideration of the resource usage status of the
すなわち、オブジェクトサーバ３０３ａの入出力制御部１３２ａは、ログ情報に示されたデータ（例えば、関連ファイルなど）の読込みまたは領域確保動作を実行することができる。
That is, the input /
一方、投機的な実行が可能でない場合には（ステップＳ３０５のＮｏ）、そのまま処理を終了する。 On the other hand, if speculative execution is not possible (No in step S305), the processing is terminated as it is.
以上説明したように第２の実施の形態によれば、第１のオブジェクトサーバ３０３ａは、入出力制御部１３２ａによって予備動作が実行されると、当該予備動作が実行されたことを示す動作ログ情報を、第２のオブジェクトサーバ３０３ｂに送信することができる。これにより、従来、メタサーバ１０２からオブジェクトサーバ１０３に送信されていた動作ログ情報を、オブジェクトサーバ間で送受信することができるので、メタサーバ１０２の負荷を軽減することができる。
As described above, according to the second embodiment, when the preliminary operation is executed by the input /
また、第２の実施の形態において、オブジェクトサーバ３０３ａは、メタサーバ１０２からの入出力コマンド実行に関するログ情報を取得することがある。この場合、オブジェクトサーバ３０３ａは、その入出力コマンド実行の内容を解析することができる。
In the second embodiment, the
これにより、第２の実施の形態によれば、ログ情報に記載された入出力コマンドを解析することにより、リソースの使用状況やバッファを考慮して、ログ情報に基づくデータの投機的な読み込みまたは領域確保動作などを開始することができる。 Thus, according to the second embodiment, by analyzing the input / output command described in the log information, the speculative reading of the data based on the log information or the resource usage status and the buffer is considered. An area securing operation or the like can be started.
（第３の実施の形態）
次に、本発明の第３の実施の形態について図面を参照して詳細に説明する。図１０は、第３の実施の形態に係る分散型ファイルシステムの構成図を示したブロック図である。
(Third embodiment)
Next, a third embodiment of the present invention will be described in detail with reference to the drawings. FIG. 10 is a block diagram showing a configuration diagram of a distributed file system according to the third embodiment.
第３の実施の形態の分散型ファイルシステムの構成が第１の実施の形態の構成と異なる点は、オブジェクトサーバ４０３がデータ管理部１３１の指示に基づいて、オブジェクトに対して特定のデータを実行するデータ処理部１３５を備えている点である。このデータ処理部１３５を除いては、第１の実施の形態と同じであるため、詳細な構成の説明は省略する。
The configuration of the distributed file system of the third embodiment is different from the configuration of the first embodiment in that the
具体的には、オブジェクトサーバ４０３は、ネットワークＩ／Ｆ１３４によって受信された第２のレスポンス情報に基づいて、当該メタデータに対応づけられたファイルの少なくとも一部を構成するオブジェクトに対し、予備動作として特定の実行コマンドを実行するデータ処理部１３５を備えることができる。
Specifically, based on the second response information received by the network I /
次に、図１０を用いて、第３の実施の形態におけるオブジェクトサーバ４０３のファイル入出力動作について説明する。なお、第１の実施の形態で説明した同一の処理については説明を省略する。
Next, a file input / output operation of the
まず、クライアント１０１のファイル制御部１１１における処理動作について説明する。基本的には、第１の実施の形態と同様の動作となるため、処理動作自体は同じものとなる。ただし、ステップＳ１０２（図２）において取得したメタデータに基づいて、各オブジェクトに対して、情報の加工を指示する場合、図６に示したオブジェクトＩＤ毎に実施すべきオペレーションの設定を行う。そして、オブジェクトサーバ４０３に対するコマンドを生成し直した後、ステップＳ１０４（図２）以降の処理を実施する。以降は、クライアントコマンド処理を繰り返すことになる。
First, the processing operation in the
次に、メタサーバ１０２のメタデータ管理部１２１における処理動作について説明する。基本的には、第１の実施の形態と同様の処理動作となるため、処理動作自体は同じものとなる。ただし、ステップＳ２０６（図５）において実施するコマンド処理内容に基づいて、各オブジェクトに対して、情報の加工を指示する場合、図６に示したオブジェクトＩＤ毎に実施すべきオペレーションの設定を行う。そして、オブジェクトサーバ４０３に対するコマンドを生成し直す。この場合、ステップＳ２０８の処理を実施することになる。以下、メタサーバコマンド処理を繰り返すことになる。
Next, a processing operation in the
次に、オブジェクトサーバ４０３のデータ管理部１３１における処理動作について説明する。図１１は、データ管理部１３１の処理動作を示したフローチャートである。
Next, a processing operation in the
まず、オブジェクトサーバ４０３のデータ管理部１３１は、ネットワークＩ／Ｆ１３４を経由して、クライアント１０１あるいはメタサーバ１０２からコマンドを受信すると（ステップＳ４０１）、オブジェクトサーバ処理が起動される。データ管理部１３１は、そのコマンドに含まれる処理要求内容が、クライアント１０１とのオペレーションコマンド（特定の実行コマンド）か否かを判断する（ステップＳ４０２）。
First, when the
ここで、オペレーションコマンドでない場合には（ステップＳ４０２のＮｏ）、データ管理部１３１は、通常の入出力コマンド要求に沿ったデータの入出力を実行し、その実行結果をネットワークＩ／Ｆ１３４を経由してクライアント１０１に送信する（ステップＳ４０３）。
If it is not an operation command (No in step S402), the
ここで、オペレーションコマンドとは、任意のオブジェクトに対する特定の実行コマンドである。例えば、任意のオブジェクトに対し、予備動作の一部を構成する検索処理または圧縮／伸張処理を実行させるコマンドなどが該当する。なお、このオペレーションコマンドは、オブジェクトに限定されるものではなく、ファイルに対して実行してもよい。また、特定の実行コマンドは、検索処理または圧縮／伸張処理に限定されるものではなく、ファイルの展開やオブジェクトの関連づけなどであってもよい。 Here, the operation command is a specific execution command for an arbitrary object. For example, a command for executing a search process or a compression / decompression process that constitutes a part of the preliminary operation corresponds to an arbitrary object. This operation command is not limited to an object, and may be executed on a file. The specific execution command is not limited to the search process or the compression / decompression process, and may be a file expansion or an object association.
一方、メタサーバ１０２やクライアント１０１からのオペレーションコマンドの場合には（ステップＳ４０２のＹｅｓ）、そのコマンドの内容を解析する（ステップＳ４０４）。
On the other hand, in the case of an operation command from the
そして、オペレーションコマンドを解析した結果、オブジェクト毎のオペレーションコマンドが実行可能もしくは投機的に実行可能と判断される場合には（ステップＳ４０４のＹｅｓ）、そのオペレーションコマンドによる処理を実行する（ステップＳ４０５）。 As a result of analyzing the operation command, if it is determined that the operation command for each object is executable or speculatively executable (Yes in step S404), processing based on the operation command is executed (step S405).
また、他の関連オブジェクトサーバに対応するオペレーションコマンドがある場合には（ステップＳ４０６のＹｅｓ）、他の関連オブジェクトサーバへオペレーションコマンドを送付する（ステップＳ４０７）。以下、オブジェクトサーバ処理を繰り返すことになる。 If there is an operation command corresponding to another related object server (Yes in step S406), the operation command is sent to the other related object server (step S407). Thereafter, the object server process is repeated.
図１２は、ある特定のファイルに関連するファイルのファイルＩＤを保持するメタデータの例である。この図１２を参照して、他のファイルとの関連を示すメタデータを、他のオブジェクトサーバにも転送する動作について説明する。 FIG. 12 is an example of metadata that holds the file ID of a file related to a specific file. With reference to FIG. 12, an operation for transferring metadata indicating a relation with another file to another object server will be described.
図１２を参照すると、各ファイルＩＤに続くメタデータは、図６に示した各ファイルを構成するオブジェクトのオブジェクトＩＤなどを保持したメタデータである。第３の実施の形態は、このようなメタデータを採用することにより、第１の実施の形態と第２の実施の形態と同様の構成により、関連するオブジェクトサーバにメタデータを通知することができる。 Referring to FIG. 12, the metadata that follows each file ID is metadata that holds the object IDs and the like of the objects constituting each file shown in FIG. In the third embodiment, by adopting such metadata, it is possible to notify the related object server of the metadata with the same configuration as the first embodiment and the second embodiment. it can.
以上説明したように第３の実施の形態では、任意のファイルやオブジェクトに対し、オペレーションコマンドを実行することができる。これにより、分散型ファイルシステムでは、任意のファイルやオブジェクトに対してオペレーションコマンドを実行することができるので、詳細な予備動作を設定することができる。 As described above, in the third embodiment, an operation command can be executed for an arbitrary file or object. As a result, in the distributed file system, an operation command can be executed on an arbitrary file or object, so that a detailed preliminary operation can be set.
また、本実施の形態によれば、オペレーションコマンドとして、任意のファイルやオブジェクトに対して検索処理または圧縮／伸張処理を設定することができる。これにより、ファイルの入出力動作以外のときに、予備動作の少なくとも一部を構成する処理を行うことができるので、更なる応答性の改善を図ることができる。 Further, according to the present embodiment, search processing or compression / decompression processing can be set for an arbitrary file or object as an operation command. As a result, at least a part of the preliminary operation can be performed at a time other than the file input / output operation, so that the response can be further improved.
以上、図面を参照して本発明の実施形態について述べたが、これらは本実施の形態の例示であり、上記以外の様々な構成を採用することもできる。 As mentioned above, although embodiment of this invention was described with reference to drawings, these are illustrations of this embodiment and various structures other than the above are also employable.
第１から第３までの実施の形態では、分散型ファイルシステムを用いて説明したが、本実施の形態はこれに限らず、分散型ファイル管理方法であってもよい。 In the first to third embodiments, the distributed file system has been described. However, the present embodiment is not limited to this, and a distributed file management method may be used.
例えば、本実施の形態に係る分散型ファイル管理方法は、ファイルを記憶するオブジェクトサーバ１０３と、ファイルに対応づけられたメタデータを格納するメタサーバ１０２と、オブジェクトサーバ１０３に対してファイルの入出力を行うクライアント１０１と、を備える分散型ファイル管理方法であって、クライアント１０１が、メタサーバ１０２に対し、ファイルの所在情報を示すメタデータの要求を送信するメタデータ要求送信ステップと、メタサーバ１０２が、メタデータ要求送信ステップで送信された要求を受信するメタデータ要求受信ステップと、メタサーバ１０２が、メタデータ要求受信ステップで受信された要求に基づいて、当該メタデータを第１のレスポンス情報としてクライアント１０１に送信する第１のメタデータ送信ステップと、メタサーバ１０２が、メタデータ要求受信ステップで受信された要求に基づいて、当該メタデータに対応づけられたファイルが記憶されているオブジェクトサーバ１０３に、当該メタデータを第２のレスポンス情報として送信する第２のメタデータ送信ステップと、クライアント１０１が、メタサーバ１０２から要求に応じて送信されたメタデータを、第１のレスポンス情報として受信する第１のメタデータ受信ステップと、オブジェクトサーバ１０３が、第２のメタデータ送信ステップによって送信された第２のレスポンス情報を受信する第２のメタデータ受信ステップと、オブジェクトサーバ１０３が、第２のメタデータ受信ステップで受信された第２のレスポンス情報に基づいて、当該メタデータに対応づけられたファイルに対して予備動作を実行する予備動作ステップと、クライアント１０１が、第１のメタデータ受信ステップで受信されたメタデータが示す所在情報に対応するファイルを記憶するオブジェクトサーバ１０３に対し、当該ファイルの入出力を行うファイル入出力ステップと、を含むことを特徴とする。
For example, in the distributed file management method according to the present embodiment, an
また、本実施の形態に係る分散型ファイル管理方法は、第２のメタデータ送信ステップが、第２のレスポンス情報としてのメタデータに対応づけられたファイルの入出力を命令するコマンド情報を、当該第２のレスポンス情報とともに送信し、第２のメタデータ受信ステップが、送信されたコマンド情報と第２のレスポンス情報とを受信して、予備動作ステップは、当該第２のメタデータ受信ステップで受信されたコマンド情報に基づいて、当該メタデータに対応づけられたファイルの入出力動作または先読み動作を実行するようにしてもよい。 Further, in the distributed file management method according to the present embodiment, the second metadata transmission step includes command information for instructing input / output of a file associated with the metadata as the second response information. It is transmitted together with the second response information, and the second metadata reception step receives the transmitted command information and the second response information, and the preliminary operation step is received at the second metadata reception step. Based on the command information, the input / output operation or the prefetch operation of the file associated with the metadata may be executed.
また、本実施の形態に係る分散型ファイル管理方法は、第２のメタデータ送信ステップが、第２のレスポンス情報としてのメタデータに対応づけられたファイルに関連する関連データについて、入出力が行われた履歴を示す実行ログ情報を、当該第２のレスポンス情報とともに送信し、第２のメタデータ受信ステップが、送信された実行ログ情報と第２のレスポンス情報とを受信して、予備動作ステップが、クライアント１０１によりファイル入出力ステップの動作が開始される前に、実行ログ情報に示された関連データの読込みまたは領域確保動作を開始するようにしてもよい。
In the distributed file management method according to the present embodiment, the second metadata transmission step performs input / output with respect to related data related to the file associated with the metadata as the second response information. The execution log information indicating the received history is transmitted together with the second response information, and the second metadata reception step receives the transmitted execution log information and the second response information, and the preliminary operation step. However, before the operation of the file input / output step is started by the
また、本実施の形態に係る分散型ファイル管理方法は、少なくとも第１のオブジェクトサーバ３０３ａと、当該第１のオブジェクトサーバ３０３ａが受信した第２のレスポンス情報としてのメタデータに対応づけられた関連ファイルを記憶する第２のオブジェクトサーバ３０３ｂと、を有し、第１のオブジェクトサーバ３０３ａは、予備動作ステップで予備動作が実行されると、当該予備動作が実行されたことを示す動作ログ情報を、第２のオブジェクトサーバに送信するようにしてもよい。
In addition, the distributed file management method according to the present embodiment includes at least a
なお、本実施の形態の各種の構成要素は、その機能を実現するように形成されていればよい。例えば、所定の機能を発揮する専用のハードウェア、所定の機能がコンピュータプログラムにより付与されたオブジェクトサーバ、コンピュータプログラムによりオブジェクトサーバに実現された所定の機能、これらの任意の組み合わせ、等として実現することができる。 Note that the various components of the present embodiment only need to be formed so as to realize their functions. For example, it is realized as dedicated hardware that exhibits a predetermined function, an object server to which the predetermined function is given by a computer program, a predetermined function that is realized in the object server by a computer program, or any combination thereof. Can do.
また、本実施の形態の各種の構成要素は、個々に独立した存在である必要はない。すなわち、複数の構成要素が一個のデバイスとして形成されていること、一つの構成要素が複数のデバイスで形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等でもよい。 Further, the various components of the present embodiment do not need to be individually independent. That is, a plurality of components are formed as a single device, a single component is formed of a plurality of devices, a certain component is a part of another component, a certain component And a part of other components may overlap.
また、本実施の形態における処理動作に関しては、複数のステップを順番に記載してあるが、その記載の順番は複数のステップを実行する順番を必ずしも限定するものではない。このため、本実施の形態に係る方法を実施するときには、その複数のステップの順番は内容的に支障しない範囲で変更することができる。 Further, regarding the processing operation in the present embodiment, a plurality of steps are described in order, but the described order does not necessarily limit the order in which the plurality of steps are executed. For this reason, when implementing the method according to the present embodiment, the order of the plurality of steps can be changed within a range that does not hinder the contents.
また、本実施の形態の上記方法の複数のステップは個々に相違するタイミングで実行されることに限定されない。このため、あるステップの実行中に他のステップが発生すること、あるステップの実行タイミングと他のステップの実行タイミングとの一部ないし全部が重複していること、等でもよい。 Further, the steps of the method of the present embodiment are not limited to being executed at different timings. For this reason, another step may occur during execution of a certain step, or a part or all of the execution timing of a certain step and the execution timing of another step may overlap.
また、本実施の形態に係るクライアント１０１、メタサーバ１０２およびオブジェクトサーバ１０３は、情報処理装置によって構成することができる。また、クライアント１０１、メタサーバ１０２およびオブジェクトサーバ１０３は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、Ｉ／Ｆ（Interface）ユニット、等の汎用デバイスで構築されたハードウェア、所定の情報処理を実行するように構築された専用の論理回路、これらの組み合わせ、等として実施することができる。
Further, the
１０１ クライアント
１０２ メタサーバ
１０３ オブジェクトサーバ
１１０ ユーザーアプリケーション実行部
１１１ ファイル制御部
１１４ ネットワークＩ／Ｆ
１１５ メタデータ要求送信部
１１６ 第１のメタデータ受信部
１２１ メタデータ管理部
１２２ 入出力制御部
１２３ 記憶装置
１２４ ネットワークＩ／Ｆ
１２５ メタデータ要求受信部
１２６ 第１のメタデータ送信部
１２７ 第２のメタデータ送信部
１３１ データ管理部
１３１ａ データ管理部
１３１ｂ データ管理部
１３２ 入出力制御部
１３２ａ 入出力制御部
１３２ｂ 入出力制御部
１３３ 記憶装置
１３３ａ 記憶装置
１３３ｂ 記憶装置
１３４ ネットワークＩ／Ｆ
１３４ａ ネットワークＩ／Ｆ
１３４ｂ ネットワークＩ／Ｆ
１３５ データ処理部
１３５ａ メタデータキャッシュ
１３５ｂ メタデータキャッシュ
１３６ 第２のメタデータ受信部
１３６ａ 第２のメタデータ受信部
１３６ｂ 第２のメタデータ受信部
３０３ａ オブジェクトサーバ
３０３ｂ オブジェクトサーバ
４０３ オブジェクトサーバ
ＭＢ メタデータバス
101
115 Metadata
125 Metadata
134a Network I / F
134b Network I / F
135
Claims (11)
前記クライアントは、
前記メタサーバに対し、前記ファイルの所在情報を示すメタデータの要求を送信するメタデータ要求送信手段と、
前記メタサーバから前記要求に応じて送信されたメタデータを、第１のレスポンス情報として受信する第１のメタデータ受信手段と、
前記第１のメタデータ受信手段によって受信されたメタデータが示す所在情報に対応するファイルを記憶する前記オブジェクトサーバに対し、当該ファイルの入出力を行うファイル入出力手段と、を備え、
前記メタサーバは、
前記メタデータ要求送信手段によって送信された前記要求を受信するメタデータ要求受信手段と、
前記メタデータ要求受信手段によって受信された前記要求に基づいて、当該メタデータを前記第１のレスポンス情報として前記クライアントに送信する第１のメタデータ送信手段と、
前記メタデータ要求受信手段によって受信された前記要求に基づいて、当該メタデータに対応づけられたファイルが記憶されている前記オブジェクトサーバに、当該メタデータを第２のレスポンス情報として送信する第２のメタデータ送信手段と、を備え、
前記オブジェクトサーバは、
前記第２のメタデータ送信手段によって送信された前記第２のレスポンス情報を受信する第２のメタデータ受信手段と、
前記第２のメタデータ受信手段によって受信された前記第２のレスポンス情報に基づいて、当該メタデータに対応づけられたファイルに対して予備動作を実行する予備動作手段と、
を備えることを特徴とする分散型ファイルシステム。 A distributed file system comprising: an object server that stores a file; a meta server that stores metadata associated with the file; and a client that inputs and outputs the file to and from the object server,
The client
Metadata request transmission means for transmitting a request for metadata indicating the location information of the file to the metadata server;
First metadata receiving means for receiving metadata transmitted in response to the request from the meta server as first response information;
File input / output means for inputting / outputting the file to / from the object server storing the file corresponding to the location information indicated by the metadata received by the first metadata receiving means;
The metaserver is
Metadata request receiving means for receiving the request transmitted by the metadata request transmitting means;
First metadata transmission means for transmitting the metadata as the first response information to the client based on the request received by the metadata request reception means;
Based on the request received by the metadata request receiving means, a second response information is transmitted as second response information to the object server storing a file associated with the metadata. Metadata transmission means,
The object server
Second metadata receiving means for receiving the second response information transmitted by the second metadata transmitting means;
Preliminary operation means for performing a preliminary operation on a file associated with the metadata based on the second response information received by the second metadata reception means;
A distributed file system comprising:
前記第２のレスポンス情報としてのメタデータに対応づけられたファイルの入出力を命令するコマンド情報を、当該第２のレスポンス情報とともに送信し、
前記第２のメタデータ受信手段は、
送信された前記コマンド情報と前記第２のレスポンス情報とを受信して、
前記予備動作手段は、
当該第２のメタデータ受信手段によって受信されたコマンド情報に基づいて、当該メタデータに対応づけられたファイルの入出力動作または先読み動作を実行する
ことを特徴とする請求項１に記載の分散型ファイルシステム。 The second metadata transmission means includes:
Command information for instructing input / output of a file associated with the metadata as the second response information is transmitted together with the second response information;
The second metadata receiving means is
Receiving the transmitted command information and the second response information;
The preliminary operation means includes
2. The distributed type according to claim 1, wherein an input / output operation or a prefetch operation of a file associated with the metadata is executed based on command information received by the second metadata receiving means. File system.
前記第２のレスポンス情報としてのメタデータに対応づけられたファイルに関連する関連データについて、入出力が行われた履歴を示す実行ログ情報を、当該第２のレスポンス情報とともに送信し、
前記第２のメタデータ受信手段は、
送信された前記実行ログ情報と前記第２のレスポンス情報とを受信して、
前記予備動作手段は、
前記クライアントによる前記ファイル入出力手段の動作が開始する前に、前記実行ログ情報に示された前記関連データの読込みまたは領域確保動作を開始する
ことを特徴とする請求項１または２に記載の分散型ファイルシステム。 The second metadata transmission means includes:
For the related data related to the file associated with the metadata as the second response information, execution log information indicating the history of input / output is transmitted together with the second response information,
The second metadata receiving means is
Receiving the transmitted execution log information and the second response information;
The preliminary operation means includes
3. The distribution according to claim 1, wherein before the operation of the file input / output unit by the client starts, reading of the related data indicated in the execution log information or an area securing operation is started. Type file system.
当該第１のオブジェクトサーバが受信した前記第２のレスポンス情報としてのメタデータに対応づけられた関連ファイルを記憶する第２の前記オブジェクトサーバと、を有し、
前記第１のオブジェクトサーバは、
前記予備動作手段により前記予備動作が実行されると、当該予備動作が実行されたことを示す動作ログ情報を、前記第２のオブジェクトサーバに送信する
ことを特徴とする請求項１ないし３のいずれか１項に記載の分散型ファイルシステム。 At least a first object server;
The second object server for storing a related file associated with the metadata as the second response information received by the first object server,
The first object server is
The operation log information indicating that the preliminary operation is executed is transmitted to the second object server when the preliminary operation is executed by the preliminary operation means. The distributed file system according to claim 1.
前記第１のオブジェクトサーバから送信された動作ログ情報を前記メタデータ受信手段が受信して、
前記第２のオブジェクトサーバの前記予備動作手段は、
当該動作ログ情報に示された前記関連ファイルの読込みまたは領域確保動作を開始する
ことを特徴とする請求項４に記載の分散型ファイルシステム。 The second object server is
The metadata receiving means receives the operation log information transmitted from the first object server,
The preliminary operation means of the second object server is:
5. The distributed file system according to claim 4, wherein the related file indicated in the operation log information is read or an area securing operation is started.
前記第２のメタデータ受信手段によって受信された前記第２のレスポンス情報に基づいて、当該メタデータに対応づけられたファイルの少なくとも一部を構成するオブジェクトに対し、前記予備動作の少なくとも一部を構成する特定の実行コマンドを実行するデータ処理手段
を更に備えることを特徴とする請求項１ないし３のいずれか１項に記載の分散型ファイルシステム。 The object server
Based on the second response information received by the second metadata receiving means, at least a part of the preliminary operation is performed on an object constituting at least a part of the file associated with the metadata. The distributed file system according to any one of claims 1 to 3, further comprising data processing means for executing a specific execution command.
前記オブジェクトに対し、前記予備動作の一部を構成する検索処理または圧縮／伸張処理である
ことを特徴とする請求項６に記載の分散型ファイルシステム。 The specific execution command is:
The distributed file system according to claim 6, wherein a search process or a compression / decompression process that constitutes a part of the preliminary operation is performed on the object.
前記クライアントが、前記メタサーバに対し、前記ファイルの所在情報を示すメタデータの要求を送信するメタデータ要求送信ステップと、
前記メタサーバが、前記メタデータ要求送信ステップで送信された前記要求を受信するメタデータ要求受信ステップと、
前記メタサーバが、前記メタデータ要求受信ステップで受信された前記要求に基づいて、当該メタデータを第１のレスポンス情報として前記クライアントに送信する第１のメタデータ送信ステップと、
前記メタサーバが、前記メタデータ要求受信ステップで受信された前記要求に基づいて、当該メタデータに対応づけられたファイルが記憶されている前記オブジェクトサーバに、当該メタデータを第２のレスポンス情報として送信する第２のメタデータ送信ステップと、
前記クライアントが、前記第１のメタデータ送信ステップで送信された前記第１のレスポンス情報を受信する第１のメタデータ受信ステップと、
前記オブジェクトサーバが、前記第２のメタデータ送信ステップで送信された前記第２のレスポンス情報を受信する第２のメタデータ受信ステップと、
前記オブジェクトサーバが、前記第２のメタデータ受信ステップで受信された前記第２のレスポンス情報に基づいて、当該メタデータに対応づけられたファイルに対して予備動作を実行する予備動作ステップと、
前記クライアントが、前記第１のメタデータ受信ステップで受信されたメタデータが示す所在情報に対応するファイルを記憶する前記オブジェクトサーバに対し、当該ファイルの入出力を行うファイル入出力ステップと、
を含むことを特徴とする分散型ファイル管理方法。 A distributed file management method comprising: an object server that stores a file; a meta server that stores metadata associated with the file; and a client that inputs and outputs the file to and from the object server,
A metadata request sending step in which the client sends a metadata request indicating the location information of the file to the metadata server;
A metadata request receiving step in which the metadata server receives the request transmitted in the metadata request transmitting step;
A first metadata transmission step in which the metadata server transmits the metadata to the client as first response information based on the request received in the metadata request reception step;
Based on the request received in the metadata request reception step, the metadata server transmits the metadata as second response information to the object server in which a file associated with the metadata is stored. A second metadata transmission step,
A first metadata reception step in which the client receives the first response information transmitted in the first metadata transmission step;
A second metadata receiving step in which the object server receives the second response information transmitted in the second metadata transmitting step;
A preliminary operation step in which the object server performs a preliminary operation on a file associated with the metadata based on the second response information received in the second metadata reception step;
A file input / output step for the client to input / output the file to / from the object server storing the file corresponding to the location information indicated by the metadata received in the first metadata reception step;
A distributed file management method comprising:
前記第２のレスポンス情報としてのメタデータに対応づけられたファイルの入出力を命令するコマンド情報を、当該第２のレスポンス情報とともに送信し、
前記第２のメタデータ受信ステップは、
送信された前記コマンド情報と前記第２のレスポンス情報とを受信して、
前記予備動作ステップは、
当該第２のメタデータ受信ステップで受信されたコマンド情報に基づいて、当該メタデータに対応づけられたファイルの入出力動作または先読み動作を実行する
ことを特徴とする請求項８に記載の分散型ファイル管理方法。 The second metadata transmission step includes:
Command information for instructing input / output of a file associated with the metadata as the second response information is transmitted together with the second response information;
The second metadata receiving step includes:
Receiving the transmitted command information and the second response information;
The preliminary operation step includes:
9. The distributed type according to claim 8, wherein an input / output operation or a prefetch operation of a file associated with the metadata is executed based on the command information received in the second metadata reception step. File management method.
前記第２のレスポンス情報としてのメタデータに対応づけられたファイルに関連する関連データについて、入出力が行われた履歴を示す実行ログ情報を、当該第２のレスポンス情報とともに送信し、
前記第２のメタデータ受信ステップは、
送信された前記実行ログ情報と前記第２のレスポンス情報とを受信して、
前記予備動作ステップは、
前記クライアントによる前記ファイル入出力ステップの動作が開始する前に、前記実行ログ情報に示された前記関連データの読込みまたは領域確保動作を開始する
ことを特徴とする請求項８または９に記載の分散型ファイル管理方法。 The second metadata transmission step includes:
For the related data related to the file associated with the metadata as the second response information, execution log information indicating the history of input / output is transmitted together with the second response information,
The second metadata receiving step includes:
Receiving the transmitted execution log information and the second response information;
The preliminary operation step includes:
10. The distribution according to claim 8, wherein before the operation of the file input / output step by the client starts, reading of the related data indicated in the execution log information or an area securing operation is started. Type file management method.
当該第１のオブジェクトサーバが受信した前記第２のレスポンス情報としてのメタデータに対応づけられた関連ファイルを記憶する第２の前記オブジェクトサーバと、を有し、
前記第１のオブジェクトサーバは、
前記予備動作ステップにより前記予備動作が実行されると、当該予備動作が実行されたことを示す動作ログ情報を、前記第２のオブジェクトサーバに送信する
ことを特徴とする請求項８ないし１０のいずれか１項に記載の分散型ファイル管理方法。 At least a first object server;
The second object server for storing a related file associated with the metadata as the second response information received by the first object server,
The first object server is
The operation log information indicating that the preliminary operation is executed is transmitted to the second object server when the preliminary operation is executed in the preliminary operation step. 2. The distributed file management method according to claim 1.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009023751A JP2010182011A (en) | 2009-02-04 | 2009-02-04 | Distributed file system, and distributed file management method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009023751A JP2010182011A (en) | 2009-02-04 | 2009-02-04 | Distributed file system, and distributed file management method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2010182011A true JP2010182011A (en) | 2010-08-19 |
Family
ID=42763568
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009023751A Pending JP2010182011A (en) | 2009-02-04 | 2009-02-04 | Distributed file system, and distributed file management method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2010182011A (en) |
-
2009
- 2009-02-04 JP JP2009023751A patent/JP2010182011A/en active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11388251B2 (en) | Providing access to managed content | |
| CN107943594B (en) | Data acquisition method and device | |
| JP3561139B2 (en) | File object relay method, computer-readable recording medium storing program of file object relay method, and gateway computer | |
| US8990357B2 (en) | Method and apparatus for reducing loading time of web pages | |
| US6883068B2 (en) | Methods and apparatus for implementing a chche replacement scheme | |
| US20130117252A1 (en) | Large-scale real-time fetch service | |
| US9860332B2 (en) | Caching architecture for packet-form in-memory object caching | |
| JP2007066161A (en) | Cache system | |
| US20150019676A1 (en) | Methods and devices for exchanging data | |
| US6934761B1 (en) | User level web server cache control of in-kernel http cache | |
| JP4554723B2 (en) | Managing network response buffering behavior | |
| JP2012033113A (en) | Printing system, printing device, control method, and program thereof | |
| US8370456B2 (en) | Intelligent pre-fetching using compound operations | |
| US20220214832A1 (en) | Prefetching metadata in a storage system | |
| EP3125495A1 (en) | Content negotiation in a content centric network | |
| US20090157896A1 (en) | Tcp offload engine apparatus and method for system call processing for static file transmission | |
| JP6461101B2 (en) | Database system, information processing apparatus, method, and program | |
| JP5251701B2 (en) | Server device, server-based computing system, and server control program | |
| JP5163171B2 (en) | Cache system and server | |
| US7895266B2 (en) | Distributed file system and method of replacing cache data in the distributed file system | |
| JP2012033083A (en) | Cache control method, node device, manager device, and computer system | |
| JP2010182011A (en) | Distributed file system, and distributed file management method | |
| JP6156720B2 (en) | Data storage control system, data storage control method, and data storage control program | |
| JPWO2015145586A1 (en) | Database system, information processing apparatus, method, and program | |
| US20160253094A1 (en) | Information processing device, data cache device, information processing method, and data caching method |