JP2008046700A - ディレクトリ分散型記憶装置及びデータ処理要求移譲プログラム - Google Patents
ディレクトリ分散型記憶装置及びデータ処理要求移譲プログラム Download PDFInfo
- Publication number
- JP2008046700A JP2008046700A JP2006219201A JP2006219201A JP2008046700A JP 2008046700 A JP2008046700 A JP 2008046700A JP 2006219201 A JP2006219201 A JP 2006219201A JP 2006219201 A JP2006219201 A JP 2006219201A JP 2008046700 A JP2008046700 A JP 2008046700A
- Authority
- JP
- Japan
- Prior art keywords
- page
- storage device
- distributed storage
- transfer
- directory
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 107
- 238000012546 transfer Methods 0.000 claims abstract description 136
- 238000000034 method Methods 0.000 claims description 89
- 230000008569 process Effects 0.000 claims description 75
- 238000012217 deletion Methods 0.000 claims description 42
- 230000037430 deletion Effects 0.000 claims description 42
- 230000006870 function Effects 0.000 claims description 9
- 238000011084 recovery Methods 0.000 claims description 9
- 230000005540 biological transmission Effects 0.000 abstract description 28
- 230000008878 coupling Effects 0.000 abstract description 14
- 238000010168 coupling process Methods 0.000 abstract description 14
- 238000005859 coupling reaction Methods 0.000 abstract description 14
- 238000007726 management method Methods 0.000 description 51
- 238000010586 diagram Methods 0.000 description 18
- 238000004891 communication Methods 0.000 description 13
- 230000011218 segmentation Effects 0.000 description 13
- 238000013500 data storage Methods 0.000 description 8
- 238000001514 detection method Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 3
- 238000011112 process operation Methods 0.000 description 2
- 230000001174 ascending effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 238000013404 process transfer Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 230000003362 replicative effect Effects 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【解決手段】ディレクトリ分散型記憶装置PEAは、木構造を構成するページごとに、当該ページで管理する検索キーの境界値を設定する境界値設定手段232aと、検索キーの値が境界値の範囲内であるか否かに基づいて、経路誤りを判定する経路誤り判定手段223と、誤りと判定された場合に再度上位のページから経路の探索を行う経路再探索手段224と、ページ内の参照先に基づいて、データへの要求処理を他のディレクトリ分散型記憶装置へ移譲するか否かを判定する移譲判定手段221と、移譲すると判定した場合に処理要求を他のディレクトリ分散型記憶装置へ送信する移譲手段222とを備えることを特徴とする。
【選択図】図1
Description
このようなシステムにおいては、アクセス集中による負荷の偏りが存在する場合、その負荷の大きいPEがボトルネックとなり、システム全体の処理能力が低下してしまう。そこで、各PEに負荷を均等に分配するためのディレクトリ構造と、そのディレクトリ構造における並行性制御とが提案されている(例えば、非特許文献1参照)。
ここで、図14を参照して、従来の分散データ格納システムにおけるディレクトリ構造について、その概要を説明する。図14は、従来の分散データ格納システムにおけるディレクトリ構造の一例であるFat−Btree構造の構成例を示す図である。
図14に示すように、Fat−Btree構造は、データを示す葉ページPdを各計算機PEに均等に分配した構造となっている。また、Fat−Btree構造は、葉ページPd以外のインデックスを示すインデックスページPiを各計算機PEに分配した構造となっている。
これによって、各計算機PEに対するアクセスの分散が行われる。また、各計算機PEでは、記憶している葉ページPdの探索に必要のないインデックスページPiを保持していないため、高速に葉ページPdにアクセスすることができる。
「木をたどる主体」…木構造において、木をたどる主体は、システムに格納されたある葉ページを取得するために、各ノード上で葉ページ処理要求(処理要求)を構成する一連のプロセス(プロセスの集合体)である。
「アクセスパス」…ルートページPiR及び要求する葉ページPdと、これらの各ページ間に含まれるページを意味する。
「ロック」…アクセスパスに対して、他の処理要求に属するプロセスからのアクセスを制御するもので、デットロック検出機能を持つ。
次に、従来の分散データ格納システムにおける並行性制御について説明する。図14で説明したFat−Btree構造では、木構造の一貫性を保証するため、並行性制御が必須となる。この並行性制御においては、アクセスパスに対して、他のプロセスからのアクセスを制御するロックが用いられる。一般に、このロックには、デッドロック検出機能を持たない高速かつ単純なラッチ(セマフォの一種)が用いられている。
このFat−Btree構造において、葉ページのデータが参照、更新等される場合、並列計算機は、まず、ルートページにラッチを設定する。その後、下位層のページ(子ページ)のポインタを取得し、子ページにラッチを設定し、ルートページ(親ページ)のラッチを解除する。この動作を、上位層から下位層に向けて葉ページまで繰り返すことで、並行性を保証しながら葉ページを更新等することが可能になる。このような上位層から下位層に向けてラッチの設定及び解除を順次繰り返す動作を「ラッチカップリング」という。
並列計算機は、データの処理要求(参照、更新等)があった各計算機PEにおいて、以下の動作を実行する。ここでは、計算機PE1の動作を主に説明する。
ここで、降下が必要でない場合(ステップS51でNo)、そのページが要求のあった葉ページであるため、当該葉ページへの処理を実行し(ステップS52)、動作を終了する。一方、降下が必要である場合(ステップS51でYes)、計算機PE1は、要求に示されたデータのアクセスパスに基づいて、他の計算機へ処理要求を移譲するか否かを判定する(ステップS53)。
なお、計算機PE1は、他の計算機におけるステップS53の判定により、当該他の計算機(ここでは、計算機PE3とする)から、処理要求の移譲を要求された場合も、ステップS54以降の動作を実行する。この段階で、移譲元からの移譲処理が開始されたことになる。
なお、計算機PE1は、移譲先の計算機(計算機PE2)から移譲の要求に対する応答を通知された場合(移譲応答メッセージ受信)も、ステップS57の動作を実行する。
一方、移譲先の計算機(計算機PE2)への移譲処理中でない場合(ステップS58でNo)、計算機PE1は、ステップS51に戻って、処理対象の葉ページに到達するまで動作を続ける。
なお、計算機PE1は、移譲元の計算機(計算機PE3)から移譲の完了を通知された場合も、ステップS51に戻って動作を実行する。なお、この段階で、移譲元からの移譲処理が完了したことになる。
吉原朋宏、他4名,「並列ディレクトリ構造Fat−Btreeの並行性制御とその評価」,[online],平成17年3月27日,電子情報通信学会第16回データ工学ワークショップ第3回日本データベース学会年次大会,[平成18年8月4日検索],インターネット<URL:http://www.ieice.org/iss/de/DEWS/DEWS2005/procs/papers/2A-o4.pdf>
しかし、ラッチカップリングにより、計算機(PE)間での処理要求の移譲が発生した場合、図17(c)に示したように、複数(3回)のメッセージがネットワーク上で伝送されることになるため、ネットワークレイテンシが増大する。また、分散データ格納システムでは、スループットの向上を目的として、システム規模を大きくする場合がある。このとき、システム規模の拡大に伴いネットワーク上のメッセージ伝送の頻度が多くなり、スループットの向上の効果が得られにくくなるという問題がある。
そして、ディレクトリ分散型記憶装置は、経路復旧手段によって、経路誤り判定手段で経路誤りと判定された場合に、経路の復旧を行う。
なお、従来では、処理要求の移譲途中に経路誤りを発生させないようにページのロック制御を行うため、複数のメッセージを他のディレクトリ分散型記憶装置との間で送受信する必要があったが、このディレクトリ分散型記憶装置では、経路誤りを検出可能としたことで、処理要求の移譲を1回のメッセージ送信で行うことが可能になる。
そして、ディレクトリ分散型記憶装置は、経路再探索手段によって、経路誤り判定手段で経路誤りと判定された場合に、再度上位のページから経路の探索を行う。これによって、正しい経路が探索されることになる。
なお、従来では、処理要求の移譲途中に経路誤りを発生させないようにページのロック制御を行うため、複数のメッセージを他のディレクトリ分散型記憶装置との間で送受信する必要があったが、このディレクトリ分散型記憶装置では、経路誤りを検出可能としたことで、処理要求の移譲を1回のメッセージ送信で行うことが可能になる。
そして、ディレクトリ分散型記憶装置は、ページ削除手段によって、管理対象ページ判定手段で管理対象外のページであると判定したページを削除する。このとき、ページ削除手段は、削除対象のページを参照するプロセスが存在しなくなった段階で、当該ページを削除する。これによって、完全に不要になったページのみが削除されることになる。
さらに、データ処理要求移譲プログラムは、経路誤り判定手段によって、データまでの経路を探索する経路途中のページにおいて、当該データの検索キーの値が、境界値設定手段で設定された境界値の範囲内であるか否かに基づいて、経路誤りを判定する。
そして、データ処理要求移譲プログラムは、経路再探索手段によって、経路誤り判定手段で経路誤りと判定された場合に、再度上位のページから経路の探索を行う。これによって、正しい経路が探索されることになる。
請求項1、請求項2又は請求項5に記載の発明によれば、ラッチカップリング処理を行わないため、処理要求を他のディレクトリ分散型記憶装置に移譲する場合に、ネットワークを介したメッセージの送受信回数を1回で処理することができる。これによって、システム規模の拡大を行った場合に、ネットワークへの負荷を抑えることができ、スループットを向上させることができる。
請求項4に記載の発明によれば、親ページに参照先が記述されていないページを削除するため、経路再探索手段が行う再探索の回数を減らすことができ、データを探索する際の処理速度を高速化することができる。
[ディレクトリ分散型記憶装置の構成]
まず、図1を参照して、第1実施形態に係るディレクトリ分散型記憶装置の構成について説明する。図1は、本発明の第1実施形態に係るディレクトリ分散型記憶装置の構成を示すブロック図である。
この木構造情報TRでは、図2に示すように、「検索キー」と「ポインタ」との対の情報以外に、「削除ビットDb」と、「始端検索キーKs」と、「終端検索キーKe」とを付加している。
「終端検索キーKe」は、同じ階層で後続するインデックスページとの検索キーの境界値を示す情報である。この終端検索キーKeは、例えば、図2に示すように、インデックスページP2にインデックスページP3が続く場合、後続のインデックスページP3における先頭の検索キー(始端検索キー)の値“Ki”と、インデックスページP2の終端検索キーKeの値とを同一に設定しておく。これによって、インデックスページP2において、検索キーの値の範囲を明確にすることができる。なお、インデックスページが、ルートページである場合は、終端検索キーの値は、検索キーの値とはならない特殊な値、例えば“null”を設定しておく。この場合、各階層の最終のインデックスページにおける終端検索キーの値も、“null”が設定されることになる。
この「削除ビットDb」、「始端検索キーKs」及び「終端検索キーKe」の具体的な利用方法については、後記することとする。
図1に戻って、ディレクトリ分散型記憶装置の構成について説明を続ける。
このデータ送受信手段11は、データ参照手段12から出力されるデータを、通信制御部1を介して送信し、通信制御部1を介して受信したデータをデータ更新手段13に出力する。
また、データ更新手段13は、木構造管理手段20から通知される制御情報に基づいて、指示されたデータDTを記憶部2から削除する動作も行う。なお、データDTを削除する場合、親ページのインデックスページに設定されているポインタを削除する必要があるため、データDTを削除した旨を木構造管理手段20に通知する。
一方、ポインタが他のディレクトリ分散型記憶装置(図示せず)で管理されているインデックスページを指し示している場合、移譲判定手段221は、他のディレクトリ分散型記憶装置に、要求された処理を移譲すると判定する。なお、移譲すると判定した場合、移譲判定手段221は、その旨を移譲手段222に通知する。
なお、ここでは、図3(a)に示すように、ディレクトリ構造が図14に示したFat−Btree構造において、ルートページP1から対象データの葉ページP4までが、異なるディレクトリ分散型記憶装置PEA(PE1,PE2)で管理されているものとする。
このとき、図3(b)中、破線で示した移譲処理において、図3(c)に示すように、ディレクトリ分散型記憶装置PE1から、ディレクトリ分散型記憶装置PE2に対して、移譲要求メッセージのみが送信される。
そこで、ディレクトリ分散型記憶装置PEAは、後記する経路誤り判定手段223により、経路誤りを判定し、正しい経路を補償することとしている。
図1に戻って、ディレクトリ分散型記憶装置の構成について説明を続ける。
具体的には、経路誤り判定手段223は、処理対象の検索キーの値が、インデックスページにおける「始端検索キーKs」の領域(図2参照)に記述されている検索キーの値以上で、「終端検索キーKe」の領域(図2参照)に記述されている検索キーの値未満であるときに、経路が正しいと判定し、それ以外のときに、経路が誤っていると判定する。なお、経路が誤っていると判定した場合、経路誤り判定手段223は、その旨を経路再探索手段224に通知する。
このARIES/IM方式の方法を応用すると、まず、SM_bitというビットを各ページに設け、初期値として“0”に設定しておく。そして、ページを更新する際には、木ラッチと呼ばれるシステムに1つしかないラッチを獲得する。この更新のためのラッチ獲得方法としては、ボトムアップのラッチカップリングを用いる。そして、更新されたページのSM_bitに“1”を設定する。その後、関連するページの更新が終わった段階で、SM_bitを“0”に設定し、木ラッチを解放する。
そして、経路誤り判定手段223は、木ラッチが解放された後、経路再探索手段224(経路復旧手段)に経路誤りがあった旨を通知する。
これによって、削除ビット設定時点で当該ページを参照していたプロセスの動作を保証することができる。
このページ分割・追加手段232は、データ操作手段10によってデータDTが追加されることによって、そのデータDTを参照する親ページのエントリ数が、エントリ制限情報ELで示される最大値を超過する場合に、該当ページを分割する。なお、ページ分割・追加手段232は、親ページのエントリ数が、さらに、エントリ制限情報ELで示される最大値を超過する場合には、順次親ページを分割する。そして、その分割がルートページにまで波及した場合、ページ分割・追加手段232は、当該ルートページを分割し、その上位にルートページを生成する。
ここでは、ページ分割・追加手段232は、境界値設定手段232aと、管理対象ページ判定手段232bと、ポインタ設定手段232cとを備えている。
この場合、ページ分割・追加手段232は、図4(b)に示すように、インデックスページP1を、検索キーの値がKi未満のインデックスページP2と、Ki以上のインデックスページP3とに分割する。このとき、境界値設定手段232aが、インデックスページP3における先頭の検索キーの値Kiを、インデックスページP2の「終端検索キーKe」の領域に設定する。これによって、インデックスページの検索キーの境界値により、インデックスページの検索キーの両端を示すことができるため、前記した経路誤り判定手段223は、経路の誤りを判定することが可能になる。
図1に戻って、ディレクトリ分散型記憶装置の構成について説明を続ける。
なお、管理対象ページ判定手段232bは、分割により生成されたページを管理対象ページでないと判定したときは、ページ削除手段231によって、当該ページを削除する。これによって、不用なページが管理から除外されることになる。
ここでは、図5(a)に示すように、インデックスページP1(親ページ)の検索キーKiのポインタで示されているインデックスページP2(子ページ)は、エントリ数がエントリ制限情報ELで示される最大値の状態(Full entry)であるとする。
また、第2の分割パターンは、(b−2)に示すように、左側ページP21にはローカルポインタが含まれているが、右側ページP22にはローカルポインタが含まれておらずリモートポインタのみが含まれている分割パターンである。
また、第3の分割パターンは、(b−3)に示すように、右側ページP22にはローカルポインタが含まれているが、左側ページP21にはローカルポインタが含まれておらずリモートポインタのみが含まれている分割パターンである。
そこで、以下、図6〜図8を参照(適宜図1参照)して、分割後の処理について説明する。図6は、第1の分割パターンにおける分割後の処理を説明するための説明図である。図7は、第2の分割パターンにおける分割後の処理を説明するための説明図である。図8は、第3の分割パターンにおける分割後の処理を説明するための説明図である。
図1に戻って、ディレクトリ分散型記憶装置の構成について説明を続ける。
ここでは、プロセス管理手段40は、経路探索手段22からプロセスの再起動が通知された場合、要求のあったプロセスを再起動する。これによって、経路探索手段22における経路探索がリスタートされることになる。
また、ページ削除手段231から、削除ビット設定時点で起動されていたプロセスの終了を待つ旨の通知があった場合、プロセス管理手段40は、その時点において起動していたプロセスがすべて終了した段階で、ページ削除手段231にプロセスの終了を通知する。これによって、他のプロセスに影響を与えることなくページを削除することができる。
また、ディレクトリ分散型記憶装置PEAの制御部3は、一般的なコンピュータにプログラムを実行させ、コンピュータ内の演算装置や記憶装置を動作させることにより実現することができる。ここで実現される処理要求の移譲を行うデータ処理要求移譲プログラムは、通信回線を介して配布することも可能であるし、CD−ROM等の記録媒体に書き込んで配布することも可能である。
次に、図9及び図10を参照して、ディレクトリ分散型記憶装置の動作について説明する。なお、ここでは、ディレクトリ分散型記憶装置PEAの木構造管理手段20において行われる、処理要求の移譲処理動作とページの分割処理について、詳細に説明を行うことにする。図9は、本発明のディレクトリ分散型記憶装置における処理要求の移譲処理動作を示すフローチャートである。図10は、本発明のディレクトリ分散型記憶装置におけるページの分割処理動作を示すフローチャートである。
最初に、図9を参照(適宜図1参照)して、データの処理要求の移譲処理動作について説明する。
まず、ディレクトリ分散型記憶装置PEAは、経路探索手段22によって、初期値として、親ページを“null”、子ページをルートページに設定する(ステップS1)。そして、ディレクトリ分散型記憶装置PEAは、経路探索手段22によって、木構造情報TRを参照することで、要求のあった検索キーのページをアクセスする際に、さらに子ページへの降下が必要であるか否かを判定する(ステップS2)。
一方、移譲が必要でない場合(ステップS4でNo)、ディレクトリ分散型記憶装置PEAは、経路探索手段22からの指示に基づいてラッチ設定手段21により、子ページにラッチを設定する(ステップS5)。
ここで、経路に誤りがある場合(ステップS6で「誤」)、ディレクトリ分散型記憶装置PEAは、経路再探索手段224によって、プロセス管理手段40に対してプロセスの再起動を要求することで、ステップS1から再度探索動作を行う。
一方、経路が正しい場合(ステップS6で「正」)、ディレクトリ分散型記憶装置PEAは、経路探索手段22によって、対象となるページを子ページに降下させる。すなわち、経路探索手段22が、子ページを新たな親ページに設定し、孫ページを新たな子ページに設定する(ステップS7)。
その後、ディレクトリ分散型記憶装置PEAは、ステップS1に戻って、処理対象の葉ページに到達するまで動作を続ける。
次に、図10を参照(適宜図1、図6〜図8参照)して、ページの分割処理動作について説明する。ここでは、インデックスページのエントリ数がエントリ制限情報ELで示される最大値を超過した以降の動作について説明する。
そして、ディレクトリ分散型記憶装置PEAは、境界値設定手段232aによって、ページ内に検索キーの境界値を設定する(ステップS21)。
以上の動作によって、ディレクトリ分散型記憶装置PEAは、インデックスページを分割する際に、各ページに検索キーの境界値を設定するため、当該ページを参照するプロセスが経路誤りを検出することが可能になる。
[ディレクトリ分散型記憶装置の構成]
次に、図11を参照して、第2実施形態に係るディレクトリ分散型記憶装置の構成について説明する。図11は、本発明の第2実施形態に係るディレクトリ分散型記憶装置の構成を示すブロック図である。
図11に示したディレクトリ分散型記憶装置PEBは、ネットワークNに接続された他のディレクトリ分散型記憶装置(図示せず)と協働し、データベース等のデータを分散して記憶するものである。
この管理対象ページ判定手段232Bbは、分割された元のページを管理対象ページでないと判定したときは、後記するエントリ複製手段232dによって、分割により新たに生成されたページの内容を、分割された元のページに上書きした後に、ページ削除手段231によって、分割により新たに生成されたページを削除する点が異なっている。
ここで、図12を参照(適宜図11参照)して、図8で説明した第3の分割パターンとの差異点について説明する。図12は、第3の分割パターンにおける分割後の処理を説明するための説明図である。
このとき、ディレクトリ分散型記憶装置PEBは、図12(b)に示すように、分割により新たに生成された右側ページ(インデックスページP22)の内容を、親ページ(インデックスページP1)からポインタで指し示されている左側ページ(インデックスページP21)に上書きし、その後、右側ページ(インデックスページP22)を削除する。さらに、親ページ(インデックスページP1)に設定されている元の左側ページへのローカルポインタのエントリKiを他のディレクトリ分散型記憶装置に蓄積されている元の左側ページのコピーページへのリモートポインタを設定し、残った子インデックスページの始端を表すエントリKjを新たに追加してコピー先の子ページ(インデックスページP22)へのリモートポインタを設定する。
次に、図13を参照(適宜図11及び図12参照)して、ディレクトリ分散型記憶装置の動作について説明する。図13は、本発明の第2実施形態に係るディレクトリ分散型記憶装置におけるページの分割処理動作を示すフローチャートである。なお、処理要求の移譲処理動作については、図9で説明した動作と同一であるため説明を省略する。
図13のステップS20〜S26は、図10と同一の動作であるため、同一の符号を付し、説明を省略する。
ディレクトリ分散型記憶装置PEBは、分割したページへのポインタが親ページに設定されている場合(ステップS24でYes)、すなわち、分割の元となったページ(図12中、インデックスページP21〔左側ページ〕)である場合、エントリ複製手段232dによって、分割により新たに生成されたページ(図12中、インデックスページP22〔右側ページ〕)の内容(エントリ)を、分割の元となったページ(図12中、インデックスページP21〔左側ページ〕)に上書きする(ステップS30)。
その後、ディレクトリ分散型記憶装置PEBは、親ページに設定されていた分割の元となったページ(図12中、インデックスページP21〔左側ページ〕)へのローカルポインタのエントリの内容を、他のディレクトリ分散型記憶装置に蓄積されている当該ページのコピーページへのリモートポインタに設定しなおし(ステップS32)、分割の元となったページのローカルポインタを親ページに設定し(ステップS33)、動作を終了する。
1 通信制御部
2 記憶部
3 制御部
10 データ操作手段
11 データ送受信手段
12 データ参照手段
13 データ更新手段
20 木構造管理手段
21 ラッチ設定手段(ロック設定手段)
22 経路探索手段
221 移譲判定手段
222 移譲手段
223 経路誤り判定手段
224 経路再探索手段(経路復旧手段)
23 木構造更新手段
231 ページ削除手段
231a 削除ビット設定手段
232 ページ分割・追加手段
232a 境界値設定手段
232b 管理対象ページ判定手段
232c ポインタ設定手段
232d エントリ複製手段
30 制御情報送受信手段
40 プロセス管理手段
Claims (5)
- データを検索するための検索キーと木構造を有するディレクトリ構造の下位のページへの参照先とを含んだ複数のページを木構造情報として記憶する記憶手段と、前記ページの更新に伴い前記木構造情報を更新する木構造更新手段と、前記木構造情報に基づいて、前記データまでの経路を前記ページのロックの設定と解除とを行いながら探索する経路探索手段とを備え、ネットワーク環境下で前記ディレクトリ構造を分散して管理するディレクトリ分散型記憶装置において、
前記経路探索手段が、
前記データまでの経路を探索する経路途中のページにおいて、経路誤りを判定する経路誤り判定手段と、
この経路誤り判定手段で経路誤りと判定された場合に、前記経路の復旧を行う経路復旧手段と、
前記ページ内の参照先に基づいて、前記データへの要求処理を他のディレクトリ分散型記憶装置へ移譲するか否かを判定する移譲判定手段と、
この移譲判定手段で前記他のディレクトリ分散型記憶装置へ前記処理要求を移譲すると判定した場合に、前記処理要求を前記他のディレクトリ分散型記憶装置へ送信する移譲手段と、を備えていることを特徴とするディレクトリ分散型記憶装置。 - データを検索するための検索キーと木構造を有するディレクトリ構造の下位のページへの参照先とを含んだ複数のページを木構造情報として記憶する記憶手段と、前記ページの更新に伴い前記木構造情報を更新する木構造更新手段と、前記木構造情報に基づいて、前記データまでの経路を前記ページのロックの設定と解除とを行いながら探索する経路探索手段とを備え、ネットワーク環境下で前記ディレクトリ構造を分散して管理するディレクトリ分散型記憶装置において、
前記木構造更新手段が、
前記ページ内の参照先の数が予め定めた制限値を超過して当該ページを分割する際に、分割されたページごとに、当該ページで管理する前記検索キーの境界値を設定する境界値設定手段を備え、
前記経路探索手段が、
前記データまでの経路を探索する経路途中のページにおいて、当該データの検索キーの値が、前記境界値設定手段で設定された境界値の範囲内であるか否かに基づいて、経路誤りを判定する経路誤り判定手段と、
この経路誤り判定手段で経路誤りと判定された場合に、再度上位のページから経路の探索を行う経路再探索手段と、
前記ページ内の参照先に基づいて、前記データへの要求処理を他のディレクトリ分散型記憶装置へ移譲するか否かを判定する移譲判定手段と、
この移譲判定手段で前記他のディレクトリ分散型記憶装置へ前記処理要求を移譲すると判定した場合に、前記処理要求を前記他のディレクトリ分散型記憶装置へ送信する移譲手段と、を備えていることを特徴とするディレクトリ分散型記憶装置。 - プロセスを管理するプロセス管理手段を備え、
前記木構造更新手段が、
前記ページを分割した際に、当該ディレクトリ分散型記憶装置以外の参照先のみからなるページを、当該ディレクトリ分散型記憶装置の管理対象外のページであると判定する管理対象ページ判定手段と、
この管理対象ページ判定手段で管理対象外のページであると判定したページを削除するページ削除手段とを備え、
前記ページ削除手段が、当該ページを参照するプロセスが存在しなくなった段階で、当該ページを削除することを特徴とする請求項2に記載のディレクトリ分散型記憶装置。 - 前記木構造更新手段が、
前記ページを分割した際に、親ページに参照先が記述されている一方のページが当該ディレクトリ分散型記憶装置以外の参照先のみからなるページである場合に、分割された他方のページの内容を前記一方のページにコピーするエントリ複製手段を備え、
このエントリ複製手段によりコピーされた後に、前記ページ削除手段が、前記他方のページを削除することを特徴とする請求項3に記載のディレクトリ分散型記憶装置。 - データを検索するための検索キーと木構造を有するディレクトリ構造の下位のページへの参照先とを含んだ複数のページで構成されるディレクトリ構造を分散して管理するディレクトリ分散型記憶装置において、前記データへの処理要求を、ネットワークに接続された他のディレクトリ分散型記憶装置に移譲するために、コンピュータを、
前記ページ内の参照先の数が予め定めた制限値を超過して当該ページを分割する際に、分割されたページごとに、当該ページで管理する検索キーの境界値を設定する境界値設定手段、
前記データまでの経路を探索する経路において、上位のページにロックを設定し、下位ページへの参照先を取得した後に、前記ロックを解除し、下位のページにロックを設定する処理を繰り返すロック設定手段、
前記データまでの経路を探索する経路途中のページにおいて、当該データの検索キーの値が、前記境界値設定手段で設定された境界値の範囲内であるか否かに基づいて、経路誤りを判定する経路誤り判定手段、
この経路誤り判定手段で経路誤りと判定された場合に、再度上位のページから探索を行う経路再探索手段、
前記ページ内の参照先に基づいて、前記データへの要求処理を他のディレクトリ分散型記憶装置へ移譲するか否かを判定する移譲判定手段、
この移譲判定手段で前記他のディレクトリ分散型記憶装置へ前記処理要求を移譲すると判定した場合に、前記処理要求を前記他のディレクトリ分散型記憶装置へ送信する移譲手段、として機能させることを特徴とするデータ処理要求移譲プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006219201A JP4971717B2 (ja) | 2006-08-11 | 2006-08-11 | ディレクトリ分散型記憶装置及びデータ処理要求移譲プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006219201A JP4971717B2 (ja) | 2006-08-11 | 2006-08-11 | ディレクトリ分散型記憶装置及びデータ処理要求移譲プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008046700A true JP2008046700A (ja) | 2008-02-28 |
JP4971717B2 JP4971717B2 (ja) | 2012-07-11 |
Family
ID=39180413
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006219201A Active JP4971717B2 (ja) | 2006-08-11 | 2006-08-11 | ディレクトリ分散型記憶装置及びデータ処理要求移譲プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4971717B2 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010266996A (ja) * | 2009-05-13 | 2010-11-25 | Hitachi Ltd | データベース処理方法、データベース処理システム及びデータベースサーバ |
WO2013005684A1 (ja) * | 2011-07-01 | 2013-01-10 | 日本電気株式会社 | オブジェクト配置装置、オブジェクト配置方法及びプログラム |
JP2013156881A (ja) * | 2012-01-31 | 2013-08-15 | Hitachi Solutions Ltd | ファイルリスト生成方法及びシステム、ファイルリスト生成装置並びにプログラム |
JP2013167990A (ja) * | 2012-02-15 | 2013-08-29 | Hitachi Solutions Ltd | ファイルリスト生成方法及びシステム並びにプログラム、ファイルリスト生成装置 |
WO2015136765A1 (ja) * | 2014-03-10 | 2015-09-17 | 株式会社日立製作所 | インデクスツリーの探索方法及び計算機 |
WO2016157492A1 (ja) * | 2015-04-02 | 2016-10-06 | 株式会社日立製作所 | 共有リソース更新装置及び共有リソース更新方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02144637A (ja) * | 1988-10-07 | 1990-06-04 | Internatl Business Mach Corp <Ibm> | データ構造更新方法 |
JPH0887511A (ja) * | 1994-09-19 | 1996-04-02 | Hitachi Ltd | B木インデクスの管理方法およびシステム |
-
2006
- 2006-08-11 JP JP2006219201A patent/JP4971717B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02144637A (ja) * | 1988-10-07 | 1990-06-04 | Internatl Business Mach Corp <Ibm> | データ構造更新方法 |
JPH0887511A (ja) * | 1994-09-19 | 1996-04-02 | Hitachi Ltd | B木インデクスの管理方法およびシステム |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010266996A (ja) * | 2009-05-13 | 2010-11-25 | Hitachi Ltd | データベース処理方法、データベース処理システム及びデータベースサーバ |
US9703843B2 (en) | 2011-07-01 | 2017-07-11 | Nec Corporation | Object placement apparatus, object placement method and program |
WO2013005684A1 (ja) * | 2011-07-01 | 2013-01-10 | 日本電気株式会社 | オブジェクト配置装置、オブジェクト配置方法及びプログラム |
JPWO2013005684A1 (ja) * | 2011-07-01 | 2015-02-23 | 日本電気株式会社 | オブジェクト配置装置、オブジェクト配置方法及びプログラム |
JP2013156881A (ja) * | 2012-01-31 | 2013-08-15 | Hitachi Solutions Ltd | ファイルリスト生成方法及びシステム、ファイルリスト生成装置並びにプログラム |
JP2013167990A (ja) * | 2012-02-15 | 2013-08-29 | Hitachi Solutions Ltd | ファイルリスト生成方法及びシステム並びにプログラム、ファイルリスト生成装置 |
JP2015170239A (ja) * | 2014-03-10 | 2015-09-28 | 株式会社日立製作所 | インデクスツリーの探索方法及び計算機 |
GB2538586A (en) * | 2014-03-10 | 2016-11-23 | Hitachi Ltd | Index tree search method and computer |
WO2015136765A1 (ja) * | 2014-03-10 | 2015-09-17 | 株式会社日立製作所 | インデクスツリーの探索方法及び計算機 |
US10565190B2 (en) | 2014-03-10 | 2020-02-18 | Hitachi, Ltd. | Index tree search method and computer |
GB2538586B (en) * | 2014-03-10 | 2021-01-27 | Hitachi Ltd | Index tree search method and computer |
WO2016157492A1 (ja) * | 2015-04-02 | 2016-10-06 | 株式会社日立製作所 | 共有リソース更新装置及び共有リソース更新方法 |
JPWO2016157492A1 (ja) * | 2015-04-02 | 2017-11-24 | 株式会社日立製作所 | 共有リソース更新装置及び共有リソース更新方法 |
US10838949B2 (en) | 2015-04-02 | 2020-11-17 | Hitachi, Ltd. | Shared resource update apparatus and shared resource update method |
Also Published As
Publication number | Publication date |
---|---|
JP4971717B2 (ja) | 2012-07-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102240557B1 (ko) | 데이터 저장 방법, 장치 및 시스템 | |
US7469260B2 (en) | File storage service system, file management device, file management method, ID denotative NAS server and file reading method | |
CN110096891B (zh) | 对象库中的对象签名 | |
JP5411250B2 (ja) | 冗長データ記憶システムへの指示に従ってのデータ配置 | |
US7788303B2 (en) | Systems and methods for distributed system scanning | |
US9304966B2 (en) | Providing local access to managed content | |
JP5733124B2 (ja) | データ管理装置、データ管理システム、データ管理方法、及びプログラム | |
JP5092234B2 (ja) | 情報処理装置、分散同期型情報システム、情報同期方法、及び、プログラム | |
JP2008033912A (ja) | Nas向けのcdpの方法および装置 | |
CN103150394A (zh) | 面向高性能计算的分布式文件系统元数据管理方法 | |
JP2004038960A (ja) | ファイルシステムフィルタドライバのためのファイルネームを管理するシステム及び方法 | |
JP3866466B2 (ja) | データ構造管理装置、データ構造管理システム、データ構造管理方法およびデータ構造管理プログラムを格納する記録媒体 | |
US9659023B2 (en) | Maintaining and using a cache of child-to-parent mappings in a content-addressable storage system | |
JP4971717B2 (ja) | ディレクトリ分散型記憶装置及びデータ処理要求移譲プログラム | |
JP4713257B2 (ja) | データ記憶装置及びバージョン管理プログラム | |
JP2017045454A (ja) | 同時の、増分の及び世代のマークアンドスィープガーベッジコレクション | |
JP3857259B2 (ja) | オブジェクト状態転送方法,オブジェクト状態転送装置およびオブジェクト状態転送プログラム並びにそのプログラムの記録媒体 | |
CN115905114B (zh) | 元数据的批量更新方法、系统、电子设备及可读存储介质 | |
JP2005063374A (ja) | データ管理方法、データ管理装置、およびそのためのプログラムならびに記録媒体。 | |
JP2011522337A (ja) | サーバクラスタに配信されるコンピュータシステムのソフトウェアモジュールの同期化方法、同期化システムおよびデータストレージへの適用 | |
US10073874B1 (en) | Updating inverted indices | |
WO2012164735A1 (ja) | 情報処理装置、データ管理方法およびデータ管理プログラム | |
CN105046162B (zh) | 在内容可寻址存储系统中维护并使用子对父映射的缓存 | |
CN112084141A (zh) | 一种全文检索系统扩容方法、装置、设备及介质 | |
JP2015197810A (ja) | サーバー装置、情報処理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090114 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110607 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110805 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20120113 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20120206 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120313 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120406 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150413 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4971717 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |