JP2010518469A - データ管理システム - Google Patents

データ管理システム Download PDF

Info

Publication number
JP2010518469A
JP2010518469A JP2009547494A JP2009547494A JP2010518469A JP 2010518469 A JP2010518469 A JP 2010518469A JP 2009547494 A JP2009547494 A JP 2009547494A JP 2009547494 A JP2009547494 A JP 2009547494A JP 2010518469 A JP2010518469 A JP 2010518469A
Authority
JP
Japan
Prior art keywords
data
file
stub
metadata
additional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009547494A
Other languages
English (en)
Inventor
ハーヴィー,ピーター
ハーヴィー,マイケル
ビエラク,ルーディ
ワルトン,マーク
Original Assignee
ムーンウォーク ユニバーサル ピー ティ ワイ エル ティ ディ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from AU2007900540A external-priority patent/AU2007900540A0/en
Application filed by ムーンウォーク ユニバーサル ピー ティ ワイ エル ティ ディ filed Critical ムーンウォーク ユニバーサル ピー ティ ワイ エル ティ ディ
Publication of JP2010518469A publication Critical patent/JP2010518469A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647Migration mechanisms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/119Details of migration of file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/174Redundancy elimination performed by the file system
    • G06F16/1744Redundancy elimination performed by the file system using compression, e.g. sparse files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608Saving storage space on storage systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理システムであって、一次記憶装置に記憶されているデータファイルスタブと、二次記憶装置に記憶されているデータファイルと、を有し、データファイルスタブは、データファイルに関連する元のファイルメタデータおよび追加のスタブメタデータを有し、データファイルは、データファイルスタブに関連する元のファイルコンテンツおよび追加のファイルメタデータを有し、追加のスタブメタデータは、データファイルを位置づけ修復することに関連する場所及び情報を含み、追加のファイルメタデータは、スタブの場所およびコンテンツに関連する情報を有し、追加のスタブメタデータおよび追加のファイルメタデータは、記憶すべきデータが処理状態を把握するミドルウェアなしでアクセスできるような形式および構成になっている、データ管理システム。
【選択図】図1

Description

本発明は、データ管理システムに関する。本発明は特に、電子データ格納システムまたはそのようなシステム内部の要素の内部または間での電子的に格納された情報のマイグレーション、複製および/または移動のためのデータ管理システムのアプリケーションを有するが、ユーザによる実質的にシームレスなアクセスも保持する。本発明はまた、特に階層的記憶管理のアプリケーションを有するが、この利用の分野に限定されない。
情報を電子的に格納する利用には長らく以下の問題があった。つまり、いったん情報が「履歴」になり変化を必要としなくなると、そのような情報を「一次記憶装置」に格納することは非効率的であり、また高価である。ここで、一次記憶装置は、通常はコンピュータシステムが、最終的に永久記録として保存すべき情報の生成、修正および/または操作のために使用するものである。したがって、電子的に格納された情報は、しばしば「アーカイブ化」され、「二次記憶装置」へのデータのマイグレーションを要求する。加えて、比較的新しく生成された情報であっても、滅多にアクセスされないと、二次記憶装置に分類されることがある。一般に、二次記憶装置は、一次記憶装置と比べてアクセスが遅く、検索時間が長い。しかし、二次記憶装置に記憶されている情報の要求が比較的低いので、このような低パフォーマンス使用は、情報のアクセス性に通常影響を及ぼさない。
しかし、一次記憶装置から二次記憶装置へのデータのマイグレーションを伴う現在のシステムは、サーバであれ、データベースであれ、インデックスであれ、ある形態の「処理状態を把握するミドルウェア」を採用している。処理状態を把握するミドルウェアは、したがって、追加の層を導入し、それによって潜在的なエラーポイントを作り出し、また、拡張可能性および/または拡張容易性に重大な影響を及ぼす。潜在的なエラーの形態は、必ずしも二次記憶に情報を記憶するというエラーではなく、データの検索を妨げるような、処理状態を把握するミドルウェアのアプリケーションソフトウェア内でのエラーである。
階層的記憶管理(HSM)によって、現在のシステムは、処理状態を把握するミドルウェアを用いたデータのマイグレーションを伴う。実際には、HSMは、専用のソフトウェア、たとえば、「コムヴァルト(CommVault)」、「データミグレータ(Data migrator)」、「ヴェリタスエンタープライズヴァルト(Veritas Enterprise Vault)」等の商標名で知られているソフトフェアによって実行されるのが一般である。このような「処理状態を把握するミドルウェア」は、既に述べた欠点を有する追加の層を生成する。従来技術で知られているHSMシステムは、集中管理を利用していると言われることが時々ある。しかしながら、このようなシステムは、単一のマシーンからエージェントへのタスクの委任は行わず、ログインモデルを利用しユーザが単一のログインポイントから任意の数の管理サーバを個別に管理している。すなわちこのようなシステムは、高価な管理および諸々のコンフィギュレーションを利用している。
本明細書では、文脈上別の意味で理解することが要求されない限り、「データ」という用語は、電子的または電気的に読み取り可能な形態で記憶された情報を含むものとする。この用語はまた、文脈上別の意味で理解することが要求されない限り、バイナリラージオブジェクト(ブロブ)、ファイルおよび任意のデータ表現タイプを含むが、それに限定されない、すべてのデータオブジェクトタイプおよび/またはファイルタイプ内に記憶されたデータを含むものとする。本明細書では、文脈上別の意味で理解することが要求されない限り、単数形は複数形を包含し、複数形は単数形を包含するものとする。
本発明は、先行技術の問題の少なくとも1つを軽減するようなデータ管理システムを提供するか、少なくとも、既存のシステムに対する経済的に効果的な代替形態を提供する。本発明のその他の目的および利点は、以下の説明から明らかになる。
上記の内容に鑑みて、本発明の一態様は、おおむね、記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理システムであって、処理状態を把握するミドルウェアを有さないヴァーチャル階層的記憶管理システムを有し、コントロールチャンネル、データチャンネル、デミグレーションのみを要求するデータチャネルの処理状態を把握しないエージェントの特徴を提供し、処理状態を把握するミドルウェアの特徴は提供しない、データ管理システムに関する。好適には、データの転送は、目標デバイスに直接ストリーミングされる。好適には、このようなシステムはスタブを有する。その形態の場合、スタブからデータストリームへのマッピングとデータストリームからスタブへのマッピングを有する。スタブは全体的に意味のあるスタブであり、それによって、スタブ自身が二次記憶装置からのコンテンツを位置づけし修復するのに十分なものになっている。好適には、スタブは技術的にニュートラルな表現を有する。好適には、スタブは、デミグレーションなしでシステム間を移動することができる。このような形態の場合、スタブは、異なるオペレーションシステムに行き来することができ、それによって、サーバ間のデミグレーションなしで効率よく移動することができるようになる。好適には、データ管理システムは、集中管理および分散的実行を利用する。
別の一態様において、本発明は概ね、記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理システムであって、
一次記憶装置に記憶されているデータファイルスタブと、
二次記憶装置に記憶されているデータファイルと、を有し、
データファイルスタブは、データファイルに関連する元のファイルメタデータおよび追加のスタブメタデータを有し、
データファイルは、データファイルスタブに関連する元のファイルコンテンツおよび追加のファイルメタデータを有し、
追加のスタブメタデータは、データファイルを位置づけ修復することに関連する場所及び情報を含み、
追加のファイルメタデータは、スタブの場所およびコンテンツに関連する情報を有し、
追加のスタブメタデータおよび追加のファイルメタデータは、記憶すべきデータが処理状態を把握するミドルウェアなしでアクセスできるような形式および構成になっている、データ管理システム、に関する。
好適には、データ管理システムは、は、データファイルスタブおよび記憶すべき元のファイルコンテンツを有する一次情報源からデータファイルを生成する1つまたは複数のコンピュータ上で動作可能なソフトウェアを有している。
別の一態様において、本発明は、概ね、記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理方法であって、
記憶すべき元のファイルコンテンツを有する一次情報源からデータファイルスタブおよびデータファイルを生成し、
元のファイルメタデータを有するデータファイルスタブを有するためのデータファイルに関連する追加のスタブメタデータを生成し、ここで、追加のスタブメタデータは、データファイルに関連する場所および情報を有し、
一次記憶装置上に含まれている追加のスタブメタデータを有するデータファイルスタブを記憶し、
二次記憶装置上に含まれている追加のファイルメタデータを有するデータファイルを記憶し、
追加のスタブメタデータおよび元のファイルコンテンツへのアクセスを許可するのに十分な情報を有する追加のファイルメタデータは、追加のスタブメタデータを利用し、処理状態を把握するミドルウェアを有さない、方法、に関する。
別の一態様において、本発明は、概ね、記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理方法であって、
1つまたは複数のコンピュータ上にソフトウェアを提供しかつそれを実行し、それによって記憶すべき元のファイルコンテンツを有する一次情報源からデータファイルスタブおよびデータファイルを作成し、
データファイル内に含めるためにデータファイルに関連する追加のスタブメタデータを生成し、追加のスタブメタデータは、データファイルに関連する場所および情報を含み、
記憶すべき元のファイルコンテンツを有するデータファイル内に含めるためにデータファイルスタブに関連する追加のファイルメタデータを生成し、追加のファイルメタデータは、データファイルスタブに関連する情報を含み、
一次記憶装置上に含まれている追加のスタブメタデータを含むデータファイルスタブを記憶し、
二次記憶装置上での記憶のために、含まれている追加のファイルメタデータを有するデータファイルを転送し、データの転送は、目標のデバイスに直接ストリーミングされ、
追加のスタブメタデータおよび元のファイルコンテンツへのアクセスを許可するのに十分な情報を有する追加のファイルメタデータは、追加のスタブメタデータを利用し、処理状態を把握するミドルウェアを有さない、方法、に関する。
データフィルの作成は、一次記憶装置から二次記憶装置へのデータの転送を要求し、データの転送は、好適には、ステージングとは対照的に目標デバイスへ直接ストリーミングされ、それにより、中間のステージエラーに起因するデータの損失のリスクを実質的になくす、ということが理解されるであろう。ストリーミングは、マルチプロキシチェーンによって許可され得る。好適には、ソフトウェアは、1つまたは複数のコンピュータの分散的実行を利用する。この1つまたは複数のコンピュータは、互いに操作接続されて、1つのコンピュータネットワークを構築することが好ましい。
別の一態様において、本発明は、概ね、記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理方法であって、
1つまたは複数のコンピュータ上にソフトウェアを提供しかつそれを実行し、それによって、1つまたは複数のコンピュータの分散的実行を伴う集中管理を利用して、記憶すべき元のファイルコンテンツを有する一次情報源からデータファイルスタブおよびデータファイルを作成し、
データファイル内に含むためのデータファイルに関連する追加のスタブメタデータを生成し、追加のスタブメタデータは、データファイルに関連する場所および情報を含み、
記憶すべき元のファイルコンテンツを有するデータファイル内に含めるためのデータファイルスタブに関連する追加のファイルメタデータを生成し、追加のファイルメタデータは、データファイルスタブに関連する情報を含み、
一次記憶装置上に含まれている追加のスタブメタデータを含むデータファイルスタブを記憶し、
二次記憶装置上に含まれている追加のファイルメタデータを含むデータファイルを記憶し、
追加のスタブメタデータおよび元のファイルコンテンツへのアクセスを許可するのに十分な情報を有する追加のファイルメタデータは、追加のスタブメタデータを利用し、処理状態を把握するミドルウェアを有さない、方法、に関する。
メタデータは、データストリームに先行してもよいし、データストリームに後続してもよいし、あるいはデータストリーム内に埋設されていてもよい。または、メタデータは、記憶すべき情報のヘッダ、フッタ、または記憶すべき情報に一体化されていてもよく、そうでなければ、追加のファイルメタデータがある場合にはデータストリーム内に埋設されていてもよい。
必要なルールおよびポリシーを提供するために、ソフトウェアは、好適には、中央データ管理レポジトリを有しており、それによって、ソフトウェアは、エージェントにとって適切な選択されたルールに従って実行され得る。このエージェントを通して、記憶すべき情報がアクセスされ得る。もちろん、このプロセスにおいては1つ以上のエージェントであってもよいが、元のファイルメタデータおよび追加のファイルメタデータの両方が、1つまたは複数のエージェントに対して実質的にトランスペアレントな記憶すべき情報へのアクセスを許可するのに十分な情報を有するために必要である、ということが理解されるであろう。
好適には、システムは、トランスペアレントな検索(でミグレーション)を可能にする。この形態の場合、エージェントは、他の管理コントロールや指示に依拠することなく自分自身をデミグレーションすることができる。スタブに含まれている情報とマイグレートされたファイルとの対称的な性質によって、スタブに戻る逆マッピングが可能になり、よって、二次記憶装置上のマイグレートされたファイルからのスタブの生成が可能になり、それによってディザスタリカバリ機能の基本的土台が提供される。スタブに含まれている情報とマイグレートされたファイルとの対称的な性質がデミグレーションなしのスタブの移動を可能にする、ということが分かるであろう。
システムは、記憶および/または伝送のためのデータの圧縮も含み得る。
本発明をより分かりやすくするために、そして実践的に説明するために、添付の図面を参照しながら、以下に本発明の一実施形態を説明する。
本発明に係るデータ管理システムのダイアグラム図である。
図1に示されているデータ管理システム10の典型的な動作環境は、アドミニストレータのワークステーション11を有する。このワークステーションは、矢印21で示されているHTTPSを経由してポリシーエンジン12にアクセスするために利用してもよい。ファイルサーバークラスター13は、電光状の線23によって示されている二次記憶装置14に動作接続されている。ポリシーエンジンは、矢印22によって示されているファイルサーバークラスターに動作接続されている。ユーザ15は、双方向矢印24によって示されているファイルサーバークラスターに動作接続されている。「ムーンウォークドクターツール(Moonwalk Dr Tool)」という商標名が付されたディザスターリカバリーツール16もまた、それぞれ矢印25および26で示されたサーバクラスタおよび二次記憶装置に動作接続されている。
直前の段落に記載されたデータ管理システムは、以降に記載する動作品質を参照することでよりよく理解されまた実践的に取り組むことができるようになる。明瞭にするために、図1において丸で囲んだ参照番号は、明細書では括弧を使って示すことにする。
使用中に、システムアドミニストレータは、ポリシーエンジン(イーグル(Eagle))にHTTPS(1)を経由してアクセスし、スケジュールに沿って展開されるさまざまなルールおよびデータ管理のためのポリシーを生成する。続いて、ポリシーエンジンは、電子ディレクトリまたはジェネリックディレクトリサービス(GDS)を経由して目標ファイルシステムに向かっていき、スケジュールされているタスク2を実行するために必要な情報を蓄積する。適切なファイル情報を有すると、続いてポリシーエンジンは、アプリケーションサーバ(2)に常駐するエージェントにタスクを任せる。
任された特定のタスクが行われているファイルは、ファイルの現在の場所とファイルに所属する新しい場所とに関する追加のメタデータを有する。そして、ファイルは、安全なSSLを用いて、目標二次記憶装置(3)に直接ストリーミングされる。
いったんファイルの転送が成功すると、その旨がエージェントに告知され、エージェントは、元のファイルコンテンツを削除して、元のファイルコンテンツの場所内のスタブファイルを生成する。このスタブファイルは、すべてのメタデータを含んでいる。このメタデータは、元のファイルに属するとともに、今や二次記憶装置に常駐するようになったマイグレートされたファイルにアクセスするために必要な上記の追加のメタデータを含む。
ユーザが元の場所にあるファイル(4)にアクセスすると、アプリケーションは、スタブファイルは元のファイルと論理的に同一のものだと認識する。その理由は、すべてのメタデータが保存されているからである。しかしながら、その後、追加のメタデータは、エージェントに、実際のファイルは他の場所に常駐しているという事実を警告する。すると、エージェントは、ファイルを検索し、ファイルを直接、トランスペアレントに元の場所(3)に戻して、インデックスやデータベース等の他のソース/場所内に含まれている情報を参照することなく、任意のアプリケーションに、またはスタブファイルおよびマイグレートされたファイルの両方にカプセル化されているメタデータのみを利用しているユーザに送る。
スタブファイルおよびマイグレートされたファイルの両方にある追加のメタデータの対称カプセル化によって、万一スタブファイルが失われたり破損した場合の障害回復が可能になる。スタブファイルが破損したり失われたためにファイルにユーザがアクセスできない場合、ムーンウォークドクターツールが、関連する二次記憶装置上のマイグレートされたファイルに、問題となっているファイル5について問い合わせ、その後、エージェントに指示して、関連する一時記憶場所上にスタブファイルを再び生成させる。すると、ユーザは、新しいスタブファイルを経由してファイルにアクセスし続けることができるようになる。
本発明を特定の例を参照して記載してきたが、当業者には、本願に記載し以下の特許請求の範囲に暫定的に定義した本発明の広い範囲および範疇内の他の形態で本発明を実施してもよいということが理解されるであろう。

Claims (17)

  1. 記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理システムであって、
    処理状態を把握するミドルウェアを有さないヴァーチャル階層的記憶管理システムを有し、
    コントロールチャンネル、データチャンネル、デミグレーションのみを要求するデータチャネルの処理状態を把握しないエージェントの特徴を提供し、処理状態を把握するミドルウェアの特徴は提供しない、データ管理システム。
  2. 記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理システムであって、
    処理状態を把握するミドルウェアを有さないヴァーチャル階層的記憶管理システムを有し、
    コントロールチャンネル、データチャンネル、デミグレーションのみを要求するデータチャネルの処理状態を把握しないエージェントの特徴を提供し、処理状態を把握するミドルウェアの特徴は提供せず、
    データの転送は、目標デバイスに直接ストリーミングされる、データ管理システム。
  3. マイグレートされたファイルとしての記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理システムであって、
    処理状態を把握するミドルウェアを有さないヴァーチャル階層的記憶管理システムを有し、
    コントロールチャンネル、データチャンネル、デミグレーションのみを要求するデータチャネルの処理状態を把握しないエージェントの特徴を提供し、処理状態を把握するミドルウェアの特徴は提供せず、
    スタブからデータストリームへのマッピングとデータストリームからスタブへのマッピングを有する、データ管理システム。
  4. 請求項3に記載のデータ管理システムにおいて、
    スタブは全体的に意味のあるスタブであり、それによって、スタブ自身が二次記憶装置からのコンテンツを位置づけし修復するのに十分なものになっている、データ管理システム。
  5. 記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理システムであって、
    処理状態を把握するミドルウェアを有さないヴァーチャル階層的記憶管理システムを有し、
    コントロールチャンネル、データチャンネル、デミグレーションのみを要求するデータチャネルの処理状態を把握しないエージェントの特徴を提供し、処理状態を把握するミドルウェアの特徴は提供せず、
    集中管理および分散的実行を利用する、データ管理システム。
  6. 記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理システムであって、
    一次記憶装置に記憶されているデータファイルスタブと、
    二次記憶装置に記憶されているデータファイルと、を有し、
    データファイルスタブは、データファイルに関連する元のファイルメタデータおよび追加のスタブメタデータを有し、
    データファイルは、データファイルスタブに関連する元のファイルコンテンツおよび追加のファイルメタデータを有し、
    追加のスタブメタデータは、データファイルを位置づけ修復することに関連する場所及び情報を含み、
    追加のファイルメタデータは、スタブの場所およびコンテンツに関連する情報を有し、
    追加のスタブメタデータおよび追加のファイルメタデータは、記憶すべきデータが処理状態を把握するミドルウェアなしでアクセスできるような形式および構成になっている、データ管理システム。
  7. 請求項6に記載のデータ管理システムにおいて、
    当該装置は、データファイルスタブおよび記憶すべき元のファイルコンテンツを有する一次情報源からデータファイルを生成する1つまたは複数のコンピュータ上で動作可能なソフトウェアを有している、データ管理システム。
  8. 請求項7に記載のデータ管理システムにおいて、
    当該装置は、集中データ管理レポジトリを有し、それによって、ソフトウェアがエージェントに適切な選択されたルールに従って実行され、エージェントによって記憶すべき情報にアクセスすることができる、データ管理システム。
  9. 請求項3〜8のいずれか1項に記載のデータ管理システムにおいて、
    スタブ内に含まれている情報およびマイグレートされたファイルは、対称な性質を有しており、それによって、スタブへ戻る逆マッピングが可能になっている、データ管理システム。
  10. 請求項9に記載のデータ管理システムにおいて、
    情報の対称な性質は、二次記憶装置上のマイグレートされたファイルからのスタブの生成を可能にするように構成されている、データ管理システム。
  11. 請求項9または10に記載のデータ管理システムにおいて、
    情報の対称な性質は、障害回復機能の基本的な構築をさらに提供するように構成されている、データ管理システム。
  12. 請求項9〜11のいずれか1項に記載のデータ管理システムにおいて、
    スタブ内に含まれている情報とマイグレートされたファイルとの対称な性質は、デミグレーションを伴わないスタブの移動を可能にするように構成されている、データ管理システム。
  13. 請求項3〜12のいずれか1項に記載のデータ管理システムにおいて、
    他の管理コントロール、指示、またはスタブ内部に含まれているメタデータおよびそれに関連するマイグレートされたファイルを除くいかなるデータ源にも依拠することなく自分自身をデミグレーションすることができるエージェントを有する、データ管理システム。
  14. 記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理方法であって、
    記憶すべき元のファイルコンテンツを有する一次情報源からデータファイルスタブおよびデータファイルを生成し、
    元のファイルメタデータを有するデータファイルスタブを有するためのデータファイルに関連する追加のスタブメタデータを生成し、ここで、追加のスタブメタデータは、データファイルに関連する場所および情報を有し、
    一次記憶装置上に含まれている追加のスタブメタデータを有するデータファイルスタブを記憶し、
    二次記憶装置上に含まれている追加のファイルメタデータを有するデータファイルを記憶し、
    追加のスタブメタデータおよび元のファイルコンテンツへのアクセスを許可するのに十分な情報を有する追加のファイルメタデータは、追加のスタブメタデータを利用し、処理状態を把握するミドルウェアを有さない、方法。
  15. 記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理方法であって、
    1つまたは複数のコンピュータ上にソフトウェアを提供しかつそれを実行し、それによって記憶すべき元のファイルコンテンツを有する一次情報源からデータファイルスタブおよびデータファイルを作成し、
    データファイル内に含めるためにデータファイルに関連する追加のスタブメタデータを生成し、追加のスタブメタデータは、データファイルに関連する場所および情報を含み、
    記憶すべき元のファイルコンテンツを有するデータファイル内に含めるためにデータファイルスタブに関連する追加のファイルメタデータを生成し、追加のファイルメタデータは、データファイルスタブに関連する情報を含み、
    一次記憶装置上に含まれている追加のスタブメタデータを含むデータファイルスタブを記憶し、
    二次記憶装置上での記憶のために、含まれている追加のファイルメタデータを有するデータファイルを転送し、データの転送は、目標のデバイスに直接ストリーミングされ、
    追加のスタブメタデータおよび元のファイルコンテンツへのアクセスを許可するのに十分な情報を有する追加のファイルメタデータは、追加のスタブメタデータを利用し、処理状態を把握するミドルウェアを有さない、方法。
  16. 記憶すべき元のファイルコンテンツを有する一次情報源から、データを一次および二次記憶装置に記憶させるためのデータ管理方法であって、
    1つまたは複数のコンピュータ上にソフトウェアを提供しかつそれを実行し、それによって、1つまたは複数のコンピュータの分散的実行を伴う集中管理を利用して、記憶すべき元のファイルコンテンツを有する一次情報源からデータファイルスタブおよびデータファイルを作成し、
    データファイル内に含むためのデータファイルに関連する追加のスタブメタデータを生成し、追加のスタブメタデータは、データファイルに関連する場所および情報を含み、
    記憶すべき元のファイルコンテンツを有するデータファイル内に含めるためのデータファイルスタブに関連する追加のファイルメタデータを生成し、追加のファイルメタデータは、データファイルスタブに関連する情報を含み、
    一次記憶装置上に含まれている追加のスタブメタデータを含むデータファイルスタブを記憶し、
    二次記憶装置上に含まれている追加のファイルメタデータを含むデータファイルを記憶し、
    追加のスタブメタデータおよび元のファイルコンテンツへのアクセスを許可するのに十分な情報を有する追加のファイルメタデータは、追加のスタブメタデータを利用し、処理状態を把握するミドルウェアを有さない、方法。
  17. 請求項14〜16のいずれか1項に記載の方法において、
    他の管理コントロール、指示、またはスタブ内部に含まれているメタデータおよびそれに関連するマイグレートされたファイルを除くいかなるデータ源にも依拠することないエージェント自身によるエージェントのデミグレーションを有する、方法。
JP2009547494A 2007-02-05 2008-02-05 データ管理システム Pending JP2010518469A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
AU2007900540A AU2007900540A0 (en) 2007-02-05 Data management system
PCT/AU2008/000133 WO2008095237A1 (en) 2007-02-05 2008-02-05 Data management system

Publications (1)

Publication Number Publication Date
JP2010518469A true JP2010518469A (ja) 2010-05-27

Family

ID=39681177

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009547494A Pending JP2010518469A (ja) 2007-02-05 2008-02-05 データ管理システム

Country Status (7)

Country Link
US (1) US9671976B2 (ja)
EP (1) EP2109835A4 (ja)
JP (1) JP2010518469A (ja)
AU (1) AU2008213892B2 (ja)
CA (1) CA2714961A1 (ja)
NZ (1) NZ578689A (ja)
WO (1) WO2008095237A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011039805A (ja) * 2009-08-12 2011-02-24 Hitachi Ltd 階層管理ストレージシステムおよびストレージシステムの運用方法

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2714961A1 (en) 2007-02-05 2008-08-14 Moonwalk Universal Pty Ltd Data management system
US9069779B2 (en) * 2007-12-07 2015-06-30 Brocade Communications Systems, Inc. Open file migration operations in a distributed file system
US20090150462A1 (en) * 2007-12-07 2009-06-11 Brocade Communications Systems, Inc. Data migration operations in a distributed file system
US8468548B2 (en) * 2010-12-17 2013-06-18 Microsoft Corporation Multi-tenant, high-density container service for hosting stateful and stateless middleware components
US9552363B2 (en) * 2013-04-30 2017-01-24 Microsoft Technology Licensing, Llc File management with placeholders
US9166866B2 (en) * 2013-04-30 2015-10-20 Microsoft Technology Licensing, Llc Hydration and dehydration with placeholders
US9218350B2 (en) 2013-04-30 2015-12-22 Microsoft Technology Licensing, Llc Searching and placeholders
US9405767B2 (en) 2013-05-01 2016-08-02 Microsoft Technology Licensing, Llc Streaming content and placeholders
US9189533B2 (en) 2013-05-29 2015-11-17 Microsoft Technology Licensing, Llc Sync framework extensibility
US11250203B2 (en) 2013-08-12 2022-02-15 Microsoft Technology Licensing, Llc Browsing images via mined hyperlinked text snippets
US10095704B2 (en) * 2014-08-26 2018-10-09 Ctera Networks, Ltd. Method and system for routing data flows in a cloud storage system
JP6075571B2 (ja) 2014-10-31 2017-02-08 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation 階層型ストレージ・システムでのファイルの移動方法
CN106295386B (zh) * 2015-06-02 2021-04-27 阿里巴巴集团控股有限公司 数据文件的保护方法、装置及终端设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005505829A (ja) * 2001-09-26 2005-02-24 イーエムシー コーポレイション 移動および消去の候補の効率的な検索
JP2005538469A (ja) * 2002-09-10 2005-12-15 イグザグリッド システムズ, インコーポレイテッド 階層型格納管理を用いるサーバシェア移送およびサーバ回復のための方法および装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6269382B1 (en) 1998-08-31 2001-07-31 Microsoft Corporation Systems and methods for migration and recall of data from local and remote storage
US6449615B1 (en) * 1998-09-21 2002-09-10 Microsoft Corporation Method and system for maintaining the integrity of links in a computer network
US6804719B1 (en) 2000-08-24 2004-10-12 Microsoft Corporation Method and system for relocating files that are partially stored in remote storage
US6976060B2 (en) * 2000-12-05 2005-12-13 Agami Sytems, Inc. Symmetric shared file storage system
ATE361500T1 (de) 2000-12-15 2007-05-15 Ibm Methode und system für skalierbare, hochperformante hierarchische speicherverwaltung
WO2004021225A1 (en) * 2002-08-30 2004-03-11 Arkivio, Inc. Techniques for moving stub files without recalling data
US20040083202A1 (en) * 2002-08-30 2004-04-29 Arkivio, Inc. Techniques to control recalls in storage management applications
US20050071560A1 (en) 2003-09-30 2005-03-31 International Business Machines Corp. Autonomic block-level hierarchical storage management for storage networks
US7165059B1 (en) * 2003-12-23 2007-01-16 Veritas Operating Corporation Partial file migration mechanism
US8549121B2 (en) * 2004-07-14 2013-10-01 Spinella Ip Holdings, Inc. Stateless-agentless system and method of managing data in a computing environment
US7546431B2 (en) * 2005-03-21 2009-06-09 Emc Corporation Distributed open writable snapshot copy facility using file migration policies
US7962709B2 (en) * 2005-12-19 2011-06-14 Commvault Systems, Inc. Network redirector systems and methods for performing data replication
US7984454B2 (en) * 2006-12-19 2011-07-19 International Business Machines Corporation Migration of single root stateless virtual functions
CA2714961A1 (en) 2007-02-05 2008-08-14 Moonwalk Universal Pty Ltd Data management system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005505829A (ja) * 2001-09-26 2005-02-24 イーエムシー コーポレイション 移動および消去の候補の効率的な検索
JP2005538469A (ja) * 2002-09-10 2005-12-15 イグザグリッド システムズ, インコーポレイテッド 階層型格納管理を用いるサーバシェア移送およびサーバ回復のための方法および装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CSND199800247006; William R. Buckley: 'Hobnobbing with the Hyper Hacker' ASCII 第15巻 第4号, 19910401, p. 313〜320, 株式会社アスキー *
JPN6012068424; William R. Buckley: 'Hobnobbing with the Hyper Hacker' ASCII 第15巻 第4号, 19910401, p. 313〜320, 株式会社アスキー *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011039805A (ja) * 2009-08-12 2011-02-24 Hitachi Ltd 階層管理ストレージシステムおよびストレージシステムの運用方法

Also Published As

Publication number Publication date
US9671976B2 (en) 2017-06-06
WO2008095237A1 (en) 2008-08-14
NZ578689A (en) 2011-10-28
AU2008213892A1 (en) 2008-08-14
EP2109835A4 (en) 2011-06-08
US20100106686A1 (en) 2010-04-29
CA2714961A1 (en) 2008-08-14
EP2109835A1 (en) 2009-10-21
AU2008213892B2 (en) 2013-01-10

Similar Documents

Publication Publication Date Title
JP2010518469A (ja) データ管理システム
US9830096B2 (en) Maintaining data block maps of clones of storage objects
US10425480B2 (en) Service plan tiering, protection, and rehydration strategies
US7395389B2 (en) Extending non-volatile storage at a computer system
JP6009097B2 (ja) 分散オブジェクトストレージエコシステムにおけるコンテンツとメタデータの分離
US7904649B2 (en) System and method for restriping data across a plurality of volumes
US20120278553A1 (en) System and method for migration of data clones
US9430330B1 (en) System and method for managing environment metadata during data backups to a storage system
WO2019231646A1 (en) Garbage collection implementing erasure coding
US10996993B2 (en) Adaptive work distribution in distributed systems
US8768898B1 (en) Performing direct data manipulation on a storage device
JP2011516994A (ja) 冗長データ記憶システムへの指示に従ってのデータ配置
US20190303035A1 (en) Copying garbage collector for geographically distributed data storage environment
US7143235B1 (en) Proposed configuration management behaviors in a raid subsystem
US7805412B1 (en) Systems and methods for parallel reconstruction of files and objects
KR101531564B1 (ko) 네트워크 분산 파일 시스템 기반 iSCSI 스토리지 시스템에서의 부하 분산 방법 및 시스템
Bassi et al. Mobile management of network files
KR20150061314A (ko) 네트워크 분산 파일 시스템 기반 iSCSI 스토리지 시스템에서의 장애 복구 방법 및 시스템
Cavage et al. Bringing arbitrary compute to authoritative data
WO2014154016A1 (zh) 并行数据库管理系统及设计方案
US20110238776A1 (en) Method and system for the virtualized storage of a digital data set
Nikolaidis Tromos: a software development kit for virtual storage systems
KR20120045239A (ko) 메타 데이터 서버, 서비스 서버, 비대칭 분산 파일 시스템 및 그 운용 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120124

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130115

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130412

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130419

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20131008