JP2008519362A - コンテンツアドレスマッピングを維持するためのコンテンツアドレス記憶デバイス - Google Patents

コンテンツアドレスマッピングを維持するためのコンテンツアドレス記憶デバイス Download PDF

Info

Publication number
JP2008519362A
JP2008519362A JP2007540155A JP2007540155A JP2008519362A JP 2008519362 A JP2008519362 A JP 2008519362A JP 2007540155 A JP2007540155 A JP 2007540155A JP 2007540155 A JP2007540155 A JP 2007540155A JP 2008519362 A JP2008519362 A JP 2008519362A
Authority
JP
Japan
Prior art keywords
data object
content address
storage device
content
transmission source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007540155A
Other languages
English (en)
Inventor
リチャード アームストン
ウィリアム マコーネル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EMC Corp
Original Assignee
EMC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EMC Corp filed Critical EMC Corp
Publication of JP2008519362A publication Critical patent/JP2008519362A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/90335Query processing
    • G06F16/90339Query processing by using parallel associative memories or content-addressable memories

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

コンテンツアドレスマッピングを維持するよう構成されたコンテンツアドレス記憶デバイスを開示する。コンテンツアドレス記憶デバイスに記憶されるデータオブジェクト、及び送信ソースに識別されるローカルデータオブジェクトの識別子を送信ソースから受信しり。コンテンツアドレス記憶デバイスに関係付けられたコンテンツアドレスが、データオブジェクトのコンテンツの少なくとも一部に基づいて特定される。このデータオブジェクトは、コンテンツアドレス記憶デバイス上で、コンテンツアドレスに関係付けられた記憶ロケーションに記憶される。ローカルデータオブジェクト識別子をコンテンツアドレスに関係付けるマッピングは、コンテンツアドレス記憶デバイスで維持される。
【選択図】図1

Description

本発明は、概して言えばデータ記憶に関係し、より詳しくは、コンテンツアドレスマッピングを維持するように構成されたコンテンツアドレス記憶デバイスが開示されている。
(関連出願)
「CONTENT ADDRESSED STORAGE DEVICE WITH WEB SERVICES INTERFACE」という表題の同時係属の米国出願が、引用としてここにその全体を組み入れられ、また、「IMPLEMENTING APPLICATION SPECIFIC MANAGEMENT POLICIES ONN A CONTENT ADDRESSED STORAGE DEVICE」という表題の同時係属の米国出願が、引用としてここにその全体を組み入れられる。
コンテンツアドレス記憶(CAS)デバイスは、典型的には固定コンテンツを、ネットワークを介して記憶サーバーに記憶する。マサチューセッツ州のHopkintonにあるEMCTM社で製造販売されているCenteraTMCASデバイスはその一例である。通常、アプリケーションは記憶されるべきデータをCASデバイスへ送信する。CASデバイスは、記憶されるコンテンツの少なくとも一部に基づいて“コンテンツアドレス(CA)”を計算することにより、記憶場所を決定する。その後、CASデバイスは、その選択された場所にコンテンツを記憶し、データを送信したアプリケーションにそのコンテンツアドレスを戻す。コンテンツアドレスはクレーム確認などに用いられ、記憶アプリケーション(即ち、理論的には、CAを提供する別のアプリケーション)が前に記憶したコンテンツを検索できるようにする(そして、あるときは、削除などの制限されたオペレーションを実行する)。
上述した典型的なアプローチの下では、アプリケーションはコンテンツアドレスを受信し、そしてそのコンテンツアドレスとローカルオブジェクト識別子(例えば、ファイル名及び/又はパス)との間のマッピングを追跡(トレース)し、これによって記憶されたデータオブジェクトが、アプリケーションが実行するローカルシステムにおいて既知となる。これは、ローカルシステにおけるマッピング及び消費時間及びリソースを維持するよう構成されたアプリケーションに対するCASデバイスの使用を制限する。アプリケーションのあるタイプについて、上記マッピングを維持する機能性は既に存在していたり、組み込むとしても比較的簡単であるが、他のアプリケーションについては、データトラッキングの要求レベルは、記憶用CASデバイスを使用する上で障害になるかもしれない。
それゆえ、CASデバイス上のデータに関連するコンテンツアドレスと、アプリケーションが実行するローカルシステム上のデータオブジェクトのローカルオブジェクト識別子との間のマッピングをアプリケーションが維持することを要求することなく、アプリケーションが記憶用CASデバイスを使用できるようにする方法が求められている。
本発明は様々な方法で実現し得る。様々な方法とは、プロセス、装置、システム、合成物、あるいは、コンピュータで読み取り可能なメディア(例えば、コンピュータ読み取り可能記録媒体、又は、プログラム命令が光もしくは電気的な通信リンクに送られるネットワーク等)を含むものである。本明細書では、このような実現方法や本発明がとり得る他の形式を技術として言及する。一般に、開示された処理ステップの順序は発明の範囲で変わり得る。
本発明の一又は複数の実施例の詳細な説明が、本発明の原理を示した添付図に従って開示される。そのような実施例に関連して本発明を記載するが、本発明は開示した実施例に限るものではない。発明の範囲は請求項のみにより限定され、発明は多数の代替案、修正、あるいは均等物を含む。本発明の完全な理解を得るため、以下に幾つかの具体的な詳細を説明する。これらの詳細は例を示すためのものであり、本発明は、説明した詳細に関わらず請求項に従い実現され得る。明確さを目的として、本発明を不必要に不明瞭にしないようにするため、本発明に関連する技術分野で知られている技術構成については詳細には説明しない。
本発明の様々な実施例は、以下の詳細な説明及び添付の図面において開示される。
コンテンツアドレスマッピングを維持するよう構成されたコンテンツアドレス可能な記憶デバイスを開示する。ある実施例では、コンテンツアドレス記憶デバイスに記憶されたデータオブジェクト、及びローカルデータオブジェクト識別子であってこの識別子によってデータオブジェクトが送信ソース(例えば、アプリケーション)を識別するそのようなローカルデータオブジェクト識別子を受信する。コンテンツアドレス記憶デバイスのデータオブジェクトに関連付けられたコンテンツアドレスは、データオブジェクトのコンテンツの少なくとも一部に基づいて特定される。そのデータは、コンテンツアドレス記憶デバイス上のコンテンツアドレスに関連付けられた記憶ロケーションにオブジェクトが記憶されている。ローカルデータオブジェクト識別子をコンテンツアドレスに関連付けるマッピングは、コンテンツアドレス記憶デバイスで維持される。
図1は、先行技術の典型的なコンテンツアドレス記憶(CAS)デバイスを説明するブロック図である。アプリケーション102は、記憶するためのCASデバイス104にデータを送信する。CASデバイス104は、データを記憶し、そのデータに関連したコンテンツアドレス(CA)をアプリケーション102に戻す。アプリケーション102は、各ファイル又は、CASデバイス104によってデータ用アプリケーション102に戻された対応のコンテンツアドレスと一緒に記憶用CASデバイス104に送信された他のデータセットを、ローカルデータオブジェクト識別子(例えば、ファイル名及び/又はパス)に関連付けるコンテンツマップ106を維持する。例示すれば、データオブジェクト“D:\data1”がCASデバイス104のアプリケーション102によって記憶され、そしてコンテンツアドレス“G45H433”がCASデバイス104によって戻され、CASデバイスのどこにデータオブジェクト“D:\data1”が記憶されたかをアプリケーション102に示す。将来、アプリケーション102が、CASデバイス104に記憶されたとしてデータオブジェクト“D:\data1”にアクセスする必要があるとすれば、アプリケーション102は、コンテンツマップ106内の対応コンテンツアドレスを探してそのコンテンツアドレスを使い、CASデバイス104のデータをアクセスするだろう。上述したように、図1に示したアプローチの下では、アプリケーション102は、コンテンツマップ106を維持するよう構成されなければならず、コンテンツマップ106は、付加的な機能性がアプリケーション102に構築され、アプリケーション102が実行するホスト上の付加メモリ及び処理リソースを消費することを要求する。
図2は、コンテンツアドレスマッピングを維持するよう構成されたコンテンツアドレス可能な記憶デバイスのブロック図である。アプリケーション202は、記憶されるCASデバイス204にデータを送信する。アプリケーションは、さらにアプリケーションに関連した固有識別子及びローカルデータオブジェクト識別子を提供し、これによって、送信されたデータは、アプリケーション及び/又はそのアプリケーションが実行するローカルホストに対して既知となる。CASデバイス204は、データの少なくとも一部に基づいてコンテンツアドレスを計算し、且つそのデータをコンテンツに関連する場所に記憶する。次に、CASデバイス204は、送信アプリケーション202用のCASデバイス204に維持されたコンテンツマップ206に、アプリケーション202がデータを識別するローカルデータオブジェクト識別子と、CASデバイス204条のデータに関連するコンテンツアドレスとの間の関連性を記憶する。例に示すように、アプリケーション202用のCASデバイス204によって維持されたコンテンツマップ206は、CASデバイス204によって維持された複数のコンテンツマップ206〜210の1つであり、CASデバイス204のデータを記憶する各アプリケーションのためのコンテンツマップである。
コンテンツマップ206〜210のそれぞれは、コンテンツマップに関係するアプリケーションに関連する固有のアプリケーション識別子(例えば、“アプリケーション#345”)によって識別される。各アプリケーション用のコンテンツマップは、CASデバイス204によって維持されているので、アプリケーション202などのアプリケーションは、コンテンツアドレス記憶デバイス及びローカルデータオブジェクト識別子によって生成されるコンテンツアドレス間のマッピングを維持するよう構成することは必要とされない。代りに、アプリケーションは、アプリケーションが実行しているローカルホストで既知となるローカルデータオブジェクト識別子によってCASデバイスが記憶するデータに対して、ただアクセス又は参照することができる。このアプローチは、例えば、CASデバイスは典型的には、他のデバイスが同様の方法でローカルドライブとしてCASデバイスにアクセスすることが要求されるような本来のファイルシステムを有していないにもかかわらず、記憶デバイスにアドレスされたコンテンツがローカルホストで付加的なドライブとしてあらわになることを可能にする。図2に示す例の場合、データが記憶され、関連のコンテンツマップが更新されると、CASデバイス204はアプリケーション202に対してオペレーション状態レポート又はメッセージを戻す。それは、例えば、データ記憶が成功したこと(又は可能であれば、成功しなかったこと)を示すものである。
ある実施例では、アプリケーション202は、TCP/IPネットワーク(不図示)などのネットワークを介してCASデバイス204にアクセスする。CASデバイス204は、ネットワークインタフェースカード(NIC)などの通信インタフェースを備え、通信を容易にする。加えて、CASデバイス204は、コンテンツマップ206〜210を記憶するのに用いるメモリ、アプリケーション202などのアプリケーションによってCASデバイス204に送信されたデータを記憶するよう構成された1以上の記憶ノード、及びデータの記憶・検索・CASデバイス204やコンテンツマッピングオペレーションの管理機能を実行するよう構成された1以上のプロセッサを含む。1又はそれ以上のプロセッサは、ソフトウェアによって構成された汎用プロセッサ(例えば、CPU)を含むことができ、上記機能及びオペレーション、及び/又は特定用途向け集積回路、フィールド・プログラマブル論理デバイス、又は同様に構成された他のデバイスを実行する。
図3は、CASデバイス上のコンテンツ・マッピングを維持する実施例で使用されるプロセスを説明するフローチャートである。
ある実施例の場合、図3のプロセスは、図2のCASデバイス204などのCASデバイスで実行する。データが検索される(302)。送信アプリケーションの固有アプリケーション識別子がそのデータに与えられたり、及び/又は、そうでなければ(例えば、データと一緒に受信された他の情報、データを受信したつながり等に基づいて)既知であるならば(304)、データを記憶する(308)。アプリケーション識別子が与えられず、しかも既知でもないとき(304)、アプリケーション識別子を得て(306)、データを記憶する(308)。
ある実施例の場合、各アプリケーションがそれ自身の識別子を生成し、その識別子をCASデバイスに提供する。このCASデバイスは、識別子が固有(unique)であるならば、承認し(acknowledge)及び認定(authorize)するが、その代わりに当該識別子を拒絶し、そしてアプリケーションによって提案された識別子が既に別のアプリケーションでCASデバイスと関連づけられているイベントにおいて、アプリケーションがアプリケーション用の異なる識別子を提案することを要求する。他の実施例においては、CASデバイスは相互作用する各アプリケーション用の固有アプリケーション識別子を生成するよう構成される。そのような実施例においては、306はアプリケーション用の固有識別子を生成すること、及び割当てられる固有識別子のアプリケーションを通知することを含む。その結果、このアプリケーションは記憶用CASデバイスへ送信される将来のデータとともに固有識別子を含むことができる。ある実施例において、アプリケーションは、記述されたヘッダー又は記憶用CASデバイスへデータを送信するためのアプリケーションによって使用されるメッセージの他のフィールドに識別子を含むことによってその固有識別子を提供する。ある代替的な実施例の場合、サードパーティの登録又は同様のサービスが固有アプリケーション識別子を登録アプリケーションに対して全体的に割当てる。そのような実施例では、306は、上記サードパーティ及び/又はアプリケーションがそのように行う要求からアプリケーション用の識別子を入手することを含む。
データを記憶すること(308)は、記憶されるコンテンツの少なくとも一部に基づいて、データ用のコンテンツアドレスを計算することを含む。このコンテンツアドレスは、CASデバイスをローカルデータオブジェクト識別子(例えば、ファイル名及び/又はパス)に関連づけ、この識別子によって、記憶されたデータオブジェクトが送信アプリケーション(例えば、アプリケーションが実行しているローカルホスト上のデータオブジェクト用のファイル名及び/又はパス)にとって既知となる(310)。コンテンツアドレスと対応のローカルデータオブジェクト識別子との間の関連性は、送信アプリケーションに関連するコンテンツマップにあるCASデバイスに記憶される(312)。ある実施例の場合、310及び312が結合され、送信アプリケーションに関連するコンテンツマップ内のロケーションに関係して、対応の値を記憶することによって、コンテンツアドレスと対応のローカルデータオブジェクト識別子との間の関連性行う。オペレーションの結果は送信アプリケーション(314)に報告され、その後、記憶されるべき次のデータが受信され且つ処理される(302)。上述したように、報告された結果は、要求されたデータ記憶オペレーションが上手く完了したことの報告を含むことができる。コンテンツアドレスを報告する必要はない。なぜなら、そのアプリケーション識別子及びアプリケーションにとってデータが既知のローカルデータオブジェクト識別子を提供することによって、CASデバイスによって維持されているコンテンツマップは、アプリケーションがCASデバイスに記憶されているデータをこのアプリケーションによってアクセス(例えば、検索)することを可能にするからである。より詳細については後述する。
図4は、CASデバイスに記憶されたデータにアクセスするための要求を処理する実施例で使用されるプロセスを説明するフローチャートである。
CASデバイスに記憶されたデータオブジェクトを受信するための要求が受信される(402)。ある実施例では、この要求は、要求アプリケーション及び、その要求アプリケーションによって要求データが既知となるローカルデータオブジェクト識別子に関連するアプリケーション識別子を含む。ローカルデータオブジェクト識別子は、CASデバイス上の対応のコンテンツアドレスにマップされる(404)。データはコンテンツアドレスに関連するローケーションから検索され(406)、要求アプリケーションに提供される(408)。
図5は、対応のコンテンツアドレスに対するローカルデータオブジェクト識別子をマップする実施例で使用されるプロセスを説明するフローチャートである。
ある実施例の場合、図5のプロセスは、図4のインプリメント(implement)404のために用いられる。要求アプリケーションに関連するアプリケーション識別子は、要求青に関連するコンテンツマップを識別するために用いられる(502)。ある実施例を挙げれば、その要求は、要求アプリケーションで維持されるコンテンツマップを含んだり及び/又は添付される。ある実施例では、コンテンツマップはCASデバイスによって維持される。コンテンツマップは、要求データに関連したローカルデータオブジェクト識別子を、CASデバイス上の対応のコンテンツアドレスにマップするために用いられる(504)。ある実施例では、ローカルデータオブジェクト識別子は、要求アプリケーションから受信された要求の中に含まれている。要求アプリケーションは、ローカルデータオブジェクト識別子を使うことによってデータを識別し、それゆえCASデバイス上のデータに関連するコンテンツアドレスを学習することも追跡することもまったく必要としてない。
図2に示す例に戻ると、アプリケーション202などのアプリケーションは、アプリケーション202に対してデータが既知となるローカルデータオブジェクト識別子(例えば、“D:\data1”によってデータを識別する要求をCASデバイス204に送信することによって、そしてアプリケーション用のアプリケーション識別子(例えば、“345”)を提供することによって、ある実施例のデータにアクセスするだろう。次に、CASデバイス204は、適用可能なコンテンツマップとしてコンテンツマップ206を識別し、次に、CASデバイス204の要求データに関連する対応コンテンツアドレスに対する要求の中にあるローカルデータオブジェクト識別子をマップするために(例えば、オブジェクト識別子“D:\data1”をコンテンツアドレス“G45H433”にマッピングすることによって)、コンテンツマップ206を使用する。次に、CASデバイス204は、対応データを検索するためにコンテンツアドレスを使用し、要求に応答してそれを要求アプリケーション202へ提供する。
図6は、CASデバイスにデータを記憶する実施例で使用されるプロセスのフローチャートである。
例示したように、アプリケーション(又は他の要求プロセス、システム、又はエンティティ)は、任意選択的に、CASデバイス上の対応コンテンツアドレスに対し、ローカルデータオブジェクト識別子のマッピングを維持したり、又はその代りにアプリケーション用の上記マッピングを維持するためにCASデバイスに依存するよう構成される。このアプローチは、マッピングを維持するよう構成されていない軽量及び/又は新規のアプリケーションなどのアプリケーションはもちろん、大規模データ記憶/バックアップアプリケーションなどの上記マッピング、及び/又はCASデバイスでのデータ記憶用のマッピングを維持するよう構成されたレガシー(legacy)アプリケーションの両方にCASデバイスが機能できるようにするものである。ある実施例では、図6のプロセスは、図2のCASデバイス204などのCASデバイスで実行される。データが受信される(602)。データを受信したアプリケーションが、CASデバイスがコンテンツマップを維持しているアプリケーションであるかどうかを判断する(604)。ある実施例では、CASデバイスがコンテンツマップを維持するソース(例えば、アプリケーション)からデータを受信したかどうかを、CASデバイスにデータを送るために送信アプリケーションによって使用されたメッセージのヘッダー又は他の部分にあるフラグ値又は他のデータフィールドを読み出すことにより判断する。ある実施例の場合、その決定は、アプリケーション識別子が存在する場合に、アプリケーションがアプリケーション識別子を供給したかどうか、そしてコンテンツマップがCASデバイス上で維持されたかどうかを決定することによって行われる。
ある実施例では、その決定はデータに関連したアプリケーション識別子を使って行われ、アプリケーションが、コンテンツデバイスがCASデバイスで維持されているアプリケーションであるか否かを、例えばテーブルを読み出すことによって、決定する。CASデバイスは、管理者又はユーザの何れかによって、即ち、アプリケーション自体によって、例えば、独占的に又は公に利用可能なAPI又は他のインタフェースで記述されるような1以上のコンフィギュレーションメッセージを送信することによって、上記決定を行うよう構成することもできる。コンテンツマップがCASデバイスで維持されないソース(例えば、アプリケーション)からデータを受信した場合、そのデータは記憶され(606)、そして関連のコンテンツアドレスが送信アプリケーションに報告される(608)。その後、そのプロセスは次の受信データのために繰り返される。コンテンツマップがCASデバイスで維持されるソースからデータを受信した場合、そのデータは記憶され(610)、CASデバイス上のデータに関連したコンテンツアドレスが、対応のローカルデータオブジェクト識別子に関連付けられ、この識別子によってデータオブジェクトが送信アプリケーション(例えば、他のソース)に対して既知となる(612)。送信アプリケーション用のCASデバイスで維持されたコンテンツマップが更新される(614)。そして、オペレーションの結果(例えば、成功、失敗など)が送信アプリケーションに報告される(616)。その後、そのプロセスは次の受信データのために繰り返される。
図7は、あるアプリケーション(又は他のソース)用であって、その他のためではないコンテンツマップを維持するよう構成されたCASデバイスのデータにアクセスするための要求を処理する実施例で使用されるプロセスのフローチャートである。
CASデバイスに記憶されたデータオブジェクトにアクセスするための要求が受信される(702)。要求アプリケーション(又は他のソース)が、コンテンツマップがCASデバイス上で維持されるためのアプリケーションであるかどうかを判断する。ある実施例の場合、604に関して上述した1以上のアプローチが用いられ、704でその決定を行う。ある実施例では、704での決定は、その要求がデータオブジェクトのためのコンテンツアドレスを含んでいるかどうかに基づいて行われる。要求アプリケーションが、コンテンツマップがCASデバイス上で維持されるためのアプリケーションでない場合(704)、要求データが(例えば、要求に含まれ及び/又は要求とともに提供されるコンテンツアドレスを使って)検索され、そして要求アプリケーションへ提供する(708)。その後、このプロセスが終了する。要求アプリケーションが、コンテンツマップがCASデバイス上で維持されるためのアプリケーションである場合(704)、例えば、要求アプリケーション用のCASデバイスで維持されたコンテンツマップを使って(706)、要求データに関連したローカルデータオブジェクト識別子が対応のコンテンツアドレスにマップされる。そして、要求されたデータを検索するためにコンテンツマップが使われ、要求アプリケーションにそれを提供して(708)、その後、このプロセスは終了する。
ここで述べたアプローチを用いれば、ローカルデータオブジェクト識別子に対してコンテンツアドレスのマッピングを維持するよう構成されないアプリケーションは、データを記憶するためにCASデバイスを依然として使用することができる。これにより、アプリケーション開発を単純化させ、アプリケーションが実行するローカルホスト上のリソースの消費を削減し、そしてオフシステム(off-system)記憶装置用のCASデバイスを使用できるアプリケーションの分野を拡大することが可能になる。
先の実施例においては、理解を明確にすることを目的として詳細に説明したのであるが、本発明はこの詳細さに限定されるものではない。本発明を実行する多くの代替的な方法がある。開示した明細書は、限定的に解釈されるものではなく例示的にみなされるものである。
先行技術の典型的なコンテンツアドレス記憶(CAS)デバイスを説明するブロック図である。 コンテンツアドレスマッピングを維持するよう構成されたコンテンツのブロック図である。 CASデバイス上のコンテンツマッピングを維持する実施例で使用されるプロセスを説明するフローチャートである。 CASデバイスに記憶されたデータにアクセスするための要求を処理する実施例で使用されるプロセスを説明するフローチャートである。 対応のコンテンツアドレスに対するローカルデータオブジェクト識別子をマップする実施例で使用されるプロセスを説明するフローチャートである。 CASデバイスにデータを記憶する実施例で使用されるプロセスのフローチャートである。 あるアプリケーション(又は他のソース)用であって、その他のためではないコンテンツマップを維持するよう構成されたCASデバイスのデータにアクセスするための要求を処理する実施例で使用されるプロセスのフローチャートである。

Claims (33)

  1. コンテンツアドレス記憶デバイスにデータを記憶する方法であって、
    前記コンテンツアドレス記憶デバイスに記憶されるデータオブジェクト、及びローカルデータオブジェクト識別子を送信ソースから受信する処理であって、その識別子によって前記データオブジェクトは前記送信ソースに識別されることになる当該処理と、
    前記コンテンツアドレス記憶デバイス上のデータオブジェクトに関連付けられたコンテンツアドレスを、前記データオブジェクトのコンテンツの少なくとも一部に基づいて特定する処理と、
    前記コンテンツアドレス記憶デバイス上のデータオブジェクトを、前記コンテンツアドレスに関係付けられた記憶ロケーションに記憶する処理と、
    前記コンテンツアドレス記憶デバイス上で、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関係付けるマッピングを維持する処理と、
    を含む方法。
  2. 前記送信ソースが送信アプリケーションを含むことを特徴とする請求項1に記載の方法。
  3. 前記コンテンツアドレス記憶デバイス上で、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関係付けるマッピングを維持する処理が、送信ソースに関係付けられたコンテンツマップを更新することを含む、請求項1に記載の方法。
  4. 前記ローカルデータオブジェクト識別子が、前記送信ソースに関係付けられたローカルホストのデータオブジェクトに関係するファイル名を含む、請求項1に記載の方法。
  5. 前記ローカルデータオブジェクト識別子が、前記送信ソースに関係付けられたローカルホストのデータオブジェクトに関係するファイルパスを含む、請求項1に記載の方法。
  6. 前記データオブジェクトがファイルを含む、請求項1に記載の方法。
  7. 前記データオブジェクトの記憶が成功したことを前記送信ソースに報告する処理を更に含む、請求項1に記載の方法。
  8. 前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものであるかを判断する処理を更に含む、請求項1に記載の方法。
  9. 前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものであるかを判断する処理と、
    前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものである場合、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関連付けるマッピングを前記コンテンツアドレス記憶デバイスで維持する前記処理を実行する処理と、
    前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものでない場合、前記維持する処理を省き、且つ前記コンテンツアドレスを前記送信ソースに送信する処理と、
    を含む請求項1に記載の方法。
  10. 前記送信ソースに関連付けられたソース識別子が識別されるかどうかを判断する処理を更に含み、前記ソース識別子が識別される場合は、そのソース識別子を用いて前記送信ソースに関連付けられたコンテンツマップを特定し、この場合、前記マッピングが前記コンテンツマップに維持されていることを特徴とする請求項1に記載の方法。
  11. 前記データオブジェクトにアクセスするため、前記ローカルデータオブジェクト識別子を有する要求を要求者から受信する処理と、
    前記マッピングを用いて前記ローカルデータオブジェクト識別子に関連付けられたコンテンツアドレスを特定する処理と、
    前記コンテンツアドレスを用いて前記データオブジェクトを検索する処理と、
    前記データオブジェクトを前記要求者に提供する処理と、
    を更に含む、請求項1に記載の方法。
  12. コンテンツアドレス記憶デバイスであって、
    (1)前記コンテンツアドレス記憶デバイスに記憶されるデータオブジェクト、及びローカルデータオブジェクト識別子を送信ソースから受信するよう構成された通信インタフェースであって、その識別子によって前記データオブジェクトは前記送信ソースに識別されることになる当該通信インタフェースと、
    (2)メモリと、
    (3)(i)前記コンテンツアドレス記憶デバイス上のデータオブジェクトに関連付けられたコンテンツアドレスを、前記データオブジェクトのコンテンツの少なくとも一部に基づいて特定し、
    (ii)前記メモリ内のデータオブジェクトを、前記コンテンツアドレスに関係付けられた記憶ロケーションに記憶し、
    (iii)前記コンテンツアドレス記憶デバイス上で、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関係付けるマッピングを維持する、
    よう構成されたプロセッサと、
    を備えたコンテンツアドレス記憶デバイス。
  13. 前記送信ソースが送信アプリケーションを含むことを特徴とする請求項12に記載のコンテンツアドレス記憶デバイス。
  14. 送信ソースに関係付けられたコンテンツマップを更新することによって、前記プロセッサが、前記コンテンツアドレス記憶デバイス上で、少なくとも一部で、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関係付けるマッピングを維持するよう構成された、請求項12に記載のコンテンツアドレス記憶デバイス。
  15. 前記ローカルデータオブジェクト識別子が、前記送信ソースに関係付けられたローカルホストのデータオブジェクトに関係するファイル名を含む、請求項12に記載のコンテンツアドレス記憶デバイス。
  16. 前記ローカルデータオブジェクト識別子が、前記送信ソースに関係付けられたローカルホストのデータオブジェクトに関係するファイルパスを含む、請求項12に記載のコンテンツアドレス記憶デバイス。
  17. 前記データオブジェクトがファイルを含む、請求項12に記載のコンテンツアドレス記憶デバイス。
  18. 前記プロセッサが、前記データオブジェクトの記憶が成功したことを前記送信ソースに報告するよう更に構成されたことを特徴とする、請求項12に記載のコンテンツアドレス記憶デバイス。
  19. 前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものであるかを判断するよう前記プロセッサが構成されていることを特徴とする、請求項12に記載のコンテンツアドレス記憶デバイス。
  20. 前記プロセッサは、
    前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものであるかを判断し、
    前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものである場合、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関連付けるマッピングを前記コンテンツアドレス記憶デバイスで維持し、
    前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものでない場合、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関連付けるマッピングを前記コンテンツアドレス記憶デバイスで維持せず、且つ前記コンテンツアドレスを前記送信ソースに送信する、
    よう更に構成されている、請求項12に記載のコンテンツアドレス記憶デバイス。
  21. 前記送信ソースに関連付けられたソース識別子が識別されるかどうかを判断することを更に含み、前記ソース識別子が識別される場合は、そのソース識別子を用いて前記送信ソースに関連付けられたコンテンツマップを特定し、この場合、前記マッピングが前記コンテンツマップに維持されていることを特徴とする請求項12に記載のコンテンツアドレス記憶デバイス。
  22. 前記通信インタフェースが、前記データオブジェクトにアクセスするため、前記ローカルデータオブジェクト識別子を有する要求を要求者から受信するよう更に構成され、
    前記プロセッサが、前記マッピングを用いて前記ローカルデータオブジェクト識別子に関連付けられたコンテンツアドレスを特定し、前記コンテンツアドレスを用いて前記データオブジェクトを検索し、そして前記データオブジェクトを前記要求者に提供するよう更に構成された、請求項12に記載のコンテンツアドレス記憶デバイス。
  23. コンテンツアドレス記憶デバイスにデータを記憶するためコンピュータ読み出し可能な媒体に組み込まれたコンピュータプログラム製品であって、
    前記コンテンツアドレス記憶デバイスに記憶されるデータオブジェクト、及びローカルデータオブジェクト識別子を送信ソースから受信し、その識別子によって前記データオブジェクトは前記送信ソースに識別されることになり、
    前記コンテンツアドレス記憶デバイス上のデータオブジェクトに関連付けられたコンテンツアドレスを、前記データオブジェクトのコンテンツの少なくとも一部に基づいて特定し、
    前記コンテンツアドレス記憶デバイス上のデータオブジェクトを、前記コンテンツアドレスに関係付けられた記憶ロケーションに記憶し、
    前記コンテンツアドレス記憶デバイス上で、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関係付けるマッピングを維持する、
    コンピュータ命令を含むコンピュータプログラム製品。
  24. 前記送信ソースが送信アプリケーションを含むことを特徴とする請求項23に記載のコンピュータプログラム製品。
  25. 前記コンテンツアドレス記憶デバイス上で、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関係付けるマッピングを維持することが、送信ソースに関係付けられたコンテンツマップを更新することを含む、請求項23に記載のコンピュータプログラム製品。
  26. 前記ローカルデータオブジェクト識別子が、前記送信ソースに関係付けられたローカルホストのデータオブジェクトに関係するファイル名を含む、請求項23に記載のコンピュータプログラム製品。
  27. 前記ローカルデータオブジェクト識別子が、前記送信ソースに関係付けられたローカルホストのデータオブジェクトに関係するファイルパスを含む、請求項23に記載のコンピュータプログラム製品。
  28. 前記データオブジェクトがファイルを含む、請求項23に記載のコンピュータプログラム製品。
  29. 前記データオブジェクトの記憶が成功したことを前記送信ソースに報告するコンピュータ命令を更に含む、請求項23に記載のコンピュータプログラム製品。
  30. 前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものであるかを判断するコンピュータ命令を更に含む、請求項23に記載のコンピュータプログラム製品。
  31. 前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものであるかを判断し、
    前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものである場合、前記ローカルデータオブジェクト識別子を前記コンテンツアドレスに関連付けるマッピングを前記コンテンツアドレス記憶デバイスで維持することを実行し、
    前記送信ソースが、前記ローカルデータオブジェクト識別子と対応のコンテンツアドレスとの間のマッピングを前記コンテンツアドレス記憶デバイスで維持するためのものでない場合、前記維持する処理を省き、且つ前記コンテンツアドレスを前記送信ソースに送信する、
    コンピュータ命令を含む請求項23に記載のコンピュータプログラム製品。
  32. 前記送信ソースに関連付けられたソース識別子が識別されるかどうかを判断するコンピュータ命令を更に含み、前記ソース識別子が識別される場合は、そのソース識別子を用いて前記送信ソースに関連付けられたコンテンツマップを特定し、この場合、前記マッピングが前記コンテンツマップに維持されていることを特徴とする請求項23に記載のコンピュータプログラム製品。
  33. 前記データオブジェクトにアクセスするため、前記ローカルデータオブジェクト識別子を有する要求を要求者から受信し、
    前記マッピングを用いて前記ローカルデータオブジェクト識別子に関連付けられたコンテンツアドレスを特定し、
    前記コンテンツアドレスを用いて前記データオブジェクトを検索し、
    前記データオブジェクトを前記要求者に提供する、
    コンピュータ命令を更に含む、請求項23に記載のコンピュータプログラム製品。
JP2007540155A 2004-11-08 2005-11-07 コンテンツアドレスマッピングを維持するためのコンテンツアドレス記憶デバイス Pending JP2008519362A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/984,686 US7444464B2 (en) 2004-11-08 2004-11-08 Content addressed storage device configured to maintain content address mapping
PCT/US2005/040377 WO2006052939A2 (en) 2004-11-08 2005-11-07 Content addressed storage device configured to maintain content address mapping

Publications (1)

Publication Number Publication Date
JP2008519362A true JP2008519362A (ja) 2008-06-05

Family

ID=36317678

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007540155A Pending JP2008519362A (ja) 2004-11-08 2005-11-07 コンテンツアドレスマッピングを維持するためのコンテンツアドレス記憶デバイス

Country Status (5)

Country Link
US (2) US7444464B2 (ja)
EP (1) EP1825376B1 (ja)
JP (1) JP2008519362A (ja)
CN (1) CN101142561B (ja)
WO (1) WO2006052939A2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010097848A1 (ja) * 2009-02-27 2010-09-02 日本電気株式会社 ストレージシステム
WO2013180398A1 (ko) * 2012-06-01 2013-12-05 주식회사 아라기술 컨텐츠 고유 식별자를 이용하여 컨텐츠를 전송하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체

Families Citing this family (158)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7624117B2 (en) * 2006-06-12 2009-11-24 Sap Ag Complex data assembly identifier thesaurus
US7734889B1 (en) * 2006-12-22 2010-06-08 Emc Corporation Methods and apparatus for distributing information to multiple nodes
US7634630B1 (en) * 2007-03-26 2009-12-15 Emc Corporation Storing authentication information in a content unit on an object addressable storage system
US8819814B1 (en) * 2007-04-13 2014-08-26 United Services Automobile Association (Usaa) Secure access infrastructure
US8010543B1 (en) * 2007-05-25 2011-08-30 Emc Corporation Protecting a file system on an object addressable storage system
US8918603B1 (en) * 2007-09-28 2014-12-23 Emc Corporation Storage of file archiving metadata
US8060709B1 (en) 2007-09-28 2011-11-15 Emc Corporation Control of storage volumes in file archiving
US8326805B1 (en) 2007-09-28 2012-12-04 Emc Corporation High-availability file archiving
US20090126027A1 (en) * 2007-11-08 2009-05-14 Rambus, Inc. File accessing and retrieval using soft digital rights management technology
US8095726B1 (en) * 2008-03-31 2012-01-10 Emc Corporation Associating an identifier with a content unit
US20100017807A1 (en) * 2008-07-15 2010-01-21 Radoslav Danilak System, method, and computer program product for transparent communication between a storage device and an application
CN101685528A (zh) * 2008-09-28 2010-03-31 北京易路联动技术有限公司 互联网个人数据银行技术的管理方法、系统及网络侧设备
WO2010090745A1 (en) * 2009-02-06 2010-08-12 Osr Open Systems Resources, Inc. Methods and systems for data storage
US8484259B1 (en) 2009-12-08 2013-07-09 Netapp, Inc. Metadata subsystem for a distributed object store in a network storage system
US9507799B1 (en) 2009-12-08 2016-11-29 Netapp, Inc. Distributed object store for network-based content repository
US20110137966A1 (en) * 2009-12-08 2011-06-09 Netapp, Inc. Methods and systems for providing a unified namespace for multiple network protocols
JP4837122B1 (ja) * 2010-07-26 2011-12-14 株式会社東芝 情報処理装置及びコンテンツ取得方法
CN102186164B (zh) * 2011-02-18 2014-04-02 华为技术有限公司 操作设备资源的方法和管理装置
CN103179219B (zh) * 2011-12-20 2016-06-29 中国移动通信集团公司 一种内容寻址方法及系统
US8990913B2 (en) 2012-04-17 2015-03-24 At&T Mobility Ii Llc Peer applications trust center
US9122688B1 (en) * 2012-11-20 2015-09-01 Emc Corporation Naming scheme for different computer systems
KR101628511B1 (ko) * 2014-11-03 2016-06-09 주식회사 애드오피 검색 엔진 최적화 방법 및 그를 이용한 서버 장치
US10469580B2 (en) 2014-12-12 2019-11-05 International Business Machines Corporation Clientless software defined grid
US10554749B2 (en) * 2014-12-12 2020-02-04 International Business Machines Corporation Clientless software defined grid
US10169124B2 (en) * 2014-12-16 2019-01-01 Samsung Electronics Co., Ltd. Unified object interface for memory and storage system
US10884650B1 (en) 2017-10-25 2021-01-05 EMC IP Holding Company LLC Opportunistic compression of replicated data in a content addressable storage system
US10466925B1 (en) 2017-10-25 2019-11-05 EMC IP Holding Company LLC Compression signaling for replication process in a content addressable storage system
US10521317B1 (en) 2017-10-26 2019-12-31 EMC IP Holding Company LLC Compressing data to be replicated utilizing a compression method selected based on network behavior
US10496489B1 (en) 2017-11-21 2019-12-03 EMC IP Holding Company LLC Storage system configured for controlled transition between asynchronous and synchronous replication modes
US10951699B1 (en) 2017-11-28 2021-03-16 EMC IP Holding Company LLC Storage system with asynchronous messaging between processing modules for data replication
US10338851B1 (en) 2018-01-16 2019-07-02 EMC IP Holding Company LLC Storage system with consistent termination of data replication across multiple distributed processing modules
US10324640B1 (en) 2018-01-22 2019-06-18 EMC IP Holding Company LLC Storage system with consistent initiation of data replication across multiple distributed processing modules
CN108389129B (zh) 2018-02-27 2020-12-04 创新先进技术有限公司 基于区块链的交易执行方法及装置、电子设备
US10956078B2 (en) 2018-03-27 2021-03-23 EMC IP Holding Company LLC Storage system with loopback replication process providing object-dependent slice assignment
US11308125B2 (en) 2018-03-27 2022-04-19 EMC IP Holding Company LLC Storage system with fast recovery and resumption of previously-terminated synchronous replication
US10866969B2 (en) 2018-03-28 2020-12-15 EMC IP Holding Company LLC Storage system with loopback replication process providing unique identifiers for collision-free object pairing
US10394485B1 (en) 2018-03-29 2019-08-27 EMC IP Holding Company LLC Storage system with efficient re-synchronization mode for use in replication of data from source to target
US10496324B2 (en) 2018-03-30 2019-12-03 EMC IP Holding Company LLC Storage system with concurrent fan-out asynchronous replication using decoupled replication sessions
US10996898B2 (en) 2018-05-29 2021-05-04 EMC IP Holding Company LLC Storage system configured for efficient generation of capacity release estimates for deletion of datasets
US11609883B2 (en) 2018-05-29 2023-03-21 EMC IP Holding Company LLC Processing device configured for efficient generation of compression estimates for datasets
US10977216B2 (en) 2018-05-29 2021-04-13 EMC IP Holding Company LLC Processing device utilizing content-based signature prefix for efficient generation of deduplication estimate
US11593313B2 (en) 2018-05-29 2023-02-28 EMC IP Holding Company LLC Processing device configured for efficient generation of data reduction estimates for combinations of datasets
US10983962B2 (en) 2018-05-29 2021-04-20 EMC IP Holding Company LLC Processing device utilizing polynomial-based signature subspace for efficient generation of deduplication estimate
US11372772B2 (en) 2018-06-20 2022-06-28 EMC IP Holding Company LLC Content addressable storage system configured for efficient storage of count-key-data tracks
US11429517B2 (en) 2018-06-20 2022-08-30 EMC IP Holding Company LLC Clustered storage system with stateless inter-module communication for processing of count-key-data tracks
US10592159B2 (en) 2018-06-20 2020-03-17 EMC IP Holding Company LLC Processing device configured for data integrity testing utilizing replicated test metadata file
US11216443B2 (en) 2018-06-20 2022-01-04 EMC IP Holding Company LLC Processing device configured for data integrity testing utilizing signature-based multi-phase write operations
US10754575B2 (en) 2018-07-16 2020-08-25 EMC IP Holding Company LLC Storage system with replication process utilizing simulated target responses
US10698772B2 (en) 2018-07-17 2020-06-30 EMC IP Holding Company LLC Storage system with multiple write journals supporting synchronous replication failure recovery
US10691373B2 (en) 2018-07-18 2020-06-23 EMC IP Holding Company LLC Object headers facilitating storage of data in a write buffer of a storage system
US10558613B1 (en) 2018-07-19 2020-02-11 EMC IP Holding Company LLC Storage system with decrement protection of reference counts
US10922147B2 (en) 2018-07-19 2021-02-16 EMC IP Holding Company LLC Storage system destaging based on synchronization object with watermark
US10884651B2 (en) 2018-07-23 2021-01-05 EMC IP Holding Company LLC Storage system with multi-phase verification of synchronously replicated data
US10826990B2 (en) 2018-07-23 2020-11-03 EMC IP Holding Company LLC Clustered storage system configured for bandwidth efficient processing of writes at sizes below a native page size
US10705965B2 (en) 2018-07-23 2020-07-07 EMC IP Holding Company LLC Metadata loading in storage systems
US10691551B2 (en) 2018-07-24 2020-06-23 EMC IP Holding Company LLC Storage system with snapshot generation control utilizing monitored differentials of respective storage volumes
US10671320B2 (en) 2018-07-24 2020-06-02 EMC IP Holding Company LLC Clustered storage system configured with decoupling of process restart from in-flight command execution
US10831735B2 (en) 2018-07-25 2020-11-10 EMC IP Holding Company LLC Processing device configured for efficient generation of a direct mapped hash table persisted to non-volatile block memory
US10684915B2 (en) 2018-07-25 2020-06-16 EMC IP Holding Company LLC Efficient packing of compressed data in storage system implementing data striping
US10747677B2 (en) 2018-07-27 2020-08-18 EMC IP Holding Company LLC Snapshot locking mechanism
US10635533B2 (en) 2018-07-30 2020-04-28 EMC IP Holding Company LLC Efficient computation of parity data in storage system implementing data striping
US11106810B2 (en) 2018-07-30 2021-08-31 EMC IP Holding Company LLC Multi-tenant deduplication with non-trusted storage system
US10817385B2 (en) 2018-07-31 2020-10-27 EMC IP Holding Company LLC Storage system with backup control utilizing content-based signatures
US10824512B2 (en) 2018-07-31 2020-11-03 EMC IP Holding Company LLC Managing journaling resources with copies stored in multiple locations
US10929047B2 (en) 2018-07-31 2021-02-23 EMC IP Holding Company LLC Storage system with snapshot generation and/or preservation control responsive to monitored replication data
US11030314B2 (en) 2018-07-31 2021-06-08 EMC IP Holding Company LLC Storage system with snapshot-based detection and remediation of ransomware attacks
US10783134B2 (en) 2018-07-31 2020-09-22 EMC IP Holding Company LLC Polling process for monitoring interdependent hardware components
US10901847B2 (en) 2018-07-31 2021-01-26 EMC IP Holding Company LLC Maintaining logical to physical address mapping during in place sector rebuild
US10852999B2 (en) 2018-07-31 2020-12-01 EMC IP Holding Company LLC Storage system with decoupling of reference count updates
US10761933B2 (en) 2018-09-21 2020-09-01 EMC IP Holding Company LLC Prefill of raid stripes in a storage system by reading of existing data
US10606519B1 (en) 2018-10-19 2020-03-31 EMC IP Holding Company LLC Edge case handling in system with dynamic flow control
US10747474B2 (en) 2018-10-22 2020-08-18 EMC IP Holding Company LLC Online cluster expansion for storage system with decoupled logical and physical capacity
US10725855B2 (en) 2018-10-22 2020-07-28 EMC IP Holding Company LLC Storage system with data integrity verification performed in conjunction with internal data movement
US10860241B2 (en) 2018-10-24 2020-12-08 EMC IP Holding Company LLC Storage system configured for token-based data transfer in active-active configuration with synchronous replication
US10754736B2 (en) 2018-10-25 2020-08-25 EMC IP Holding Company LLC Storage system with scanning and recovery of internal hash metadata structures
US10852965B2 (en) 2018-10-30 2020-12-01 EMC IP Holding Company LLC Write folding mechanism using reusable shared striping in a storage system
US11003629B2 (en) 2018-10-31 2021-05-11 EMC IP Holding Company LLC Dual layer deduplication for application specific file types in an information processing system
US10719253B2 (en) 2018-10-31 2020-07-21 EMC IP Holding Company LLC Efficient compression of data in storage systems through offloading computation to storage devices
US11144229B2 (en) 2018-11-01 2021-10-12 EMC IP Holding Company LLC Bandwidth efficient hash-based migration of storage volumes between storage systems
US10296451B1 (en) 2018-11-01 2019-05-21 EMC IP Holding Company LLC Content addressable storage system utilizing content-based and address-based mappings
US11086558B2 (en) 2018-11-01 2021-08-10 EMC IP Holding Company LLC Storage system with storage volume undelete functionality
US10942654B2 (en) 2018-11-01 2021-03-09 EMC IP Holding Company LLC Hash-based data recovery from remote storage system
US10996871B2 (en) 2018-11-01 2021-05-04 EMC IP Holding Company LLC Hash-based data recovery from remote storage system responsive to missing or corrupted hash digest
US10691355B2 (en) 2018-11-02 2020-06-23 EMC IP Holding Company LLC Apparatus, method and computer program product for controlled ordering of data pages for migration from source storage system into target storage system
US10846178B2 (en) 2019-01-11 2020-11-24 EMC IP Holding Company LLC Hash-based remote rebuild assistance for content addressable storage systems
US11232128B2 (en) 2019-01-14 2022-01-25 EMC IP Holding Company LLC Storage systems configured with time-to-live clustering for replication in active-active configuration
US11093159B2 (en) 2019-01-15 2021-08-17 EMC IP Holding Company LLC Storage system with storage volume pre-copy functionality for increased efficiency in asynchronous replication
US10884799B2 (en) 2019-01-18 2021-01-05 EMC IP Holding Company LLC Multi-core processor in storage system executing dynamic thread for increased core availability
US10871991B2 (en) 2019-01-18 2020-12-22 EMC IP Holding Company LLC Multi-core processor in storage system executing dedicated polling thread for increased core availability
US10592161B1 (en) 2019-01-22 2020-03-17 EMC IP Holding Company LLC Storage system with flexible scanning supporting storage volume addition and/or recovery in asynchronous replication
US11288286B2 (en) 2019-01-22 2022-03-29 EMC IP Holding Company LLC Storage system with data consistency checking in synchronous replication using active snapshot set
US11275765B2 (en) 2019-01-28 2022-03-15 EMC IP Holding Company LLC Storage systems configured for storage volume addition in synchronous replication using active-active configuration
US11204716B2 (en) 2019-01-31 2021-12-21 EMC IP Holding Company LLC Compression offloading to RAID array storage enclosure
US10831407B2 (en) 2019-01-31 2020-11-10 EMC IP Holding Company LLC Write flow offloading to raid array storage enclosure
US10838863B2 (en) 2019-02-01 2020-11-17 EMC IP Holding Company LLC Storage system with write cache release protection
US11392551B2 (en) 2019-02-04 2022-07-19 EMC IP Holding Company LLC Storage system utilizing content-based and address-based mappings for deduplicatable and non-deduplicatable types of data
US11397705B2 (en) 2019-02-26 2022-07-26 EMC IP Holding Company LLC Storage system configured to generate sub-volume snapshots
US10936010B2 (en) 2019-03-08 2021-03-02 EMC IP Holding Company LLC Clock synchronization for storage systems in an active-active configuration
US10754559B1 (en) 2019-03-08 2020-08-25 EMC IP Holding Company LLC Active-active storage clustering with clock synchronization
US10891195B2 (en) 2019-03-19 2021-01-12 EMC IP Holding Company LLC Storage system with differential scanning of non-ancestor snapshot pairs in asynchronous replication
US11055014B2 (en) 2019-03-26 2021-07-06 EMC IP Holding Company LLC Storage system providing automatic configuration updates for remote storage objects in a replication process
US10866735B2 (en) 2019-03-26 2020-12-15 EMC IP Holding Company LLC Storage system with variable granularity counters
WO2020204880A1 (en) 2019-03-29 2020-10-08 EMC IP Holding Company LLC Snapshot-enabled storage system implementing algorithm for efficient reclamation of snapshot storage space
US11386042B2 (en) 2019-03-29 2022-07-12 EMC IP Holding Company LLC Snapshot-enabled storage system implementing algorithm for efficient reading of data from stored snapshots
US11055188B2 (en) 2019-04-12 2021-07-06 EMC IP Holding Company LLC Offloading error processing to raid array storage enclosure
US10866760B2 (en) 2019-04-15 2020-12-15 EMC IP Holding Company LLC Storage system with efficient detection and clean-up of stale data for sparsely-allocated storage in replication
US10871960B2 (en) 2019-04-23 2020-12-22 EMC IP Holding Company LLC Upgrading a storage controller operating system without rebooting a storage system
US10996887B2 (en) 2019-04-29 2021-05-04 EMC IP Holding Company LLC Clustered storage system with dynamic space assignments across processing modules to counter unbalanced conditions
US10929050B2 (en) 2019-04-29 2021-02-23 EMC IP Holding Company LLC Storage system with deduplication-aware replication implemented using a standard storage command protocol
US11249834B2 (en) 2019-05-15 2022-02-15 EMC IP Holding Company LLC Storage system with coordinated recovery across multiple input-output journals of different types
US11099766B2 (en) 2019-06-21 2021-08-24 EMC IP Holding Company LLC Storage system configured to support one-to-many replication
US11137929B2 (en) 2019-06-21 2021-10-05 EMC IP Holding Company LLC Storage system configured to support cascade replication
US10929239B2 (en) 2019-07-19 2021-02-23 EMC IP Holding Company LLC Storage system with snapshot group merge functionality
US11467906B2 (en) 2019-08-02 2022-10-11 EMC IP Holding Company LLC Storage system resource rebuild based on input-output operation indicator
US11494103B2 (en) 2019-08-02 2022-11-08 EMC IP Holding Company LLC Memory-efficient processing of RAID metadata bitmaps
US10909001B1 (en) 2019-08-23 2021-02-02 EMC IP Holding Company LLC Storage system with snapshot group split functionality
US10997072B1 (en) 2019-10-16 2021-05-04 EMC IP Holding Company LLC Host-based acceleration of a content addressable storage system
US11151048B2 (en) 2019-10-25 2021-10-19 Dell Products L.P. Host-based read performance optimization of a content addressable storage system
US11099767B2 (en) 2019-10-25 2021-08-24 EMC IP Holding Company LLC Storage system with throughput-based timing of synchronous replication recovery
US11645174B2 (en) 2019-10-28 2023-05-09 Dell Products L.P. Recovery flow with reduced address lock contention in a content addressable storage system
US10990286B1 (en) 2019-10-30 2021-04-27 EMC IP Holding Company LLC Parallel upgrade of nodes in a storage system
US11079957B2 (en) 2019-11-01 2021-08-03 Dell Products L.P. Storage system capacity expansion using mixed-capacity storage devices
US11036602B1 (en) 2019-11-25 2021-06-15 EMC IP Holding Company LLC Storage system with prioritized RAID rebuild
US11232010B2 (en) * 2020-01-20 2022-01-25 EMC IP Holding Company LLC Performance monitoring for storage system with core thread comprising internal and external schedulers
US11106557B2 (en) 2020-01-21 2021-08-31 EMC IP Holding Company LLC Persistence points based coverage mechanism for flow testing in high-performance storage systems
US11360712B2 (en) 2020-02-03 2022-06-14 EMC IP Holding Company LLC Storage system with continuous data verification for synchronous replication of logical storage volumes
US11055028B1 (en) 2020-02-03 2021-07-06 EMC IP Holding Company LLC Storage system with reduced read latency
US11079961B1 (en) 2020-02-03 2021-08-03 EMC IP Holding Company LLC Storage system with write-via-hash functionality for synchronous replication of logical storage volumes
US11249654B2 (en) 2020-02-18 2022-02-15 EMC IP Holding Company LLC Storage system with efficient data and parity distribution across mixed-capacity storage devices
US11144232B2 (en) 2020-02-21 2021-10-12 EMC IP Holding Company LLC Storage system with efficient snapshot pair creation during synchronous replication of logical storage volumes
US11281386B2 (en) 2020-02-25 2022-03-22 EMC IP Holding Company LLC Disk array enclosure with metadata journal
US11079969B1 (en) 2020-02-25 2021-08-03 EMC IP Holding Company LLC Disk array enclosure configured for metadata and data storage processing
US11061618B1 (en) 2020-02-25 2021-07-13 EMC IP Holding Company LLC Disk array enclosure configured to determine metadata page location based on metadata identifier
US11144461B2 (en) 2020-03-09 2021-10-12 EMC IP Holding Company LLC Bandwidth efficient access to persistent storage in a distributed storage system
US11010251B1 (en) 2020-03-10 2021-05-18 EMC IP Holding Company LLC Metadata update journal destaging with preload phase for efficient metadata recovery in a distributed storage system
US11126361B1 (en) 2020-03-16 2021-09-21 EMC IP Holding Company LLC Multi-level bucket aggregation for journal destaging in a distributed storage system
WO2021189311A1 (en) * 2020-03-25 2021-09-30 Beijing Didi Infinity Technology And Development Co., Ltd. Read operation in object storage system using enhanced meta structure
US11194664B2 (en) 2020-04-20 2021-12-07 EMC IP Holding Company LLC Storage system configured to guarantee sufficient capacity for a distributed raid rebuild process
US11169880B1 (en) 2020-04-20 2021-11-09 EMC IP Holding Company LLC Storage system configured to guarantee sufficient capacity for a distributed raid rebuild process
US11494301B2 (en) 2020-05-12 2022-11-08 EMC IP Holding Company LLC Storage system journal ownership mechanism
US11392295B2 (en) 2020-05-27 2022-07-19 EMC IP Holding Company LLC Front-end offload of storage system processing
US11093161B1 (en) 2020-06-01 2021-08-17 EMC IP Holding Company LLC Storage system with module affinity link selection for synchronous replication of logical storage volumes
US11513882B2 (en) 2020-06-08 2022-11-29 EMC IP Holding Company LLC Dynamic modification of IO shaping mechanisms of multiple storage nodes in a distributed storage system
US11886911B2 (en) 2020-06-29 2024-01-30 EMC IP Holding Company LLC End-to-end quality of service mechanism for storage system using prioritized thread queues
US11327812B1 (en) 2020-10-19 2022-05-10 EMC IP Holding Company LLC Distributed storage system with per-core rebalancing of thread queues
US11531470B2 (en) 2020-10-21 2022-12-20 EMC IP Holding Company LLC Offload of storage system data recovery to storage devices
US11436138B2 (en) 2020-10-21 2022-09-06 EMC IP Holding Company LLC Adaptive endurance tuning of solid-state storage system
US11853568B2 (en) 2020-10-21 2023-12-26 EMC IP Holding Company LLC Front-end offload of storage system hash and compression processing
US11616722B2 (en) 2020-10-22 2023-03-28 EMC IP Holding Company LLC Storage system with adaptive flow control using multiple feedback loops
US11314416B1 (en) 2020-10-23 2022-04-26 EMC IP Holding Company LLC Defragmentation of striped volume in data storage system
US11687245B2 (en) 2020-11-19 2023-06-27 EMC IP Holding Company LLC Dynamic slice assignment in a distributed storage system
US11435921B2 (en) 2020-11-19 2022-09-06 EMC IP Holding Company LLC Selective deduplication in a distributed storage system
US11494405B2 (en) 2020-12-21 2022-11-08 EMC IP Holding Company LLC Lock contention resolution for active-active replication performed in conjunction with journal recovery
US11481291B2 (en) 2021-01-12 2022-10-25 EMC IP Holding Company LLC Alternative storage node communication channel using storage devices group in a distributed storage system
US11875198B2 (en) 2021-03-22 2024-01-16 EMC IP Holding Company LLC Synchronization object issue detection using object type queues and associated monitor threads in a storage system
US11520527B1 (en) 2021-06-11 2022-12-06 EMC IP Holding Company LLC Persistent metadata storage in a storage system
US11775202B2 (en) 2021-07-12 2023-10-03 EMC IP Holding Company LLC Read stream identification in a distributed storage system
WO2023122198A1 (en) * 2021-12-22 2023-06-29 Acentium Inc Systems and methods for data abstraction for transmission cross-reference to related applications

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2748834B1 (fr) 1996-05-17 1999-02-12 Gemplus Card Int Systeme de communication permettant une gestion securisee et independante d'une pluralite d'applications par chaque carte utilisateur, carte utilisateur et procede de gestion correspondants
US6006332A (en) * 1996-10-21 1999-12-21 Case Western Reserve University Rights management system for digital media
US6137864A (en) 1997-07-25 2000-10-24 Lucent Technologies Inc. Specifiable delete times for voice messaging
US6298401B1 (en) * 1997-08-11 2001-10-02 Seagate Technology Llc Object oriented storage device having a disc drive controller providing an interface exposing methods which are invoked to access objects stored in a storage media
CN1266514A (zh) 1997-08-11 2000-09-13 西加特技术有限公司 面向对象的数据存储装置
US6621505B1 (en) * 1997-09-30 2003-09-16 Journee Software Corp. Dynamic process-based enterprise computing system and method
WO1999057642A1 (fr) * 1998-05-01 1999-11-11 Matsushita Electric Industrial Co., Ltd. Dispositif et procede de traitement de donnees
US6567818B1 (en) * 1999-06-14 2003-05-20 International Business Machines Corporation Employing management policies to manage instances of objects
US7143231B1 (en) * 1999-09-23 2006-11-28 Netlogic Microsystems, Inc. Method and apparatus for performing packet classification for policy-based packet routing
US6553387B1 (en) * 1999-11-29 2003-04-22 Microsoft Corporation Logical volume configuration data management determines whether to expose the logical volume on-line, off-line request based on comparison of volume epoch numbers on each extents of the volume identifiers
US7660902B2 (en) * 2000-11-20 2010-02-09 Rsa Security, Inc. Dynamic file access control and management
US6606681B1 (en) * 2001-02-23 2003-08-12 Cisco Systems, Inc. Optimized content addressable memory (CAM)
US7000238B2 (en) * 2001-10-10 2006-02-14 Borland Software Corporation Development system providing extensible remoting architecture
US6973595B2 (en) * 2002-04-05 2005-12-06 International Business Machines Corporation Distributed fault detection for data storage networks
US8073935B2 (en) * 2002-07-25 2011-12-06 Oracle America, Inc. Pluggable semantic verification and validation of configuration data
AU2004214014B2 (en) * 2003-02-21 2009-10-22 Datacore Software Corporation Additional hash functions in content-based addressing
US6925524B2 (en) * 2003-03-20 2005-08-02 Integrated Silicon Solution, Inc. Associated content storage system
US7133963B2 (en) * 2003-12-03 2006-11-07 International Business Machines Corporation Content addressable data storage and compression for semi-persistent computer memory

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010097848A1 (ja) * 2009-02-27 2010-09-02 日本電気株式会社 ストレージシステム
JP2010198528A (ja) * 2009-02-27 2010-09-09 Nec Corp ストレージシステム
US8612717B2 (en) 2009-02-27 2013-12-17 Nec Corporation Storage system
WO2013180398A1 (ko) * 2012-06-01 2013-12-05 주식회사 아라기술 컨텐츠 고유 식별자를 이용하여 컨텐츠를 전송하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체

Also Published As

Publication number Publication date
EP1825376A4 (en) 2010-08-04
WO2006052939A3 (en) 2007-07-26
CN101142561B (zh) 2012-05-09
EP1825376A2 (en) 2007-08-29
US7444464B2 (en) 2008-10-28
US20060101196A1 (en) 2006-05-11
US20080270684A1 (en) 2008-10-30
US7856525B2 (en) 2010-12-21
WO2006052939A2 (en) 2006-05-18
CN101142561A (zh) 2008-03-12
EP1825376B1 (en) 2019-02-27

Similar Documents

Publication Publication Date Title
JP2008519362A (ja) コンテンツアドレスマッピングを維持するためのコンテンツアドレス記憶デバイス
US11647097B2 (en) Providing access to managed content
US8996611B2 (en) Parallel serialization of request processing
US8396938B2 (en) Providing direct access to distributed managed content
US20050240574A1 (en) Pre-fetching resources based on a resource lookup query
JP2005276192A (ja) データ記憶容量を増大させるための方法及び装置
CN108363641B (zh) 一种主备机数据传递方法、控制节点以及数据库系统
JP2005310119A (ja) コンピュータの識別情報を管理するための方法、システムおよび装置
JP2007108905A (ja) ファイルサーバ、ファイル提供方法及びプログラム
TW201724825A (zh) 全域資訊獲取、處理及更新、方法、裝置和系統
TW201724001A (zh) 全域資訊獲取、處理及更新方法、裝置和系統
US7725459B2 (en) Method and apparatus for manipulating data within a remote database in a multiple tier environment
US20090157694A1 (en) Method and system for managing file metadata transparent about address changes of data servers and movements of their disks
US8380806B2 (en) System and method for absolute path discovery by a storage virtualization system
JP3265242B2 (ja) 連続データアクセス方法
JP2004302564A (ja) ネームサービス提供方法及びその実施装置並びにその処理プログラム
JP2003515197A (ja) 完全にソフトウェアで実施される分散形仮想Webキャッシュ
JP5706956B1 (ja) データベースシステム及びデータベース制御方法
US11972142B2 (en) Data processing circuitry and apparatus for packet-based data communications
US7702634B1 (en) Method and apparatus to support multi-node direct write access to a file managed by a single node file system
KR100795835B1 (ko) 네트워크 상에서 데이터 전송 효율을 제어하는 인덱싱서버의 동작 방법, 상기 데이터를 수신하는 클라이언트단말기의 동작 방법 및 상기 방법을 채용한 인덱싱 서버
JP2000092072A (ja) 端末アドレス発番管理システム及び記録媒体