TWI232396B - Partial migration of an object to another storage location in a computer system - Google Patents

Partial migration of an object to another storage location in a computer system Download PDF

Info

Publication number
TWI232396B
TWI232396B TW090118808A TW90118808A TWI232396B TW I232396 B TWI232396 B TW I232396B TW 090118808 A TW090118808 A TW 090118808A TW 90118808 A TW90118808 A TW 90118808A TW I232396 B TWI232396 B TW I232396B
Authority
TW
Taiwan
Prior art keywords
scope
patent application
data stream
storage location
item
Prior art date
Application number
TW090118808A
Other languages
English (en)
Inventor
Luis Felipe Cabrera
Deborah C Jones
Ravisankar Pudipeddi
Stefan R Steiner
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Application granted granted Critical
Publication of TWI232396B publication Critical patent/TWI232396B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14Handling requests for interconnection or transfer
    • G06F13/16Handling requests for interconnection or transfer for access to memory bus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00Data processing: database and file management or data structures
    • Y10S707/964Database arrangement
    • Y10S707/966Distributed
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00Data processing: database and file management or data structures
    • Y10S707/99931Database or file accessing
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00Data processing: database and file management or data structures
    • Y10S707/99951File or database maintenance
    • Y10S707/99952Coherency, e.g. same view to multiple users
    • Y10S707/99954Version management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

五、發明説明(!) 發明範_ 本發明與電腦系統中的儲存作業及管理有關。尤其,本 發明與-種用以將物件一部份從基底或根位置轉移至遠端 位置,而仍然可維護物件資料關聯性的方法及系統有關。 板關發展簡短諸明 由於具有可抽換式儲存媒體型獨立個人電腦機型問市, 因而對電腦產業造成極大的衝擊,並且已影響電腦系統架 構及基礎設施的設計。然而’自第一部獨立電腦時代至 今,儲存解決方案及複雜電腦系統的發展不斷迅速成長。 下列列出網路電腦環境已逐步發展所要處理的所有增強功 能實例:持續發現愈來愈小型的積體電路及半導體晶片, 其能夠儲存不斷成長的資料量,增加現今電腦網路可能的 頻寬及資料傳輸率’並且增加網路中連接其他電腦、資料 庫、應用程式和所有類型儲存组件之伺服器電腦的利用 率。 因此’傳統計算及儲存技術及模型已面臨挑戰。例如, 廣泛使用的可抽換式儲存媒體已面臨高效率且便宜的遠端 儲存構案功能的挑戰。另外,隨著電腦系統的逐步發展, 已具:諸如磁碟片或光碟片之類的資料儲存裝置可利用性 及’且心例如,可經由匯流排將這些儲存裝置連接至電腦 ^或者,”二由有線或無線網路將這些儲存裝置連接至電 腦系統。此外,可將儲存裝置分開或共置於單一機櫃中。 作a月⑦貝料,儲存磁碟區是基礎儲存裝置的軟體抽象 1232396 A7 B7 五、發明説明(2 ) 名稱,並且是作業系統所裝設的最小獨立(self-contained)儲 存單元,並且係由檔案系統負責管理。儲存磁碟區使其關 聯的儲存裝置的實體拓樸抽象化,並且可能是磁碟的一部 份、整個磁碟,或甚至是繫結成一個虛擬連續邏輯區塊串 的多重磁碟。繫結可增加基礎裝置的容錯、性能或容量特 性。在現今複雜的電腦系統環境中,儲存磁碟區可能是不 同組的元件,其高效率及有效的管理令人期待。電腦系統 的檔案伺服器具有不同的儲存作業功能,能夠維護並持續 追蹤資料關聯性及儲存物件的位置,所以可採用常見的資 料儲存及傳輸技術。 磁碟區係由基礎儲存裝置所呈現之連續儲存位址空間的 一個或一個以上範圍(extent)所建構而成。範圍(extent)的特 徵通常爲位址空間的大小,以及從媒體基底位址開始的位 址空間開始位移量。用户端映射是將磁碟區所呈現的連續 位址空間映射至基礎範圍的非連續位址空間的處理程序。 磁碟區映射可被實施在專用硬體控制器(稱之爲硬體磁碟 區提供者)上,或由軟體磁碟區提供者以軟體實施之。藉 由進一步的背景,在共同讓渡的共同申請專利,案號 09/449,577 標題「Administration of RAID Storage Volumes」 中提供一種通用磁碟區提供者管理的技術。 因此,儲存技術的前進不斷改變儲存或傳輸資料的方 式,因此加重磁碟區内及之間傳統檔案管理的負擔。例 如,具有任何成長準則的檔案、具有記憶體配置限制的磁 碟區、分散式儲存和資料傳輸等等激發獨立電腦的固接式 本紙張尺度適用中國國家標準(CNS) A4規格(210X 297公釐) 1232396 A7
㈣配置和管理的概念。資料從快速、揮發性記憶 把。夕至逐端、堅固的儲存裝置對於特定物件而言相當有 利因此,與所利用儲存組件類型及儲存組件間使用之連 接的直接變化結果相比,網路及電腦系統模型的進步具有 更大幅的分支。 —則先針對磁碟區所實施的固定或彈性記憶體配置並沒有 山2配合可從網路電腦環境中複數個用户端之間傳輸及儲 存貝料的堅固機制所獲得的效率。傳統的樓案傳輸管理技 術的原始設計不支援現今複雜網路環境的所有增強功能。 因^ ’已影響到許多電腦的作業系統、系統基礎設施及核 Ά案官理功能等運作。因&,現有的標案系統具有與之 關如的滯留播效率,並且無法在最高效率的情況下處理所 有不同類型的儲存及資料傳輸作業。. 例如,此類無效率存在於遠離物件根位置之物件或檔案 儲存4仏與遠端儲存裝置的連接之中。隨著如上文所述的 各種儲存7L件及技術激增,有時候希望在遠端儲存裝置中 儲存檔案的一部份,同時在本機儲存裝置中保存檔案的一 邵伤。例如,當已知檔案的一部份爲靜態,或要收藏非經 常利用的特定資料時,可能希望釋出更多寶貴的本機儲存 裝置。在另一個例子中,唯附加型檔案特徵爲只會在檔案 結尾發生資料寫入。因此,一種本機儲存裝置的高效率使 用方式可指定將要附加新寫入之檔案的固定部份轉移至遠 端儲存裝置。再一個例子,將資料轉移至遠端儲存裝置可 實現保存預設的線上磁碟/記憶體配置限制。因此,有各 本紙張尺度適用中國國家標準(CNS) A4規格(210X297公董) 1232396 A7 B7
種原因造成檔案的邵份資料應被轉移至遠端儲存裝置。然 而,現行的檔案伺服技術無法適當處理,以指定何時應轉 移檔案的一部份,或當維護檔案資料關聯性時接著將資料 轉移至遠端位置。 因此,迄今通常尚未使用局部轉移技術;但是,請注 意,目前有一些階層儲存管理(hierarchical加以狀 management ; HSM)系統可執行有限的部份檔案作業,如 部份回呼。例如,在傳統HSM系統中,可更新整個磁碟 上磁碟區,而不需要使用部份回呼作業以從遠端儲存裝置 回呼任何資料。其他的傳統技術已解決有限案例,其中會 將檔案的前幾千位元組(例如,4Kb)保留在線上或「不轉 移」,也有將檔案的後幾千位元組保留在線上或「不轉 移」的案例。 然而,目前先進的檔案階層儲存管理未涵蓋大部份内容 的檔案局邵轉移,也不處理所希望的將預先決定檔案部份 從某一位置轉移至另一位置,而仍然保留檔案的其他部 份。這個技藝未解決的進一步問題是指定適合寫入暨更新 之資料流區域以及適合離線暨遠端儲存裝置之資料流區域 的機制可行性。簡言之,有時候希望將檔案的預先決定部 份轉移至遠端儲存裝置,並在本機儲存裝置中保留其他部 伤,並且目前的樓案伺服器不指定哪筆資料要保存及哪筆 資料將匯出至他處。 此外,目前先進的檔案管理未解決特定案例,其中希望 將一種限制套用至針對特定資料流的線上磁碟/記憶體配 ^紙張尺度適用中國國家標準(CNS) A4規格(210X297公爱)— 1232396
置,同時允許整個資料流任何成長,例如,可能是唯附加 型資料結構的案例。爲了解説,可能希望在線上磁碟區上 維護最多—百萬位元组的資料流,同時允許總資料流的大 小大於—百萬m組。現今的階層儲存管理系統未處理這 個案例。 >考慮j引t所述之與現行構案飼服器/ 系統關聯的 ‘,、政率0而希望在電腦系統中提供-種彈性架構,用以 將檔案或物件的某些部份轉移至另—個記憶體位置,而仍 然保留檔案的其他部份。其優點在於,能夠依據預設準則 來指定物件的哪些部份適合被轉移,物件的哪些部份適合 保留於目前的儲存位置。其得 ^ 具馒點在於,允許將檔案或物件 從第-儲存位置局部轉移至第二儲存位置,例如,從線上 ^導體裝置轉移至遠端儲存裝置。還有進_步優點在於, 實現標案的高效率局部轉移,其中樓案的結構及屬性已 知,或可指定爲(例如)唯附加型檔案。因此,沒有一種通 用的做法可4r檔案或物件的一部份從根磁碟區移動至另一 個或遠端磁碟區,而仍然維護檔案或物件的各種資料關聯 性。考慮到這些技藝方面的需求而發展出本發明。 發明概述 , 本發明與配合電腦系統使用的階層儲存管理(hierarchicai storage management ’· HSM)系統有關。本發明揭示一種技 術,依據此項技術註册一位於一第一儲存位置的資料流以 利進行轉移管理,並且依據預設準則,轉移適合另一儲存 位置的資料流部份,使系統儲存效率達到最高限度。檔案 本紙張尺度適用中國國家標準(CNS) A4規格(21GX297二)'鶴 --- 1232396
五、發明説明(6 系統可具有-些功能用途,其能夠監控已註册要進行轉移 管理的檔案/資料流,或可依據預設準則輪詢播案/資料 噙果知料机具有要轉移至另一儲存位置的部份,則 HSM系統會將資料轉移至其 ,..^ 升他语存位置,如長期或離線儲 存裝置,並且經由中繼資料保存資料流的資料關聯性。本 技術允許轉移目標位置橫跨多重磁碟區(ν〇ι_),並且允 U HSM系統及中繼資料來存取轉移樓案/資料流的來 源及目標部份。在示範性具體實施例中,資料被轉移至連 續存取媒體。 下文中將説明本發明的其他特色。 J式之簡單説 將配合附圖來進一步説明用以將物件的一部份轉移至遠 端儲存裝置的系統及方法,其中: 圖1顯π可併入本發明觀點之一般用途電腦的方塊圖。 圖2顯不可實施本發明方法及裝置之示範性網路環境的 方塊圖。 圖3 Α至3D顯示根據本發明之依據更新資料流區域轉移 示範性保存(archive)單元的圖式。 圖4顯不根據本發明將資料流的一部份轉移至次要儲存 位置的示範性流程圖。 圖5顯示根據本發明,系統經由中繼資料回呼轉 移資料之示範性處理程序的方塊圖。 圖6顯示根據本發明,經由中繼資料回呼轉移資料之示 範性處理程序的方塊圖。 本紙張尺度適用_家標準_ -- — 1232396 A7 B7 五、發明説明(7 ) 較佳具體實施例之詳 本發明通常與希望將檔案從某一位置局部轉移至另一位 置的系統有關。本發明可與系統現存的檔案伺服器一起使 用。因此,可採用本發明以提供或指定適用於轉移檔案一 邵份的磁碟上配置限制。因此,可利用本發明將超過磁碟 上限制的檔案部份轉移至非磁碟儲存裝置,如連續存取媒 體(SAM)。具體而言,當資料流的成長超過指定的磁碟配 置限額或限制時,本發明能夠將資料流局部轉移至遠端儲 存裝置。因此,本發明爲與檔案關聯的各種資料流提供專 業的階層儲存管理,其中可註册要進行轉移管理的資料 流。然後,可回呼及讀取已轉移的資料流部份,類似於傳 統的HSM系統部份回呼作業。在示範性具體實施例中, 本發明包括使用目標位置的SAM。 希望轉移邵份至另一儲存位置的資料流、物件或檔案的 實例包括··唯附加型檔案,如只能執行寫入至最後儲存區 塊的擒案;已定義「更新區域j的檔案,如只能寫入第一 儲存區塊或其他可識別儲存區塊的檔案;不常存取或讀取 的標案部份;希望將部份固定儲存於堅固及/或遠端儲存 裝置中的資料流;位於具有檔案成長限制條件之儲存位置 中的案,如藉由強制磁碟上記憶體配置限制;資料任意成 長或無法預期的資料流等等。 轉移來源位置及轉移目標位置對的實例包括··將資料 流、物件或檔案的一部份從線上儲存裝置轉移至離線儲存 裝置、從本機儲存裝置轉移至遠端儲存裝置、從揮發性儲 • 10 ~ 本紙張尺度適用巾S S家辟(CNS) A4規格(21GX 297公Θ — - 1232396 A7 B7 五、發明説明(8 ) 存裝置轉移至非揮發性错存裝置、從非安全型記憶體轉移 至安全型記憶體等等。 a 夕 因此,本發明與配合電腦系統使用的階層儲存管理 (hierarchical storage management ; HSM)系姑女扣 、 厂亍、玩百關。可依據 預設準則來分析位於第一儲存位置的資料流,以決定資料 流是否有適合另一儲存位置的部份,使系統儲存效率=到 最高限度。可依據系統特性預先指定或由使用者輸入預設 準則,如轉移保存(archive)單元的大小及更新區域的位 置。檔案系統可具有一些功能用途,其允許監控已註册要 進行轉移管理的檔案。如果檔案系統未提供監控資料流/ 檔案的方法,則可實施一種方法,藉此以預先定義時間: 隔來輪詢已註册要進行轉移的資料流/檔案,以獲得有關 進一步轉移需求的資訊,纟中時間間隔可能會動態改變以 適合系統的轉移特性。如果資料流具有要轉移至另一儲存 位置的部份,則檔案伺服器HSM系統會將資料轉移至其 他儲存位置,並且保存已轉移資料與第一儲存位置中之資 料流之間的關聯性。這些關聯性可經由配合轉移這些部份 所產生的中繼資料來保存之。之後,可接著利用這個中繼 資料以配合HSM系統來存取已轉移的資料。已轉移目標 位置可橫跨多重磁碟區,並且也以此方式牵連多重檔案系 統。 如上又所述,本發明提供一種依據預設準則,將適合的 資料流或物件一部份轉移至另一儲存位置。預設準則可用 各種方式设定。在示範性具體實施例中,本發明包括一種 -11 - 本紙張尺度it财國國家標準(CNS_; A4規格(210 X 297公爱) 1232396
提供磁碟上配置限制的方法。例如,可以按資料流或按標 案爲基礎來指定配置限制,以強制實施對資料流的限制。 例如,可指^保存㈣ive)單元❼大小,錢可就樓案更 新區域的大小方面來指定使用者的帳户限額。適用於轉移 管理的其他檔案可能是以唯附加模式存取的檔案,或具有 另一種可識別「更新區域」的檔案。 因此,本發明提供-種將具有可識別更新區域的擋案_ 邵份轉移至遠端儲存裝置的方法。可有效採用本發明將超 過磁碟上限制的檔案部份局部轉移至讀,藉此提供磁 碟上配置限制。具體而言’當資料流的成長超過指定的磁 碟配置限額或限制時’本發明能夠將資料流局部轉移至遠 端错存裝置,或從第-儲存位置轉移至第二儲存位置。在 :範性具體實施例中,本發明解決配置限制條件的方式 是’將超過線上儲存限制的資料轉移至遠端儲存裝置,並 且是藉由將資料轉移SAM的方式實現。 因此在期望问效率整合局部轉移功能與現行HSM系 統之下’目而發展出本發明。具體而言,已發展出本發明 以高效率執行從第-儲存位置至其他儲存位置的檔案轉移 作業。 · 圖1及下列討論預定提供可實施本發明之適當電腦環境 的般簡以田述。雖然不是必要項,但是將就電腦可執行 指令的一般背景而論來說明本發明, 或饲服器之類電腦所執行的程式模组。—般而::程= 組包括執行特殊X作或實施特殊抽象資料型別的常式、程
1232396 A7 B7 五、發明説明(10 ) 式、物件、組件、資料結構等等。另外,熟知技藝人士應 瞭解可運用其他電腦系統組態來實施本發明,包括攜帶型 裝置、多處理器系統、以微處理爲主或可程式規劃消費性 電子裝置、網路PC、微型電腦、大型電腦等等。還可在 分散式電腦環境中實施本發明,其中會由透過通訊網路所 連結的遠端處理裝置來執行工作。在分散式電腦環境中, 程式模組可能位於本機或遠端記憶體儲存裝置中。 如圖1所示,示範性一般用途電腦系統包括傳統個人電 腦20等等,.其包括處理單元21、系統記憶體22以及耦合 各種系統組件(包括將系統記憶體耦合至處理單元21 )的 系統匯流排23。系統匯流排23可能是任何類型的匯流排 結構,包括記憶體匯流排或記憶體控制器、周邊裝置匯流 排以及使用各種匯流排架構之任一種匯流排架構的本機匯 流排。系統記憶體包括唯讀記憶體(ROM)24及隨機存取記 憶體(RAM)25 。 ROM 24中存取基本輸入/輸出系統26 (BIOS),其包含用來在個人電腦20内的元件之間轉輸資訊 的基本常式(routine),例如,於啓動期間。個人電腦20可 進一步包括用來讀取暨寫入硬碟(圖中未顯示)的硬碟機 27、用來讀取暨寫入可抽換式磁碟片29的磁碟機28,以 及用來讀取暨寫入光碟片31(如CD-ROM或其他光學媒體) 的光碟機30。硬碟機27、磁碟機28及光碟機30分別藉由 硬碟機介面32、磁碟機介面33及光碟機介面34連接至系 統匯流排23。磁碟機及其關聯的電腦可讀取媒體將非揮 發性儲存的電腦可讀取指令、資料結構、程式模組及其他 _jjj-_ 本紙張尺度適用中國國家標準(CNS) A4規格(210 X 297公釐) 1232396 五、發明説明(u 資料提供給個人電腦20。 .m ^ . 隹”、、本又中說明的示範性環境 採:=、可抽換式磁碟片29及光碟片31,熟知技藝人 士應明白,電腦可存取用來儲存資料的其他類型電腦可讀 取媒體,如磁帶、快卩E] 4 氏閃记憶卡、數位影碟、Bernoulli卡 帶、隨機存取記情辦广只A 、 士 w a ( 、唯讀記憶體(ROM)等等均可 在示範性作業環境下使用。 硬碟、磁碟片29、光碟片31、職24或讓25上可 儲存一些程式模組,包括作業系統35、一個或一個以上 £用ί式6其他私式模組37及程式資料38。使用者可 透過如鍵i 40和指標裝置4 2在個人電腦上輸入命令及 資訊。其他的輸入裝置(圖中未顯示)可包括麥克風、搖 桿、遊戲控制板、衛星天線、掃描器等等。這些及其他輸 入裝置通常是透過耦合至系統匯流排的序列埠介面仏連 接至處理單元21,但是也可透過其他介面連接,如並列 埠、遊戲埠或通用序列埠(USB)。顯示器47或其他類型的 顯π裝置也可經由介面(如視訊配接卡48 )連接至系統匯 流排23。除了顯示器47以外,個人電腦通常包括其他的 周邊輸出裝置(圖中未顯示),如揚聲器及印表機。 個人電腦20可在網路環境中運作,只要使用邏輯連接 至一台或一台遠端電腦(如遠端電腦49)即可。遠端電腦49 可能是另一部個人電腦、伺服器、路由器、網路PC、同 級裝置或其他通用的網路節點,並且通常包括前文所述之 與個人電腦20相關的許多或所有元件,雖然圖1中只有 顯示記憶體儲存裝置50。圖1描繪的邏輯連接包括區域 -14- 本紙張尺度適用中國國家標準(CNS) A4規格(210X297公釐) 1232396 A7 B7 五、發明説明(12 ) 網路(LAN)51及廣域網路(WAN)52 。在辦公室、企業電腦 網路、企業内電網路及網際網路中皞處可見此類的網路連 接環境。 當在LAN網路環境中使用時,個人電腦20係透過網路 介面或配接卡53連接至LAN 51。當在WAN網路環境中使 用時,個人電腦20通常包括數據機54或其他機件,用以 透過廣域網路(WAN)52 (如網際網路)建立通訊。數據機 54 (可能是内建式或外接式)係經由序列埠介面46連接至 系統匯流排.23。在網路環境中,所描繪之與個人電腦20 或其部份相關的程式模組可能儲存於遠端記憶體儲存裝置 中。應明白,如圖所示的網路連接是示範性的網路連接, 並且可使用其他的裝置來建立電腦之間的通訊連結。 應注意,如上文所述的電腦可當作電腦網路的一部份進 行部署,並且本發明與具有任何數量記憶體或儲存單元及 橫跨任何數量磁碟區之任何數量的應用程式暨處理序的電 腦系統有關。因此,本發明適用於部署於具有遠端或本地 儲存裝置之網路環境中的伺服器電腦及用户端電腦。圖2 顯示一種採用本發明的示範性網路環境,其具有經由鋼路 與用户端電腦通訊的伺服器。如圖所示,有一些伺服器 10a、10b等等係經由通訊網路14 (可能是LAN、WAN、 企業内電網路或網際網路)與一些用户端電腦20a、20b、 20c等等互相連接。例如,在通訊網路14是網際網路的網 路環境中,伺服器10可能是Web伺服器,用户端20可經 由任何已知的通訊協定(例如,超本文傳輸通訊協定 _- 15-_ 本紙張尺度適用中國國家標準(CNS) A4規格(210X297公釐) 1232396
(hypertext transferpr〇t〇c〇1 ; Ηττρ))與词服器通訊。 每台:户端電腦20及词服器電腦1〇均可能配備各種應 彳式模”且36、其他的應用程式模組37及應用資料38, 並且犯夠連接或存取各種類型的儲存元件或物件,用以橫 跨這些_元件或物件來儲存㈣,或可轉㈣案的—部 份。 因此,在具有用來存取網路或與網路互動的用户端電腦 及用來鉍用户端電腦互動的伺服器電腦的電腦網路環境中 可利用本發明。根據本發明,可使用改良的hsm系統技 術來轉移資料流的一部份,並產生用來描述轉移的中繼資 料。可配合各種網路或系統架構實施隨之產生的這些技術 及通訊’因此,不應限定於任何特定形式。 因此,本發明可在電腦系統中高效率實施彈性架構,以 局4轉私貝料泥、檔案或物件的某部份,並且保留檔案的 其他部份。提供一種據預設準則來指定物件哪些部份適合 被轉移,物件哪些部份適合保留於本機、基底或根儲存裝 置的方式。提供一種將檔案或物件從第一儲存位置局部轉 移至第二儲存位置的方法,例如,從線上半導體裝置轉移 至遠端儲存裝置。例如,局部轉移的示範性準則包括:已 知具有唯附加型檔案之結構及屬性的檔案、具有可以其他 方式識別更新區域的檔案、具有記憶體配置限制條件的檔 案等等。所提供的一種通用做法是經由HSM系統將樓案 或物件的一部份從根磁碟區移動至另一個或遠端磁碟區, 而仍然維護檔案或物件的各種資料關聯性。本發明優點先 -16 - 本紙張尺度適用中國國家標準(CNS) A4規格(210X297公爱) 五、發明説明(l4 ) 幻0 t案系、.·充,這些舊式構案系統無法適當處理可從樓案 局轉移所獲得的效率,W及磁碟上配置限額規定。 例如’可配合系統的檔案伺服器來實施本發明的方法, 以執行本發明的任何局部轉移技術。藉由利用儲存限額機 制,HSM系統可決定何時希望將資料轉移至遠端儲存裝 置。預設準備也可以其他或進一步預先決定規則爲基礎, 如自資料存取以來的時間、預先知道來源標案及/或目標 檔案資料結構、系統狀況等等。因此,至於要轉移哪—筆 資料的選擇則留給HSM系統,並且使用者可指定選擇準 則,包括保存(archlve)單元的大小或磁碟上配置限額。因 此,可指定資料流大小限制條件,或者,錯存位置本身的 特性已具備限制條件。本發明將支援較大的配置單元大小 的限制。就這-點而言,如果儲存位置上的樓案系統限額 小於(小於最大配置單元女山、招栌士杜n, 直早几大小)根據本發明指定的磁碟上配 置限制,則本發明將保留這些限制條件。如果樓案系統限 額大於根據本發明指定的磁碟上配置限額,則本發明的限 額優先於樓案系統限額。另一種指定轉移管理樓案的方法 是決定檔案是否是以嘴附加模式存取的構案,或樓案何時 具有另一種可識別「更新區域」。可依據構案使用狀況歷 史貝料及其他動態系統特性來重新評估針對構案局部轉移 所維護的原則。例如,如果基於各種原因而發現特定磁碟 h己憶體配置限制太嚴格,則可放寬限制,並 具效率的資料量。 ”夕更 因此,本發明的局部轉移技術會仔細考慮特定橋案類 17- 本紙張尺度適财S S家標準(CNS7I4規格(210X297公ϋ 1232396 A7 B7 五、發明就明(15 ) 型。此類檔案類的一個實例是具有可識別更新區域的資料 流。圖3A顯示具有可識別更新區域的示範性檔案。檔案 資料流streaml被描输成相接合的各種儲存區塊或磁碟上 配置單元Ml,M2,…,M6 ,但是應知道,儲存區塊可能位 於任何位置及任何數量及類型的儲存元件,並且已根據本 發明轉移資料流的一部份。配合資料流streaml,透過檔 案使用狀況歷史資料分析及/或因爲已知檔案特性,而識 別出發生更新或寫入的兩個區域,如虛線的更新區域 R0U1和R0U2所示。還會將第三、不變區域Imml識別爲 不常更新或寫入的區域,或決不會更新的區域。還可依據 預設或輸入準則指定保存(archive)單元的大小及更新區域 的大小和位置。 可能會轉移不變資料Imml,因此作爲轉移至第二儲存 位置的目標,如遠端儲存裝置或SAM。根據現行的較佳 實施,隨著資料流streaml成長,會將超過R0U1的資料轉 移至長期儲存裝置,直到R0U2的起點。R0U2繼續位於 資料流streaml的末端,並且R0U2會隨著streaml成長向前 移動,使得超過R0U2的資料不會被轉移。還會產生.中繼 資料,用以說明被轉移至遠端儲存裝置的檔案部份與檔案 未被轉移部份的關係。可能會依據適用於描述儲存關聯性 及/或適用於併入各種全球資訊網(World Wide Web)組件的 任何格式來實施這個中繼資料。在示範性具體實施例中, 中繼資料係依據分散式組件物件模型(distributed component object model ; DCOM)規格來格式化,但是也可使用 _ - 18- 本紙張尺度適用中國國家標準(CNS) A4規格(210X297公釐) 1232396 A7 B7 五、發明説明(l6 )
Java、可擴展標記語言(extensible markup language ; XML ) 及任何適當的格式。 圖3B和3C顯示具有可識別更新區域之資料流的更特定 或通用實例,例如,會將資料加入至樓案的起點或檐尾。 圖3B顯示於檔案資料流stream2的起點更新資料的案例。 隨著時間從tl至t2至t3,檔案隨時間變長,但是由於隨 著檔案成長,資料及其儲存區塊超過更新區域的範圍,所 以可被轉移至其他儲存裝置,如SAM。於時間tl,可將 儲存區塊或部份M3和M4轉移至遠端儲存裝置,於時間 t2,可將M5轉移至遠端儲存裝置,於時間t3,可將M6轉 移至遠端儲存裝置,以此類推。圖3C唯附加案例,其中 更新區域是位於檔案結尾的部份。類似於圖3B,可將不 屬於更新區域ROU範圍内的資料流stream3的一部份轉移 至遠端儲存裝置。隨著檔案因時間tl至t2至t3等等而成 長,可將新的儲存區塊轉移至遠端儲存裝置,如SAM。 於註册轉移管理之後,可於時間tl轉移Ml和M2,於時 間t2轉移M3,於時間t3轉移M4。 爲了存取已轉移的資料,因而產生中繼資料,以描.述利 用的遠端儲存裝置服務、描述被轉移的儲存區塊範圍以及 描述如最後轉移時間之類的其他資訊(請參閱下列實例)。 請注意,描述圖3B所示轉移區域之位移映射的中繼資料 可能會「向後」產生,其中會在中繼資料中將資料流 stream2的末端標示爲位移零,因此,可能會相對於零位 移、保存(archive)單元大小及樓案大小來描述進一步的區 -19 - 本紙張尺度適用中國國家標準(CNS) A4規格(210X 297公釐) 1232396 A7 _____ B7 五、發明説明(l7 ) 域。 因此,當樓案係以唯附加模式存取時,或檔案具有可依 據相關檔案或系統特性識別的「更新區域」時,則系統可 高效率轉移不會被更新的檔案區域,即,不變或不常存取 的部份。此類的檔案實例之一是記錄維持型檔案,用以將 每筆新額外的記錄加入至檔案結尾。因此,一旦已輸入記 錄,則會將之視爲可能不是經常存取或更新的檔案區域, 因此,可將之轉移至遠端儲存裝置,以保存本機記憶體限 制或基於其他原因。因此,可採用專門的階層儲存管理技 術,以便能夠無損失地回呼、複製及/或讀取已儲存於遠 端儲存裝置的資料流片段至使用者的檔案伺服器。在較佳 具體實施例中,會將轉移資料寫入至連續存取媒體 (SAM),並且,一旦寫入至SAM,資料有利於不變且安 〇 再者,本發明可適用於具有適當定義更新區域的資料流 樓案。例如,藉由只能將位元組附加至資料流才能發生更 新(唯附加案例)。第二種案例是在資料流的最後區塊位元 組進行寫入的情況(最後區塊案例)。在唯附加案例中,除 了被附加的位元組以外,資料流中的所有位元組均被視爲 不變’因此要識別可局部轉移的位元組非常簡單··已寫入 的位元組。在最後區塊案例中,例如,除了最後區塊位元 組以外’所有位元組均被視爲不變,因此可轉移。 在唯附加及最後區塊案例中,階層儲存管理系統可以此 方式將S料泥的不變區域轉移至遠端儲存裝置。其優點 _____-20- 本紙張尺度研國國家標:^s) Μ規格(2ι〇χ297公爱) 五、發明説明(18 爲,即使資料流本身正祐 狡更新中,也可發兮 的局部轉移,其方式是從…也了發生不變子資料流 視爲不同。目前,傕妨uclvyr\ , 町d欠4伤 、 、 系統中未使用這此專門@ g 部轉移技術。 一寻門的局 彳並且也已才曰走更新區域的大小。於時間Η,檔案是在 限制條件範圍内的可容許檔I於時間t2,檔案是已到達 限制條件所容許的最大大小。於時間t3,檔案的成長已超 過限制條件,但是可根據本發明,將檔案的一部份轉移至 本發明還包括提供磁碟增記憶體配置限制的功能, 用以限制檔案/資科流的大小。本發明支援此類限制侉件 的轉移。再者,由於可指定保存—hive)單元大小及更新 區域大小’所以當由於鍺存配置限制而限制構案大小時, 本發明是一種強制執行儲存配置限制的機制。® 3D顯示 -種不範性假設狀況’丨中檔案的成長會因虛線所示的儲 存配置限制而受到限制。已指定保存(archive)單元的大 遠端儲存裝置(如SAM ),藉此防止達反限額。 圖4顯示根據本發明之局部轉移方法的示範性流程圖。 於400,可根據本發明註册適用於轉移管理的檔案。例 如,可指定更新區域大小、保存(archive)單元大小(被轉移 部份的大小)及轉移資料的轉移目的地,並且可指定磁碟 上記憶體配置限制。於410,HSM系統可利用一些功能, 以監視檔案的使用狀況特性及/或視檔案特性而希望局部 轉移。於420,標記要轉移的部份被轉移至次位置。於 430,產生描述檔案轉移的中繼資料,並將中繼資料儲存 本紙張尺度適用中國國家標準(CNS) A4規格(210X297公釐) 1232396 A7
於資料庫之類的儲存單元, 取好疋Jet資料庫。之後可使 用這個中繼資料來存取德左、A、土 予於逐端儲存裝置中的資料。於 440,檔案何服器釋出先前 、 、 則僻存轉移資料的儲存區塊或位 置。於450,如果更新區域 4疋適合局邵轉移作業所服務的 檔案,則會轉移更新區域。 本發明進一步的優, 馒馬本發明提供隨時在遠端儲存裝 置中重新組合所有資料流只I卞如 貝打机片焱,而不需要確認藉此呈現的 資料是否仍然有效,因爲ρ娃我 、土 U馬已轉移至遠端儲存裝置的資料流 所有片段都不變。另外,如果 训禾删除貪枓流區域,則HSm 系統會在本身的内部系統資料中 與竹T主現對應於刪除區域的位 元組間隙"因此,HSM系統可在適當時間重新组合剩餘 的位元組區域’以高效率重新宣告刪除區域之前所使用的 儲存區。 此外,議系統可選擇適用於轉移的任何適當儲存單 元及傳輸媒體。所做的選擇通常會最佳化傳送至遠端儲存 裝置之傳輸作業的瞬間及/或高聚集資料傳輸率。 如上文所述,當檔案是作爲局部轉移至遠端儲存裝置的 目標時,針對每筆資料流及任何給定時間,可能有依據預 設規則所遵守的儲存限額。因此,當使用本發明的技術以 透過轉移來保存磁碟配置限制時,其優點爲,當允許任何 增加資料流大小時,仍然可繫結資料流的磁碟區磁碟上配 置。當檔案系統的呼叫者寫入超過現行檔案末端的資料 時,資料流大小會因此而成長,以及儲存資料流所需的磁 碟配置數量。一旦超過本機配置限額,本發明的HSM系 -22- 本紙張尺度適用中國國家標準(CNS) A4規格(210 X 297公釐)' ------- 1232396 A7 --------B7 五、發明説明~""— 統可將構案資料的一部份轉移至遠端儲存裝置,以便減少 要々磁碟上记憶體配置總數量HSM系統可選擇要 攸檔案轉移的位元組範圍,並且選擇可遵守一組預先決定 的規則。 田轉知所選位元組群組時,可使用廣泛範圍的準 則。例如,如果已開啓要連續存取的基礎資料流時,要開 。轉移的邏輯區域是包括具有如現行磁碟上配置所反映之 最^位移之位元組的區域。又如,如果已開啓要隨機存取 的檔案,則任何位元組範圍都可能同樣不錯的轉移選擇。 檔案的統計分析也可顯露出適合轉移的部份。針對其他替 代方木,根據本發明的HSM系統可追蹤額外的執行時期 貝訊,以迅速決定最不可能要存取的檔案區域。然後,可 和所識別的區域指定爲轉移區域。 轉移的最小單元最好等於本機檔案系統中的最小儲存配 置單位,因爲較小的轉移大小會使解除配置本機儲存影響 降至取低限度。本發明最好配合支援疏鬆檔案的檔案系統 吏用其中會~除配置資料流範圍内的零區域。在本發明 較佳實施中,採用64K作爲最小轉移單元。再者,轉移所 使用的最小單元不需要受到與檔案系統關聯之最小配置單 凡的限制。可依據數個配置單元(例如,16個單元)來計 算取小單元大小,以便使追蹤這些記憶體配置所需的系統 貝料量降至最低限度,並且能夠達成額外的最佳化,例 如,檔案系統所利用的基礎壓縮單元匹配。當所選大小適 合系統參數時,HSM系統可因此最佳化或流暢化特定種 本紙張尺度適用家標準(c W)_A4規格(21〇 χ 297公爱) * ----- 1232396 A7 B7 五、發明説明(21 ) ~--- 類的位址轉譯作業。例如,假設使用二次方作爲傳輸單元 大小,則會給定配合存取作業的位元組位移量,hsm系 統可依據將給定的位移量向右位元轉移等於單元大小1〇g 基數2的位το數量,迅速決定内部位址。也可配合其他類 型的系統參數來利用其他的最佳化。 再者,檔案伺服器的使用者非常容易瞭解本發明。無論 是否已局部轉移檔案,因爲HSM架構整合技術功能,所 以可無損失進行存取。因此,將資料保存至SAM的方法 允許存取所有的資料流資料,包括資料流的轉移部份及儲 存於磁碟上配置的資料。在本發明的本較佳實施中,基礎 植案系統支援疏鬆檔案。因此,在本機檔案中,被轉移的 所有位元組範圍或多重區域可呈現爲位元組的「疏鬆 洞」。基礎檔案及檔案系統也可支援資料壓縮暨解壓縮, 以及資料加密及解密。 一旦因局邵轉移技術而遠端儲存構案一部份之後,用户 端可選擇移動其目前磁碟區内的檔案,或將檔案從某磁碟 區移動至另一磁碟區。移動作業通常代表變更檔名的動 作’因此’檔案可能變成屬於或變成與不同目錄及/或不 同磁碟區關聯的成員。此外,磁碟區間移動作業涉及來源 及目標磁碟區,其可能由位於不同伺服器或機器的不同檔 案管理員負責管理。移動作業也可涉及兩個不同的處理程 序·將資料複製至目的地磁碟區,以及刪除來源磁碟區的 資料。因此,一旦已依據本發明轉移檔案的一部份,則可 發展一種樓案系統,以處理典型的檔案重新配置、移動、 ________ -24- 本紙張尺度適用中國國家標準(CNS) A4規格(210X 297公釐) 1232396 A7 一1 - — _________B7 五、發明説明(22 ) 複製、重新命名及其他典型的捧 ,、土妁檔案作業。例如,藉由提供 檔案轉移資訊或中繼資料,以 ^以配合指定檔案轉移資訊的轉 移檔案作業使用即可實現。 因此本發明提仏此類的機制,以定義局部轉移構案的 中繼資料,藉此中繼資料指定局部轉移職的儲存關聯 性。HSM系統可使用這個中繼資料,以辨識局部轉移構 案的存在及性質,並且配合局部轉移檔案高效率執行作 業。可將中繼資料編碼,例如,以DC〇M、Java、可擴展 標題(extensible header)、XML格式等等。因此,由於現行 HSM系統典法適當提供局邵轉移技術,因而在考慮檔案局 部轉移的情況下而發展出本發明。 雖然未預定限制,但是示範性中繼資料描述可包括識別 配合轉移資料所利用的遠端儲存服務、描述被轉移的儲存 區塊範圍以及描述如最後轉移時間之類的任何其他資訊。 例如,圖3C所示之於時間t3的資料流stream3的中繼資料 可包括配合資料轉移所使用的遠端儲存服務ID。於時間 t3的資料流stream3的中繼資料可包括被轉移的儲存區塊範 圍的描述。範圍描述所使用的單元可能是配置單元。在圖 3C的實例中,範圍清單可能是:
Ml : <0, m、〉 M2 : <mi + 1, m2> M3 :〈in〗+ 1,in〕〉 Μ4 : <m3 + 1,m4> 另外’中繼資料可包括描述(例如)最後發生轉移的時間或 _-25· 本紙張尺度適用中國國家標準(CNS) A4規格(210 X 297公釐) 1232396 A7 B7 五、發明説明(23 ) 發生現行轉移的時間等時間資訊。 請參考圖5和6以及前面針對時間t3之資料流stream3 的中繼資料描述,解説HSM 500經由中繼資料520進行的 擷取處理程序,以響應轉移儲存裝置530中η至m位元組 範圍的呼叫者540。中繼資料520可能儲存於任何類型的 儲存元件中,如Jet資料庫。呼叫者540可能是呼叫HSM 500以取得資料的任何類型的物件,如應用程式、服務等 等。轉移儲存裝置530可代表存放轉移資料的任何種類的 多重儲存單元。於600,HSM 500確保取得緩衝器510, 以傳回所有的被呼叫位元組η至m。於610,HSM 500藉 由讀取前面的範圍清單,以決定哪一些區塊Mi ( Mi通常 代表任何儲存區塊,如Ml、M2、M3等等)包括從範圍η 至m的資料。例如,假設經由中繼資料描述所做的決定產 生在M2範圍内的η至⑴,以及在M3範圍内的(ni + 1)至 m ,則於620,從轉移儲存裝置530擷取位於M2中的資 料。於630,從M2讀取η至⑴,並置於傳回緩衝器510 中。於640,從轉移儲存裝置530擷取位於M3中的資料。 於65〇,從M3讀取(η! + 1)至m,並置於傳回緩衝辱510 中。於660,所要求的位元組範圍η至m已填滿緩衝器 510,HSM 500將要求的位元組範圍η至m從緩衝器510 傳送至呼叫者540。 維護局部轉移檔案之轉移資訊的方法可包括定義檔案系 統中繼資料(用於描述檔案屬性及其在磁碟區的位置)與檔 案遠端資料延伸位置之間的關聯性。例如,如果使用具有 -26· 本紙張尺度適用中國國家標準(CNS) A4規格(210X297公釐) 1232396 A7 ___B7 五、發明説明(24 ) 介面應用程式設計介面(API)的DCOM來實施連至後端遠端 儲存裝置的介面,則維護有關檔案磁碟配置資訊的NT檔 案伺服器部份可能位於遠端管理SAM硬體的NT檔案伺服 器部份。 因此,本發明説明可配合將檔案一部份從某儲存位置轉 移至另一儲存位置使用的方法及技術,並且將這些方法及 技術併入彈性及高效率的HSM系統。 本文中所説明的各種技術可運用硬體、軟體或硬軟體之 組合來實施。因此,還可能以有形媒體中具體化的程式碼 (即’指令)形式來具體化本發明的方法及技術,例如,軟 碟機、光碟機、硬碟機及任何其他機器可讀取儲存媒體, 其中’當諸如電腦的機器載入並執行程式碼時,則機器成 爲用來實施本發明的裝置。就在可程式規劃電腦上執行的 程式碼而言,電腦通常包括處理器、處理器可讀取的儲存 媒體(包括揮發性及非揮發性記憶體及/或儲存元件)、至 少一個輸入裝置及至少一個輸出裝置。最好使用高階程序 或物件導向式程式設計語言來實施一個或一個以上程式, 以與電腦系統溝通。然而,若希望,可使用組合語言或機 器語言來實施程式。在任何情況下,語言可能是已編譯或 解譯的語言,並且組合硬體實施。 返可能以透過傳輸媒體(如電氣線路或纜線、光纖或經 由任何傳輸形式)傳輸的程式碼形式來具體化本發明的方 法及裝置,其中,當機器(如EPROM、閘陣列、可程式規 劃邏輯裝置(PLD)、用户端電腦、錄影機等等)接收、載入
五、 發明説明( 25 :執仃的程式碼時,機器成爲用來實施本發明的裝置。當 ^般用途的處理器上實施時,則組合程式碼段與處: 7 ’以便提供用來執行本發明檢索功能的獨特裝置。例 :。’配合本發明使用的儲存技術—定是硬體與軟體的組 雖然已參考各圖的較佳具體實施例來説明本發明,但是 ^知通可使用其他類似的具體實施例或可修改或增建所説 明日的具體實施例以執行本發明的相同功能,而不會脱離本 :月例如·’雖然根據本發明一起使用疏鬆檔案和轉移檔 彳疋局#轉移技術也適用於會成長或更新的任何樓案 $任何種類的資料流。再者,應知道,根據本發明,有許 2不同的通訊及網路通訊協定適用於產生及儲存檔案轉移 貝訊(中繼資料)。另外,應強調考慮使用各種電腦平台, 包括攜帶型裝置作業系統及其他應用特定的作業系統。因 此,本發明不應限定於任何單一具體實施例,而是應視爲 屬於如隨附申請專利範圍的範疇内。 -28- 本紙張尺度適用中® S家標準(CNS) A4規格(2l〇x297公爱)

Claims (1)

  1. A8 B8 C8 D8 12318808號專利申請案 中文申請專利範圍替換本(93车R丐、 申请專利範圍 .一種用以在一電腦系統中將一資料流部份從一第一儲 存位置轉移至一第二儲存位置之方法,該方法包括下 列步驟: 4別要轉移至該第二儲存位置之該資料流的至少一 部份; 將該至少一部份轉移至該第二儲存位置;以及 保存該貧料流的資料關聯性。
    2如申叫專利範圍第丨項之方法,其中該第一儲存位置 及孩第二儲存位置係位於不同的磁碟區中。 3.如申巧專利範圍第丨項之方法,其中該識別要轉移之 琢至少一邵份包括依據預設準則來識別該至少一部 份。 4 ”請專利範圍第3項之方法,其中該識別要轉移之 ^ ^ ^ "卩伤包括指定一保存(archive)單元大小。 5.如申請專利範圍第3 .項之方法,其中該識別要轉移之 4 土少一邵份包括指定一更新區域大小。 6如申請專利範圍第3項之方法,其中該識別要轉移之 孩至少一邵份包括針對該資料流指定-適用於該第-儲存位置的記憶體配置限制。 7如申請專利範圍第6項之方法,其中執行該移動該至 少-邵份’而不會超過該記憶體配置限制。 &如申請專利範圍第1項之方法,其中該資料流具有至 少一可識別的更新區域。 分如申請專利範圍第1項之方法,其中該識別要轉移之 本紙張尺度適财國國家標準----- 1232396
    A8 B8 C8
    六、申請專利範圍 該至少一部份包括識別一資料流類犁。 口 m、主& u, . J:中該資料流類贺疋 10·.如申請專利範圍第9項之方法,其T 一唯附加型檔案。 口 11·如申請專利範圍帛9項之方法,其中誃貧料流類蜇疋 唯爲弟一儲存區塊型樓案。 12如申請專利範圍第1項之方法,其中^第一储存^ 是一連續存取媒體(SAM)。 13.如申請專利範圍帛1項之方法,其中$第儲存^ 是一本機位置,而該第二儲存位置是/逑端位置。 14如申請專利範圍第丨項之方法,.其中該第一儲存仅^ 是一非安全型儲存位置,而該第二儲存位置疋一文玉 型儲存位置。 I5·如申請專利範圍第丨項之方法,其中該第一儲存位置 是一線上位置,而該第二儲存位置是一離線位置。 16.如申請專利範圍第1項之方法,其中該保存該/貝料"’b 的資料關聯性包括產生用來描述該關聯性的中繼S 料。 Γ7·如申請專利範圍第16項之方法,其中該用來描述該關 聯性的中繼資料係依據能夠併入全球資訊網(W〇rld Wide Web)組件的可描述型介面將之格式化。 18·如申請專利範圍第16項之方法,其中該用來描述該關 聯性的中繼資料係依據可擴展標記語言(extensible markup language ; XML)、分散式組件物件模型 (distributed component object model ; DCOM)和 Java 的至 -2- 本紙張尺度適用中國國家標準(CNS) A4規格(210 x 297公釐). I232396
    申請專利範 A8 B8 C8 D8 圍 少—種格式將之格式化。 I如申請專利範圍帛1項之方法,其中將該至少一部份 I動至該第二儲存位置之後,釋出該第一儲存位置中 4 土;> —部份的儲存區,以供系統使用。 沿如申請專利範圍第1項之方法,其中該資料流類型是 一疏鬆檔案。 十種電腦可讀取媒體,具有電腦可執行指令以指示— 電腦執行如申請專利範圍第1項之方法。 21 一種電腦可讀取媒體,用以儲存與一資料流轉移特性 相關的中繼貧料’其中該資料流的至少一部份係從_ 第儲存位置轉移至一第二儲存位置,該電腦可讀取 知1體包括: 識别項,用以識別有至少一部份要轉移的資料 流; x /、料其代表配合轉移該至少一部份使用的儲存服 務;以及 貧料’其代表該至少一轉移部份的記憶體映射。 23.如申請專利範圍第22項之電腦可讀取媒體,進—步包 括一與該資料流之該至少一部份之轉移時間相關的時 間資料。 24如申請專利範圍第22項之電腦可讀取媒體,其中係依 據能夠併入全球資訊網(W〇rld Wide Web)組件的可插述 型介面格式來儲存該媒體。 25·如申請專利範圍第22項之電腦可讀取媒體,其中係以 本紙張尺度適用中國國家標準(CNS) A4規格(21〇x297公釐) 1232396 έβ8 Ί仁 、 cs ._______——_一”一 ... D8 六、申請專利範圍 可擴展標記語言(extensible markup language ; XML )、分 散式組件物件模型(distributed component object model ; DCOM )和Java的至少一種格式來儲存該媒體。 26. 如申請專利範圍第22項之電腦可讀取媒體,其中該媒 體係儲存於一 Jet資料庫中。 27. —種提供一應用程式設計介面(API)以使用於一電腦系 統之方法,藉此可依據如申請專利範圍第1項之方法 的局部轉移技術而註冊一用於管理的資料流。 28. 如申請專利範圍第27項之提供一應用程式設計介面 (API)以使用於一電腦系統之方法,藉此該介面提供一 種通用方法,以產生及儲存配合將該資料流局部轉移 至次儲存區使用的中繼資料。 29. —種電腦系統,包括: 一階層儲存管理(hierarchical storage management ; HSM )系統,用以管理一要局部轉移的資料流;以及 一來源儲存位置,該來源儲存位置上儲存一被該 HSM系統服務的資料流; 其中該HSM系統依據預設準則識別並轉移該資料流 的該至少一部份至一目標儲存位置,並且產生用來描 述該至少一轉移部份之資料關聯性的中繼資料。 3〇·如申請專利範圍第29項之電腦系統,其中該HSM系統 指定一保存(archive)單元大小。 31.如申請專利範圍第29項之電腦系統,其中該HSM系統 指定一更新區域大小。 -4- 本紙張尺度適用中國國家標準(CNS) A4規格(210 X 297公釐) I232396|I|rCR1 牛 乃 ,.一… Λ:ϋ Α8 Β8 C8 D8 六 、申請專利祀圍 32如申請專利範圍第29項之電腦系統,其中該HSM系統 針對該.資料流指定一適用於該來源儲存位置的記憶體 配置限制。 33.如申請專利範圍第32項之電腦系統,其中該HSM系統 移動該資料流的至少一部份,使得不會超過該記憶體 配置限制。 34如申請專利範圍第29項之電腦系統,其中該HSM系統 識別一具有至少一可識別更新區域的資料流。 35.如申請專利範圍第29項之電腦系統,其中該HSM系統 識別該至少一部份包括識別一資料流類型。 36·如中請專利範圍第35項之電腦系統,其中該資料流類 型是一唯附加型檔案。 37. 如申請專利範圍第35項之電腦系統,其中該資料流類 型是一唯窝第一儲存區塊型檔案。 38. 如申請專利範圍第29項之電腦系統,其中該目標儲存 位置是一連續存取媒體(SAM)。 39·如申請專利範圍第29項之電腦系統,其中該來源儲存 位置是一線上位置,而該目標儲存位置是一離線位 置。 40·如申請專利範圍第29項之電腦系統,其中該來源儲存 位置是一非安全型儲存位置,而該目標儲存位置是— 安全型儲存位置。 41·如申請專利範圍第29項之電腦系統,其中該中繼資料 係依據能夠併入全球資訊網(World Wide Web)組件的可
    Ι23239#、τ:曹換頁 _'人擎8·巧 a A8 B8 C8 D8 六、申請專利範圍 描述型介面將之格式化。 42如申請專利範圍第29項之電腦系統,其中該用來描述 該關聯性的中繼資料係依據可擴展標記語言(extensible markup language ; XML)、 分散式組件物件模型 (distributed component object model ; DCOM ) f口 Java 白勺至 少一種格式將之格式化。 43·如申請專利範圍第29項之電腦系統,其中將該至少一 部份移動至該目標儲存位置之後,該H S Μ系統釋出 該來源儲存位置中之該至少一部份所使用的儲存區。 44如申請專利範圍第2 9項之電腦系統,其中該資料流類 型是一疏鬆檔案。 本紙張尺度適用中國國家標準(CNS) Α4規格(210 X 297公釐)
TW090118808A 2000-08-24 2001-08-01 Partial migration of an object to another storage location in a computer system TWI232396B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US09/644,667 US6981005B1 (en) 2000-08-24 2000-08-24 Partial migration of an object to another storage location in a computer system

Publications (1)

Publication Number Publication Date
TWI232396B true TWI232396B (en) 2005-05-11

Family

ID=24585875

Family Applications (1)

Application Number Title Priority Date Filing Date
TW090118808A TWI232396B (en) 2000-08-24 2001-08-01 Partial migration of an object to another storage location in a computer system

Country Status (5)

Country Link
US (2) US6981005B1 (zh)
EP (1) EP1182554B1 (zh)
JP (2) JP2002099450A (zh)
KR (1) KR100855139B1 (zh)
TW (1) TWI232396B (zh)

Families Citing this family (152)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7617292B2 (en) 2001-06-05 2009-11-10 Silicon Graphics International Multi-class heterogeneous clients in a clustered filesystem
US7640582B2 (en) 2003-04-16 2009-12-29 Silicon Graphics International Clustered filesystem for mix of trusted and untrusted nodes
US20040139125A1 (en) 2001-06-05 2004-07-15 Roger Strassburg Snapshot copy of data volume during data access
US8010558B2 (en) 2001-06-05 2011-08-30 Silicon Graphics International Relocation of metadata server with outstanding DMAPI requests
US7136883B2 (en) * 2001-09-08 2006-11-14 Siemens Medial Solutions Health Services Corporation System for managing object storage and retrieval in partitioned storage media
CA2461025A1 (en) * 2001-09-26 2003-04-03 Mark Saake Efficient mangement of large files
JP3966459B2 (ja) * 2002-05-23 2007-08-29 株式会社日立製作所 ストレージ機器管理方法、システム、およびプログラム
EP1570357A1 (en) * 2002-12-02 2005-09-07 Arkivio, Inc. Data recovery techniques in storage systems
US8015266B1 (en) * 2003-02-07 2011-09-06 Netapp, Inc. System and method for providing persistent node names
US7765551B2 (en) * 2003-02-10 2010-07-27 Novell, Inc. System for dynamically loading application resources from the first server to the second server based on the modified application resources from the first server
JP4322031B2 (ja) 2003-03-27 2009-08-26 株式会社日立製作所 記憶装置
CA2523279A1 (en) * 2003-04-24 2004-11-11 Secureinfo Corporation Method, system and article of manufacture for data preservation and automated electronic software distribution across an enterprise system
JP4349871B2 (ja) * 2003-09-09 2009-10-21 株式会社日立製作所 ファイル共有装置及びファイル共有装置間のデータ移行方法
US7165059B1 (en) * 2003-12-23 2007-01-16 Veritas Operating Corporation Partial file migration mechanism
US8825591B1 (en) * 2003-12-31 2014-09-02 Symantec Operating Corporation Dynamic storage mechanism
US20050192975A1 (en) * 2004-02-12 2005-09-01 Interdigital Technology Corporation Resource management system for electronic devices
US7428557B2 (en) * 2004-03-22 2008-09-23 Microsoft Corporation Efficient data transfer to/from storage medium of computing device
US20050216532A1 (en) * 2004-03-24 2005-09-29 Lallier John C System and method for file migration
JP2005321913A (ja) * 2004-05-07 2005-11-17 Hitachi Ltd ファイル共有装置を有する計算機システム、および、ファイル共有装置の移行方法
US7441096B2 (en) 2004-07-07 2008-10-21 Hitachi, Ltd. Hierarchical storage management system
KR100678893B1 (ko) * 2004-09-16 2007-02-07 삼성전자주식회사 객체 식별자를 이용하여 이동형 저장 장치에서 권리객체를 검색하는 방법 및 장치
US8055622B1 (en) * 2004-11-30 2011-11-08 Symantec Operating Corporation Immutable data containers in tiered storage hierarchies
US7831639B1 (en) * 2004-12-22 2010-11-09 Symantec Operating Corporation System and method for providing data protection by using sparse files to represent images of data stored in block devices
US8108579B2 (en) * 2005-03-31 2012-01-31 Qualcomm Incorporated Mechanism and method for managing data storage
US7711916B2 (en) * 2005-05-11 2010-05-04 Oracle International Corporation Storing information on storage devices having different performance capabilities with a storage system
WO2006137057A2 (en) * 2005-06-21 2006-12-28 Onigma Ltd. A method and a system for providing comprehensive protection against leakage of sensitive information assets using host based agents, content- meta-data and rules-based policies
US7506005B2 (en) * 2005-07-14 2009-03-17 Microsoft Corporation Moving data from file on storage volume to alternate location to free space
US7506003B2 (en) * 2005-07-14 2009-03-17 Microsoft Corporation Moving data from file on storage volume to alternate location to free space
US7801864B2 (en) 2005-11-28 2010-09-21 Commvault Systems, Inc. Systems and methods for using metadata to enhance data identification operations
JP2007148982A (ja) * 2005-11-30 2007-06-14 Hitachi Ltd ストレージシステム及びその管理方法
EP1798934A1 (en) * 2005-12-13 2007-06-20 Deutsche Thomson-Brandt Gmbh Method and apparatus for organizing nodes in a network
US20200257596A1 (en) 2005-12-19 2020-08-13 Commvault Systems, Inc. Systems and methods of unified reconstruction in storage systems
US8930496B2 (en) 2005-12-19 2015-01-06 Commvault Systems, Inc. Systems and methods of unified reconstruction in storage systems
JP4890048B2 (ja) * 2006-02-24 2012-03-07 株式会社日立製作所 記憶制御装置及び記憶制御装置を用いたデータマイグレーション方法
US7831793B2 (en) * 2006-03-01 2010-11-09 Quantum Corporation Data storage system including unique block pool manager and applications in tiered storage
US8171251B2 (en) 2006-03-16 2012-05-01 Sandisk Il Ltd. Data storage management method and device
JP4902644B2 (ja) * 2006-04-24 2012-03-21 パナソニック株式会社 データ処理装置、データ処理方法、データ処理プログラム、およびそのデータ処理プログラムを記録した記録媒体、並びに集積回路
WO2007133791A2 (en) * 2006-05-15 2007-11-22 Richard Kane Data partitioning and distributing system
KR100834574B1 (ko) 2006-09-29 2008-06-02 한국전자통신연구원 파일 저장 시스템 및 그 시스템에서의 파일 저장 및 검색방법
US8806480B2 (en) * 2007-06-29 2014-08-12 Microsoft Corporation Virtual machine smart migration
US9298417B1 (en) * 2007-07-25 2016-03-29 Emc Corporation Systems and methods for facilitating management of data
US20090157756A1 (en) * 2007-12-15 2009-06-18 Hitachi Global Storage Technologies Netherlands, B.V. File System For Storing Files In Multiple Different Data Storage Media
US8301726B2 (en) * 2007-12-21 2012-10-30 International Business Machines Corporation Method and system for bit streaming for data centric applications
JP2009260541A (ja) * 2008-04-15 2009-11-05 Sony Corp 送信装置および方法、受信装置および方法、プログラム、並びに、送受信システムおよび方法
JP5248912B2 (ja) * 2008-05-12 2013-07-31 株式会社日立製作所 サーバ計算機、計算機システムおよびファイル管理方法
AU2010202034B1 (en) * 2010-04-07 2010-12-23 Limelight Networks, Inc. Partial object distribution in content delivery network
US8255373B2 (en) * 2008-10-24 2012-08-28 Microsoft Corporation Atomic multiple modification of data in a distributed storage system
CN101739308B (zh) * 2008-11-06 2011-11-09 英业达股份有限公司 映像文件的生成方法及其存放系统
US8209307B2 (en) * 2009-03-31 2012-06-26 Commvault Systems, Inc. Systems and methods for data migration in a clustered file system
US8452932B2 (en) * 2010-01-06 2013-05-28 Storsimple, Inc. System and method for efficiently creating off-site data volume back-ups
US8285762B2 (en) * 2010-05-11 2012-10-09 International Business Machines Corporation Migration of metadata and storage management of data in a first storage environment to a second storage environment
US9165015B2 (en) * 2010-07-29 2015-10-20 International Business Machines Corporation Scalable and user friendly file virtualization for hierarchical storage
JP5439607B2 (ja) * 2010-09-14 2014-03-12 株式会社日立製作所 サーバ装置及びサーバ装置の制御方法
US20120278553A1 (en) * 2011-04-28 2012-11-01 Mudhiganti Devender R System and method for migration of data clones
US8938517B2 (en) * 2011-05-06 2015-01-20 SpotStorage, Inc. System, method and computer program product for managing a remote storage
EP2717165A4 (en) 2011-05-30 2015-04-22 Hitachi Ltd ADMINISTRATIVE APPARATUS AND ADMINISTRATIVE PROCESS FOR A COMPUTER SYSTEM
US8515904B1 (en) * 2012-03-29 2013-08-20 Emc Corporation Providing file sytem quota support for a file system having separated data and metadata
US8639665B2 (en) 2012-04-04 2014-01-28 International Business Machines Corporation Hybrid backup and restore of very large file system using metadata image backup and traditional backup
US8892523B2 (en) 2012-06-08 2014-11-18 Commvault Systems, Inc. Auto summarization of content
US8914334B2 (en) 2012-09-12 2014-12-16 International Business Machines Corporation Using a metadata image of a file system and archive instance to restore data objects in the file system
US8805789B2 (en) 2012-09-12 2014-08-12 International Business Machines Corporation Using a metadata image of a file system and archive instance to backup data objects in the file system
US10057726B2 (en) 2012-10-02 2018-08-21 Razer (Asia-Pacific) Pte. Ltd. Managing user data on an electronic device
US9106721B2 (en) * 2012-10-02 2015-08-11 Nextbit Systems Application state synchronization across multiple devices
WO2014119867A1 (en) 2013-01-31 2014-08-07 Samsung Electronics Co., Ltd. Method of and device for managing applications
US11016637B2 (en) 2013-01-31 2021-05-25 Samsung Electronics Co., Ltd. Method of and device for managing applications
US10545628B2 (en) 2013-01-31 2020-01-28 Samsung Electronics Co., Ltd. Method of and device for managing applications
KR102101876B1 (ko) * 2013-01-31 2020-04-21 삼성전자주식회사 애플리케이션들을 관리하는 방법 및 애플리케이션들의 관리를 수행하는 디바이스
US20140310493A1 (en) * 2013-04-11 2014-10-16 International Business Machines Corporation Migrating data across storages with dissimilar allocation sizes
PL2987084T3 (pl) * 2013-04-18 2021-01-25 Ruslan Albertovich SHIGABUTDINOV Układy i sposoby zarządzania plikami przez mobilne urządzenia komputerowe
US9354979B2 (en) 2014-02-07 2016-05-31 International Business Machines Corporation Server based disaster recovery by making use of dual write responses
US10105593B2 (en) 2014-04-08 2018-10-23 Razer (Asia-Pacific) Pte. Ltd. File prefetching for gaming applications accessed by electronic devices
US9087012B1 (en) 2014-06-04 2015-07-21 Pure Storage, Inc. Disaster recovery at high reliability in a storage cluster
US9811677B2 (en) 2014-07-03 2017-11-07 Pure Storage, Inc. Secure data replication in a storage grid
CN105446653B (zh) * 2014-08-27 2018-12-14 阿里巴巴集团控股有限公司 一种数据合并方法和设备
JP6037469B2 (ja) 2014-11-19 2016-12-07 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation 情報管理システム、情報管理方法およびプログラム
US9881038B2 (en) * 2015-04-20 2018-01-30 International Business Machines Corporation Archive migration system
CN106227795A (zh) * 2016-07-20 2016-12-14 曙光信息产业(北京)有限公司 分级存储的检测方法和系统
CN107665224B (zh) * 2016-07-29 2021-04-30 北京京东尚科信息技术有限公司 扫描hdfs冷数据的方法、系统和装置
US10248352B2 (en) * 2016-09-15 2019-04-02 International Business Machines Corporation Management of object location in hierarchical storage
US10540516B2 (en) 2016-10-13 2020-01-21 Commvault Systems, Inc. Data protection within an unsecured storage environment
US10949398B2 (en) 2017-03-29 2021-03-16 Commvault Systems, Inc. Synchronization operations for network-accessible folders
US10359954B2 (en) 2017-05-31 2019-07-23 Alibaba Group Holding Limited Method and system for implementing byte-alterable write cache
US10884926B2 (en) 2017-06-16 2021-01-05 Alibaba Group Holding Limited Method and system for distributed storage using client-side global persistent cache
US10303241B2 (en) 2017-06-19 2019-05-28 Alibaba Group Holding Limited System and method for fine-grained power control management in a high capacity computer cluster
US11294853B1 (en) * 2017-06-22 2022-04-05 Amazon Technologies, Inc. Archiver for data stream service
US10564856B2 (en) 2017-07-06 2020-02-18 Alibaba Group Holding Limited Method and system for mitigating write amplification in a phase change memory-based storage device
US10678443B2 (en) 2017-07-06 2020-06-09 Alibaba Group Holding Limited Method and system for high-density converged storage via memory bus
US10423508B2 (en) 2017-08-11 2019-09-24 Alibaba Group Holding Limited Method and system for a high-priority read based on an in-place suspend/resume write
US10303601B2 (en) 2017-08-11 2019-05-28 Alibaba Group Holding Limited Method and system for rearranging a write operation in a shingled magnetic recording device
US10496829B2 (en) 2017-09-15 2019-12-03 Alibaba Group Holding Limited Method and system for data destruction in a phase change memory-based storage device
US10642522B2 (en) 2017-09-15 2020-05-05 Alibaba Group Holding Limited Method and system for in-line deduplication in a storage drive based on a non-collision hash
US10789011B2 (en) 2017-09-27 2020-09-29 Alibaba Group Holding Limited Performance enhancement of a storage device using an integrated controller-buffer
US10503409B2 (en) 2017-09-27 2019-12-10 Alibaba Group Holding Limited Low-latency lightweight distributed storage system
US10860334B2 (en) 2017-10-25 2020-12-08 Alibaba Group Holding Limited System and method for centralized boot storage in an access switch shared by multiple servers
US10445190B2 (en) 2017-11-08 2019-10-15 Alibaba Group Holding Limited Method and system for enhancing backup efficiency by bypassing encoding and decoding
US10877898B2 (en) 2017-11-16 2020-12-29 Alibaba Group Holding Limited Method and system for enhancing flash translation layer mapping flexibility for performance and lifespan improvements
US10496548B2 (en) 2018-02-07 2019-12-03 Alibaba Group Holding Limited Method and system for user-space storage I/O stack with user-space flash translation layer
US10891239B2 (en) 2018-02-07 2021-01-12 Alibaba Group Holding Limited Method and system for operating NAND flash physical space to extend memory capacity
US10831404B2 (en) 2018-02-08 2020-11-10 Alibaba Group Holding Limited Method and system for facilitating high-capacity shared memory using DIMM from retired servers
US10642886B2 (en) 2018-02-14 2020-05-05 Commvault Systems, Inc. Targeted search of backup data using facial recognition
US10402112B1 (en) 2018-02-14 2019-09-03 Alibaba Group Holding Limited Method and system for chunk-wide data organization and placement with real-time calculation
WO2019222958A1 (en) 2018-05-24 2019-11-28 Alibaba Group Holding Limited System and method for flash storage management using multiple open page stripes
US10921992B2 (en) 2018-06-25 2021-02-16 Alibaba Group Holding Limited Method and system for data placement in a hard disk drive based on access frequency for improved IOPS and utilization efficiency
US11816043B2 (en) 2018-06-25 2023-11-14 Alibaba Group Holding Limited System and method for managing resources of a storage device and quantifying the cost of I/O requests
US10871921B2 (en) 2018-07-30 2020-12-22 Alibaba Group Holding Limited Method and system for facilitating atomicity assurance on metadata and data bundled storage
US10747673B2 (en) 2018-08-02 2020-08-18 Alibaba Group Holding Limited System and method for facilitating cluster-level cache and memory space
US10996886B2 (en) 2018-08-02 2021-05-04 Alibaba Group Holding Limited Method and system for facilitating atomicity and latency assurance on variable sized I/O
US11327929B2 (en) 2018-09-17 2022-05-10 Alibaba Group Holding Limited Method and system for reduced data movement compression using in-storage computing and a customized file system
US10852948B2 (en) 2018-10-19 2020-12-01 Alibaba Group Holding System and method for data organization in shingled magnetic recording drive
US11182090B2 (en) * 2018-11-19 2021-11-23 Micron Technology, Inc. Systems, devices, and methods for data migration
US10795586B2 (en) 2018-11-19 2020-10-06 Alibaba Group Holding Limited System and method for optimization of global data placement to mitigate wear-out of write cache and NAND flash
US10769018B2 (en) 2018-12-04 2020-09-08 Alibaba Group Holding Limited System and method for handling uncorrectable data errors in high-capacity storage
US10977122B2 (en) 2018-12-31 2021-04-13 Alibaba Group Holding Limited System and method for facilitating differentiated error correction in high-density flash devices
US10884654B2 (en) 2018-12-31 2021-01-05 Alibaba Group Holding Limited System and method for quality of service assurance of multi-stream scenarios in a hard disk drive
US11061735B2 (en) 2019-01-02 2021-07-13 Alibaba Group Holding Limited System and method for offloading computation to storage nodes in distributed system
US11132291B2 (en) 2019-01-04 2021-09-28 Alibaba Group Holding Limited System and method of FPGA-executed flash translation layer in multiple solid state drives
US11200337B2 (en) 2019-02-11 2021-12-14 Alibaba Group Holding Limited System and method for user data isolation
US11392541B2 (en) 2019-03-22 2022-07-19 Hewlett Packard Enterprise Development Lp Data transfer using snapshot differencing from edge system to core system
US10922234B2 (en) 2019-04-11 2021-02-16 Alibaba Group Holding Limited Method and system for online recovery of logical-to-physical mapping table affected by noise sources in a solid state drive
US10908960B2 (en) 2019-04-16 2021-02-02 Alibaba Group Holding Limited Resource allocation based on comprehensive I/O monitoring in a distributed storage system
US11169873B2 (en) 2019-05-21 2021-11-09 Alibaba Group Holding Limited Method and system for extending lifespan and enhancing throughput in a high-density solid state drive
US10860223B1 (en) 2019-07-18 2020-12-08 Alibaba Group Holding Limited Method and system for enhancing a distributed storage system by decoupling computation and network tasks
US11126561B2 (en) 2019-10-01 2021-09-21 Alibaba Group Holding Limited Method and system for organizing NAND blocks and placing data to facilitate high-throughput for random writes in a solid state drive
US11042307B1 (en) 2020-01-13 2021-06-22 Alibaba Group Holding Limited System and method for facilitating improved utilization of NAND flash based on page-wise operation
US11449455B2 (en) 2020-01-15 2022-09-20 Alibaba Group Holding Limited Method and system for facilitating a high-capacity object storage system with configuration agility and mixed deployment flexibility
US10923156B1 (en) 2020-02-19 2021-02-16 Alibaba Group Holding Limited Method and system for facilitating low-cost high-throughput storage for accessing large-size I/O blocks in a hard disk drive
US10872622B1 (en) 2020-02-19 2020-12-22 Alibaba Group Holding Limited Method and system for deploying mixed storage products on a uniform storage infrastructure
US11150986B2 (en) 2020-02-26 2021-10-19 Alibaba Group Holding Limited Efficient compaction on log-structured distributed file system using erasure coding for resource consumption reduction
US11144250B2 (en) 2020-03-13 2021-10-12 Alibaba Group Holding Limited Method and system for facilitating a persistent memory-centric system
US11200114B2 (en) 2020-03-17 2021-12-14 Alibaba Group Holding Limited System and method for facilitating elastic error correction code in memory
CN111475467A (zh) * 2020-03-27 2020-07-31 平安科技(深圳)有限公司 一种文件管理方法、云端文件管理系统及终端
US11385833B2 (en) 2020-04-20 2022-07-12 Alibaba Group Holding Limited Method and system for facilitating a light-weight garbage collection with a reduced utilization of resources
US11281575B2 (en) 2020-05-11 2022-03-22 Alibaba Group Holding Limited Method and system for facilitating data placement and control of physical addresses with multi-queue I/O blocks
US11461262B2 (en) 2020-05-13 2022-10-04 Alibaba Group Holding Limited Method and system for facilitating a converged computation and storage node in a distributed storage system
US11494115B2 (en) 2020-05-13 2022-11-08 Alibaba Group Holding Limited System method for facilitating memory media as file storage device based on real-time hashing by performing integrity check with a cyclical redundancy check (CRC)
US11218165B2 (en) 2020-05-15 2022-01-04 Alibaba Group Holding Limited Memory-mapped two-dimensional error correction code for multi-bit error tolerance in DRAM
US11507499B2 (en) 2020-05-19 2022-11-22 Alibaba Group Holding Limited System and method for facilitating mitigation of read/write amplification in data compression
US11556277B2 (en) 2020-05-19 2023-01-17 Alibaba Group Holding Limited System and method for facilitating improved performance in ordering key-value storage with input/output stack simplification
US11263132B2 (en) 2020-06-11 2022-03-01 Alibaba Group Holding Limited Method and system for facilitating log-structure data organization
US11422931B2 (en) 2020-06-17 2022-08-23 Alibaba Group Holding Limited Method and system for facilitating a physically isolated storage unit for multi-tenancy virtualization
US11354200B2 (en) 2020-06-17 2022-06-07 Alibaba Group Holding Limited Method and system for facilitating data recovery and version rollback in a storage device
US11354233B2 (en) 2020-07-27 2022-06-07 Alibaba Group Holding Limited Method and system for facilitating fast crash recovery in a storage device
US11372774B2 (en) 2020-08-24 2022-06-28 Alibaba Group Holding Limited Method and system for a solid state drive with on-chip memory integration
CN112214458B (zh) * 2020-10-19 2023-08-11 珠海金山数字网络科技有限公司 数据转存储方法及装置
US11487465B2 (en) 2020-12-11 2022-11-01 Alibaba Group Holding Limited Method and system for a local storage engine collaborating with a solid state drive controller
US11734115B2 (en) 2020-12-28 2023-08-22 Alibaba Group Holding Limited Method and system for facilitating write latency reduction in a queue depth of one scenario
US11416365B2 (en) 2020-12-30 2022-08-16 Alibaba Group Holding Limited Method and system for open NAND block detection and correction in an open-channel SSD
US11366642B1 (en) 2021-02-25 2022-06-21 Bank Of America Corporation Change migration: processes for ensuring successful deployment of design changes
US11726699B2 (en) 2021-03-30 2023-08-15 Alibaba Singapore Holding Private Limited Method and system for facilitating multi-stream sequential read performance improvement with reduced read amplification
US11461173B1 (en) 2021-04-21 2022-10-04 Alibaba Singapore Holding Private Limited Method and system for facilitating efficient data compression based on error correction code and reorganization of data placement
US11476874B1 (en) 2021-05-14 2022-10-18 Alibaba Singapore Holding Private Limited Method and system for facilitating a storage server with hybrid memory for journaling and data storage
CN114327283B (zh) * 2021-12-30 2024-03-12 西北工业大学 分布式存储系统内的数据迁移方法及分布式存储系统

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4638424A (en) * 1984-01-12 1987-01-20 International Business Machines Corporation Managing data storage devices connected to a digital computer
US6044205A (en) * 1996-02-29 2000-03-28 Intermind Corporation Communications system for transferring information between memories according to processes transferred with the information
KR940000971A (ko) * 1992-06-05 1994-01-10 이문기 계층적 페이지 분할 구조의 가상 메모리를 지원하는 폴리어소시에이티브 테이블 룩 어사이드 버퍼
JPH07114444A (ja) * 1993-10-19 1995-05-02 Hitachi Ltd ファイル移動制御方式
US5617566A (en) * 1993-12-10 1997-04-01 Cheyenne Advanced Technology Ltd. File portion logging and arching by means of an auxilary database
JP3238558B2 (ja) * 1993-12-13 2001-12-17 株式会社東芝 ファイル再配置装置およびファイル再配置方法
US5802599A (en) * 1994-02-08 1998-09-01 International Business Machines Corporation System and method for allocating storage in a fragmented storage space
US5537585A (en) * 1994-02-25 1996-07-16 Avail Systems Corporation Data storage management for network interconnected processors
JP2682811B2 (ja) * 1994-03-22 1997-11-26 インターナショナル・ビジネス・マシーンズ・コーポレイション データ記憶管理システム及び方法
KR100380878B1 (ko) * 1994-04-25 2003-08-02 소니 가부시끼 가이샤 데이터저장처리장치
US5864683A (en) * 1994-10-12 1999-01-26 Secure Computing Corporartion System for providing secure internetwork by connecting type enforcing secure computers to external network for limiting access to data based on user and process access rights
US5630092A (en) * 1994-10-20 1997-05-13 International Business Machines System and method for transferring compressed and uncompressed data between storage systems
US5564037A (en) * 1995-03-29 1996-10-08 Cheyenne Software International Sales Corp. Real time data migration system and method employing sparse files
JPH0944381A (ja) * 1995-07-31 1997-02-14 Toshiba Corp データ格納方法およびデータ格納装置
JPH09282202A (ja) * 1996-04-09 1997-10-31 Fuji Xerox Co Ltd データ移動管理システム
US5881311A (en) * 1996-06-05 1999-03-09 Fastor Technologies, Inc. Data storage subsystem with block based data management
US5987506A (en) * 1996-11-22 1999-11-16 Mangosoft Corporation Remote access and geographically distributed computers in a globally addressable storage environment
US6148377A (en) * 1996-11-22 2000-11-14 Mangosoft Corporation Shared memory computer networks
US6434553B1 (en) * 1996-12-13 2002-08-13 Hitachi, Ltd. File prefetch control method for computer system
US5897661A (en) * 1997-02-25 1999-04-27 International Business Machines Corporation Logical volume manager and method having enhanced update capability with dynamic allocation of storage and minimal storage of metadata information
US6311252B1 (en) * 1997-06-30 2001-10-30 Emc Corporation Method and apparatus for moving data between storage levels of a hierarchically arranged data storage system
US6233600B1 (en) * 1997-07-15 2001-05-15 Eroom Technology, Inc. Method and system for providing a networked collaborative work environment
US6044374A (en) * 1997-11-14 2000-03-28 Informatica Corporation Method and apparatus for sharing metadata between multiple data marts through object references
US5953729A (en) * 1997-12-23 1999-09-14 Microsoft Corporation Using sparse file technology to stage data that will then be stored in remote storage
JPH11306190A (ja) * 1998-04-21 1999-11-05 Mitsubishi Electric Corp ビデオサーバシステム
US6343265B1 (en) * 1998-07-28 2002-01-29 International Business Machines Corporation System and method for mapping a design model to a common repository with context preservation
US6269382B1 (en) * 1998-08-31 2001-07-31 Microsoft Corporation Systems and methods for migration and recall of data from local and remote storage
US6385706B1 (en) * 1998-12-31 2002-05-07 Emx Corporation Apparatus and methods for copying a logical object to a primary storage device using a map of storage locations
JP2000224257A (ja) * 1999-01-29 2000-08-11 Jisedai Joho Hoso System Kenkyusho:Kk 送信装置および受信装置
US6377996B1 (en) * 1999-02-18 2002-04-23 International Business Machines Corporation System for seamless streaming of data stored on a network of distributed primary and target servers using segmentation information exchanged among all servers during streaming
US6499039B1 (en) * 1999-09-23 2002-12-24 Emc Corporation Reorganization of striped data during file system expansion in a data storage system
US6804719B1 (en) * 2000-08-24 2004-10-12 Microsoft Corporation Method and system for relocating files that are partially stored in remote storage

Also Published As

Publication number Publication date
US6981005B1 (en) 2005-12-27
EP1182554A2 (en) 2002-02-27
EP1182554A3 (en) 2009-10-14
JP4975882B2 (ja) 2012-07-11
US20050097126A1 (en) 2005-05-05
KR20020016551A (ko) 2002-03-04
US7072914B2 (en) 2006-07-04
KR100855139B1 (ko) 2008-08-28
JP2002099450A (ja) 2002-04-05
EP1182554B1 (en) 2017-08-23
JP2012069161A (ja) 2012-04-05

Similar Documents

Publication Publication Date Title
TWI232396B (en) Partial migration of an object to another storage location in a computer system
JP4406224B2 (ja) イメージファイル管理方法及びその記録媒体
US6711572B2 (en) File system for distributing content in a data network and related methods
US9305069B2 (en) Method and system for uploading data into a distributed storage system
US8615485B2 (en) Method and system for managing weakly mutable data in a distributed storage system
US8504797B2 (en) Method and apparatus for managing thin provisioning volume by using file storage system
US7979403B2 (en) Method and system for compression of files for storage and operation on compressed files
US8504648B2 (en) Method and apparatus for storage-service-provider-aware storage system
JP4406225B2 (ja) 宛先記憶媒体、イメージファイルの作成方法、データ復元方法およびプログラム
US9449007B1 (en) Controlling access to XAM metadata
US10917260B1 (en) Data management across cloud storage providers
GB2330671A (en) Media manager
JP2016186782A (ja) データ処理方法及びデータ処理装置
JP2007073004A (ja) データ保全情報装置、分散ストレージシステム及びその方法
WO2007049109A2 (en) Method and system for compression of logical data objects for storage
JP2009501396A (ja) ストレージボリューム上のファイルから空きスペースの代替ロケーションへのデータの移動
JP4713257B2 (ja) データ記憶装置及びバージョン管理プログラム
US9727588B1 (en) Applying XAM processes
KR100936919B1 (ko) 메타데이터의 일관성을 보장하기 위한 분산 파일 시스템 및방법
WO2021142768A1 (zh) 一种文件系统的克隆方法及装置
US20020087787A1 (en) System to support dynamically flexible data definitions and storage requirements
KR101667760B1 (ko) 파일 할당 테이블 파일 시스템 및 파일 저장 방법
GB2469121A (en) Copying data to a backup server, which write the data directly to the disc blocks associated with a file
Wang et al. A general-purpose, intelligent RAID-based object storage device

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees