TWI680404B - 數據虛擬化存儲方法和裝置 - Google Patents

數據虛擬化存儲方法和裝置 Download PDF

Info

Publication number
TWI680404B
TWI680404B TW106140288A TW106140288A TWI680404B TW I680404 B TWI680404 B TW I680404B TW 106140288 A TW106140288 A TW 106140288A TW 106140288 A TW106140288 A TW 106140288A TW I680404 B TWI680404 B TW I680404B
Authority
TW
Taiwan
Prior art keywords
storage
data
distributed
instruction
virtual
Prior art date
Application number
TW106140288A
Other languages
English (en)
Other versions
TW201820126A (zh
Inventor
呂利文
Liwen LV
王欣
Xin Wang
Original Assignee
大陸商平安科技（深圳）有限公司
Ping An Technology (Shenzhen) Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商平安科技（深圳）有限公司, Ping An Technology (Shenzhen) Co., Ltd. filed Critical 大陸商平安科技（深圳）有限公司
Publication of TW201820126A publication Critical patent/TW201820126A/zh
Application granted granted Critical
Publication of TWI680404B publication Critical patent/TWI680404B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0662—Virtualisation aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本發明涉及一種數據虛擬化存儲方法和裝置，該方法包括：獲取終端發送的存儲請求；根據存儲請求獲取待存儲數據，並提取存儲請求中之虛擬存儲路徑與虛擬存儲指令；查找與虛擬存儲路徑對應之分散式存儲路徑，並於分散式指令庫中查找與虛擬存儲指令對應之分散式存儲指令；根據分散式存儲路徑與分散式存儲指令將待存儲數據存儲至分散式存放裝置。本發明可將終端與分散式存放裝置銜接，並為終端提供分散式存儲功能，將終端發送之存儲數據存儲至分散式存放裝置中。避免浪費過多資源對本地之存放裝置進行管理，提高數據存儲之效率。

Description

數據虛擬化存儲方法和裝置
本發明涉及存儲虛擬化之技術領域，特別是關於數據虛擬化存儲方法和裝置。
隨著互聯網技術的發展和應用，於互聯網應用過程中會產生大量數據。於互聯網中需將大量數據進行存儲。傳統數據存儲技術中，使用者皆會將所產生之數據存儲至本地之存放裝置中。
傳統存儲技術中，當使用者產生之數據較多時，會面臨本地存放裝置不足之情形，此時，需對本地之存放裝置進行擴展。然而，對本機存放區設備進行擴展，不僅會增加用戶管理成本，仍需耗費較多資源對本地之存放裝置進行管理，易造成資源浪費。
基於此，有必要針對資源浪費問題，提供一種數據虛擬化存儲方法和裝置。
一種數據虛擬化存儲方法，該方法包括：獲取終端發送之存儲請求；根據該存儲請求獲取待存儲數據，並提取該存儲請求中之虛擬存儲路徑與虛擬存儲指令；查找與該虛擬存儲路徑對應之分散式存儲路徑，並於分散式指令庫中查找與該虛擬存儲指令對應之分散式存儲指令；根據該分散式存儲路徑與該分散式存儲指令將該待存儲數據存儲至分散式存放裝置。
一種數據虛擬化存儲裝置，該裝置包括：一存儲請求獲取模組，用以獲取終端發送的存儲請求；一數據獲取模組，用以根據該存儲請求獲取待存儲數據，並提取該存儲請求中之虛擬存儲路徑與虛擬存儲指令；一存儲指令查找模組，用以查找與虛擬存儲路徑對應之分散式存儲路徑，並於分散式指令庫中查找與該虛擬存儲指令對應之分散式存儲指令；一數據存儲模組，用以根據該分散式存儲路徑與該分散式存儲指令將該待存儲數據存儲至分散式存放裝置。
上述數據虛擬化存儲方法和裝置，藉由虛擬存儲路徑與虛擬存儲指令可將終端與分散式存放裝置銜接，並為終端提供分散式存儲功能，將終端發送之存儲數據存儲至分散式存放裝置中。無需對本地之存放裝置進行擴展，即可將數據存儲至分散式存放裝置，避免浪費過多資源對本地之存放裝置進行管理，提高數據之存儲效率。
為使本發明目的、技術方案及優點更加清楚明白，以下結合附圖及實施方式，對本發明進行進一步詳細說明。應當理解，此處所描述具體實施方式僅用以解釋本發明，並非用以限定本發明。
圖1為本發明實施例之數據虛擬化存儲系統之應用環境圖，數據虛擬化存儲系統具體包括一終端110與一分散式伺服器120。該終端110藉由網路與該分散式伺服器120連接，該分散式伺服器120將分散式存放裝置進行虛擬化得到虛擬存放裝置，將虛擬存放裝置提供至該終端110。其中，該終端110藉由網路可訪問該分散式伺服器120。該分散式伺服器120具體可為伺服器集群，該分散式伺服器120為該終端110提供分散式存儲服務。
圖2係本發明實施方式之圖1數據虛擬化存儲系統中該分散式伺服器120之內部結構示意圖。如圖2所示，該分散式伺服器120包括藉由匯流排連接之處理器、非易失性存儲介質、記憶體與網路介面。其中，該分散式伺服器120之非易失性存儲介質存儲具有作業系統、數據庫，進一步包括一種數據虛擬化存儲裝置，該虛擬化存儲裝置用以實現一種數據虛擬化存儲方法。處理器用以提供計算與控制能力，支持該分散式伺服器120之整體運行，該分散式伺服器120中之記憶體為非易失性存儲介質中數據虛擬化存儲裝置之運行提供環境，該記憶體中可存儲有電腦可讀指令，該電腦可讀指令經處理器執行時，可使該處理器執行一種數據虛擬化存儲方法。網路介面用於與該終端110與該分散式伺服器120進行網路通訊。
如圖3所示，於一實施例中，提供一種數據虛擬化存儲方法，本實施例以該方法具體應用於圖1數據虛擬化存儲系統之該分散式伺服器120以舉例說明。該分散式伺服器120中安裝有數據虛擬化存儲程式，該數據虛擬化存儲程式用以實施數據虛擬化存儲方法，該方法具體包括以下內容：
步驟302，獲取終端所發送之存儲請求。
具體而言，於該終端110需將數據存儲時，該終端110向該分散式伺服器120發送存儲請求。該存儲請求中包括本地緩存位址，虛擬存儲路徑與虛擬存儲指令。其中，該虛擬存儲指令與該終端110或該終端110上之虛擬機器之作業系統類型對應，例如該終端110之作業系統類型為Windows作業系統，則該虛擬存儲指令為Windows作業系統可識別之虛擬存儲指令。作業系統類型具體可係Windows或Linux。虛擬存儲路徑為該終端110中由該分散式伺服器120為該終端110所提供之虛擬存放裝置之位址或標識，例如於該終端110上虛擬機器之虛擬桌面中顯示為虛擬磁片標識，虛擬桌面顯示為C盤、D盤和E盤中之至少一種。
步驟304，根據該存儲請求獲取待存儲數據，並提取該存儲請求中之虛擬存儲路徑與虛擬存儲指令。
具體而言，該分散式伺服器120對該存儲請求進行解析，藉由解析提取該存儲請求中之本地緩存位址、虛擬存儲路徑與虛擬存儲指令。該分散式伺服器120於提取該存儲請求中之本地緩存位址後，根據該本地緩存位址生成待存儲數據之數據獲取請求。該終端110於接收該數據獲取請求後，根據該數據獲取請求中之本地緩存位址查找待存儲數據，將所查找之待存儲數據發送至該分散式伺服器120。
步驟306，查找與虛擬存儲路徑對應之分散式存儲路徑，並於分散式指令庫中查找與該虛擬存儲指令對應之分散式存儲指令。
具體而言，該分散式伺服器120中存儲虛擬存儲路徑與分散式存儲路徑之對應關係。該分散式伺服器120於提取虛擬存儲路徑與虛擬存儲指令後，該分散式伺服器120根據存儲之虛擬存儲路徑與分散式存儲路徑之對應關係中查找所提取之虛擬存儲路徑，查找與所提取之虛擬存儲路徑對應之分散式存儲路徑。分散式存儲指令為該分散式伺服器120中之分散式存儲程式可識別之存儲指令。
同時，該分散式伺服器120設有分散式指令庫，該分散式指令庫存儲分散式指令與虛擬指令之對應關係，其中每一分散式指令皆存在對應之虛擬指令。該分散式伺服器120於提取虛擬存儲指令後，於分散式指令庫中查找與虛擬存儲指令對應之分散式存儲指令。
步驟308，根據分散式存儲路徑與分散式存儲指令將待存儲數據存儲至分散式存放裝置。
具體而言，該分散式伺服器120於查找與虛擬存儲路徑對應之分散式存儲路徑，以及與虛擬存儲指令對應之分散式存儲指令後。該分散式伺服器120查找虛擬存儲路徑對應之分散式存放裝置，根據分散式存儲指令將待存儲數據存儲至所查找之分散式存放裝置中。
本實施例中，獲取由終端所發送之存儲請求時，根據該存儲請求獲取待存儲數據，並提取該存儲請求中之虛擬存儲路徑與虛擬存儲指令，查找虛擬存儲路徑對應之分散式存儲路徑，並於分散式指令庫中查找與虛擬存儲指令對應之分散式存儲指令。根據分散式存儲指令將待存儲數據存儲至分散式存儲路徑對應之分散式存放裝置。如此，藉由虛擬存儲路徑與虛擬存儲指令可將終端與分散式存放裝置銜接，並為終端提供分散式存儲功能，將終端發送之存儲數據存儲至分散式存放裝置中。無需對本地之存放裝置進行擴展，即可將數據存儲至分散式存放裝置，避免浪費過多資源對本地之存放裝置進行管理，提高數據之存儲效率。
如圖4所示，於一實施例中，步驟306之後進一步包括調度可用之分散式存放裝置之步驟，該步驟具體包括以下內容：
步驟402，獲取虛擬存儲路徑對應之存放裝置剩餘容量與待存儲數據之數據容量。
具體而言，於該分散式伺服器120提取虛擬存儲路徑後，獲取與該虛擬存儲路徑對應存儲之存放裝置剩餘容量。該分散式伺服器120對待存儲數據之數據容量進行統計，藉由統計得到待存儲數據之數據容量。
於一實施例中，該分散式伺服器120由存儲請求中提取待存儲數據的數據容量。
步驟404，判斷待存儲數據之數據容量是否大於存放裝置剩餘容量。
具體而言，該分散式伺服器120於獲取虛擬存儲路徑對應之存放裝置剩餘容量與待存儲數據之數據容量後，將待存儲數據之數據容量與存放裝置剩餘容量進行比較，藉由比較判斷待存儲數據之數據容量是否大於存放裝置剩餘容量。
步驟406，若判定待存儲數據之數據容量大於存放裝置剩餘容量，調度可用之分散式存放裝置，將調度之分散式存放裝置對應之分散式存儲路徑與虛擬存儲路徑對應存儲。
具體而言，若判定待存儲數據之數據容量大於存放裝置剩餘容量，則表示存放裝置剩餘容量不夠，無法完全存儲待存儲數據。該分散式伺服器120於判定待存儲數據之數據容量大於存放裝置剩餘容量時，該分散式伺服器120查找可用之分散式存放裝置。於查找可用之分散式存放裝置後，該分散式伺服器120提取所查找之分散式存放裝置之分散式存儲路徑，將所提取之分散式存儲路徑與虛擬存儲路徑對應存儲。
於一實施例中，於查找可用之分散式存放裝置後，該分散式伺服器120提取所查找之分散式存放裝置之分散式存儲路徑，將所提取之分散式存儲路徑與虛擬存儲路徑對應存儲於對應關係表中。
本實施例中，於判定待存儲數據之數據容量大於存放裝置剩餘容量時，可調度可用之分散式存放裝置，將調度之分散式存放裝置對應之分散式存儲路徑與虛擬存儲路徑對應存儲，提高虛擬存儲路徑對應之存放裝置之可擴展性，提高分散式存放裝置之效率。
如圖5所示，於一實施例中，步驟306具體包括查找分散式存儲指令的步驟，該步驟具體包括以下內容：
步驟502，確定虛擬存儲指令對應之介面協定。
具體而言，該分散式伺服器120於提取虛擬存儲指令後，對虛擬存儲指令進解析，確定虛擬存儲指令對應之介面協定。介面協定具體包括FC協定（Fiber Channel，光纖通道）、ISCSI（Internet Small Computer System Interface，互聯網小型電腦介面）協定。其中，光纖通道可採用銅軸電纜與光導纖維作為連接設備；ISCSI為一供硬體設備使用之可於IP協議之上層運行之SCSI指令集，此種指令集合可實現於IP網路上運行小型電腦介面協定，使其能夠於諸如高速千兆乙太網上進行路由選擇。iSCSI將現有小型電腦介面與乙太網路技術結合，使伺服器可與使用IP網路之儲存裝置互相交換數據。
步驟504，查找介面協定對應之分散式指令庫。
具體地，於該分散式伺服器120中設有多個不同分散式指令庫，不同之介面協定對應不同的分散式指令庫。該分散式伺服器120於確定虛擬存儲指令對應之介面協定後，根據確定之介面協定查找對應之分散式指令庫。
步驟506，於所查找之分散式指令庫中查找與虛擬存儲指令對應之分散式存儲指令。
具體而言，該分散式伺服器120於查找分散式指令庫後，於所查找之分散式指令庫中查找與虛擬存儲指令對應之分散式存儲指令。
本實施例中，根據虛擬存儲指令對應的介面協定查找分散式指令庫，於所查找之分散式指令庫中查找虛擬存儲指令對應的分散式存儲指令。藉由設置多個分散式存儲指令庫，保證支援多種介面協定之數據存儲，提高數據之存儲效率。
如圖6所示，於一實施例中，步驟308具體包括數據存儲步驟，該步驟具體包括以下內容：
步驟602，根據分散式存儲指令將待存儲數據進行加密和壓縮處理。
具體而言，該分散式伺服器120於查找分散式存儲指令後，根據該分散式存儲指令對待存儲數據進行加密，對加密後之待存儲數據進行壓縮。亦對待存儲數據進行壓縮，再對壓縮後之待存儲數據進行加密。
進一步，對待存儲數據進行加密可係使用對稱加密演算法和非對稱加密演算法對待存儲數據進行加密。對待存儲數據進行壓縮可係對待存儲數據中的冗餘數據進行過濾。
步驟604，查找分散式存儲路徑對應之分散式存放裝置。
具體而言，該分散式伺服器120於查找與虛擬存儲路徑對應之分散式存儲路徑後，根據所查找之分散式存儲路徑確定可用之分散式存放裝置。
步驟606，將處理後之待存儲數據存儲至所查找之分散式存放裝置中。
具體而言，該分散式伺服器120將經過加密與壓縮處理之待存儲數據存儲至所查找之分散式存放裝置中。
本實施方式中，將待存儲數據進行加密和壓縮，將經過加密與壓縮後之待存儲數據存儲至分散式存放裝置。藉由對待存儲數據進行加密可提高待存儲數據之安全性；對待存儲數據進行壓縮，減少待存儲數據之數據容量，提高待存儲數據之存儲速度，節省分散式存放裝置。
如圖7所示，於一實施例中，步驟308之後具體進一步包括讀取分散式存放裝置中數據之步驟，該步驟具體包括以下步驟：
步驟702，接收終端發送之數據讀取請求。
具體而言，於該終端110需讀取分散式存放裝置中之數據時，該終端110向該分散式伺服器120發送數據讀取請求。該數據讀取請求中包括虛擬讀取路徑與虛擬讀取指令，虛擬讀取指令與該終端110之作業系統類型或者該終端110上運行之虛擬機器之作業系統類型對應。
步驟704，提取數據讀取請求中之虛擬讀取路徑與虛擬讀取指令。
具體而言，該分散式伺服器120對數據讀取請求進行解析，藉由解析提取到數據讀取請求中之虛擬讀取路徑與虛擬讀取指令。
步驟706，查找與虛擬讀取路徑對應分散式讀取路徑，並於分散式指令庫中查找與虛擬讀取指令對應之分散式讀取指令。
具體而言，該分散式伺服器120中設有路徑映射表，路徑映射表中存儲著虛擬路徑與分散式路徑之對應關係。該分散式伺服器120於提取虛擬讀取路徑後，於路徑映射表中查找與虛擬讀取路徑對應之分散式讀取路徑。該分散式伺服器120於分散式指令庫中查找與虛擬讀取指令對應之分散式讀取指令。
步驟708，根據分散式讀取指令由分散式讀取路徑對應之分散式存放裝置中讀取數據。
具體而言，該分散式伺服器120於查找分散式讀取指令與分散式讀取路徑後，查找分散式讀取路徑查找對應之分散式存放裝置，根據分散式讀取指令由所查找之存放裝置中讀取數據。
步驟710，將所讀取到之數據返回至終端並展示。
具體而言，該分散式伺服器120根據所查找之分散式讀取指令與分散式讀取路徑讀取到數據後，該分散式伺服器120根據虛擬讀取路徑將所讀取之數據返回至該終端110。該終端110將所讀取之數據展示於顯示器上，具體可展示於虛擬機器之虛擬桌面上。
本實施例中，於獲取到終端發送之數據讀取請求後，提取數據讀取請求中之虛擬讀取路徑和虛擬讀取指令，查找虛擬讀取路徑對應之分散式讀取路徑，於分散式指令庫中查找虛擬讀取指令對應之分散式讀取指令，根據分散式讀取指令由分散式讀取路徑對應之分散式存放裝置讀取數據，將所讀取之數據返回至終端並展示。使終端可直接訪問分散式存放裝置中存儲的數據，提高分散式存放裝置中存儲數據之讀取效率。
如圖8所示，於一實施例中，提供一種數據虛擬化存儲裝置800，該裝置包括：一存儲請求獲取模組802、一數據獲取模組804、一存儲指令查找模組806與一數據存儲模組808。
該存儲請求獲取模組802，用以獲取終端發送的存儲請求。
該數據獲取模組804，用以根據存儲請求獲取待存儲數據，並提取存儲請求中之虛擬存儲路徑與虛擬存儲指令。
該存儲指令查找模組806，用以查找與虛擬存儲路徑對應之分散式存儲路徑，並於分散式指令庫中查找與虛擬存儲指令對應之分散式存儲指令。
該數據存儲模組808，用以根據分散式存儲路徑與分散式存儲指令將待存儲數據存儲至分散式存放裝置。
本實施例中，獲取終端所發送之存儲請求時，根據該存儲請求獲取待存儲數據，並提取該存儲請求中之虛擬存儲路徑與虛擬存儲指令，查找虛擬存儲路徑對應之分散式存儲路徑，並於分散式指令庫中查找與虛擬存儲指令對應之分散式存儲指令。根據分散式存儲指令將待存儲數據存儲至分散式存儲路徑對應之分散式存放裝置。如此，藉由虛擬存儲路徑與虛擬存儲指令可將終端與分散式存放裝置銜接，並為終端提供分散式存儲功能，將終端所發送之存儲數據存儲至分散式存放裝置中。無需對本地之存放裝置進行擴展，即可將數據存儲至分散式存放裝置，避免浪費過多資源對本地之存放裝置進行管理，提高數據存儲效率。
如圖9所示，於一實施例中，該數據虛擬化存儲裝置800進一步包括：一容量獲取請求模组810、一容量判斷模組812與一存放裝置調度模組814。
該容量獲取請求模组810，用以獲取虛擬存儲路徑對應之存放裝置剩餘容量與待存儲數據之數據容量。
該容量判斷模組812，用以判斷待存儲數據之數據容量是否大於存放裝置剩餘容量。
該存放裝置調度模組814，用以於判定待存儲數據之數據容量大於存放裝置剩餘容量時，調度空閒之分散式存放裝置，將調度之分散式存放裝置對應之分散式存儲路徑與虛擬存儲路徑對應存儲。
本實施例中，於判定待存儲數據之數據容量大於存放裝置剩餘容量時，可調度空閒之分散式存放裝置，將調度之分散式存放裝置對應之分散式存儲路徑與虛擬存儲路徑對應存儲，提高虛擬存儲路徑對應之存放裝置之可擴展性，提高分散式存放裝置之利用率。
如圖10所示，於一實施例中，該存儲指令查找模組806具體包括：一介面協定確定模組806a、一指令庫查找模組806b與一分散式指令查找模組806c。
該介面協定確定模組806a，用以確定虛擬存儲指令對應之介面協定。
該指令庫查找模組806b，用以查找介面協定對應之分散式指令庫。
該分散式指令查找模組806c，用以於所查找之分散式指令庫中查找與虛擬存儲指令對應之分散式存儲指令。
本實施例中，根據虛擬存儲指令對應之介面協定查找分散式指令庫，於所查找之分散式指令庫中查找虛擬存儲指令對應之分散式存儲指令。藉由設置多個分散式存儲指令庫，保證支援多種介面協定之數據存儲，提高數據之存儲效率。
如圖11所示，於一實施例中，該數據存儲模組808具體包括：一數據加密壓縮模組808a、一存放裝置查找模組808b與一數據寫入模組808c。
該數據加密壓縮模組808a，用以根據分散式存儲指令將待存儲數據進行加密與壓縮處理。
該存放裝置查找模組808b，用以查找分散式存儲路徑對應之分散式存放裝置。
該數據寫入模組808c，用以將處理後之待存儲數據寫入所查找之分散式存放裝置中。
本實施方式中，將待存儲數據進行加密與壓縮，將經過加密與壓縮後之待存儲數據存儲至分散式存放裝置。藉由對待存儲數據進行加密可提高待存儲數據之安全性；對待存儲數據進行壓縮，減少待存儲數據之數據容量，提高待存儲數據之存儲速度，節省分散式存放裝置。
如圖12所示，於一實施例中，該數據虛擬化存儲裝置800進一步包括：一讀取請求接收模組816、一讀取請求解析模組818、一讀取指令查找模組820、一數據讀取模組822與一數據返回模組824。
該讀取請求接收模組816，用以接收終端所發送之數據讀取請求。
該讀取請求解析模組818，用以提取數據讀取請求中之虛擬讀取路徑與虛擬讀取指令。
該讀取指令查找模組820，用以查找與虛擬讀取路徑對應分散式讀取路徑，並於分散式指令庫中查找與虛擬讀取指令對應之分散式讀取指令。
該數據讀取模組822，用以根據分散式讀取指令由分散式讀取路徑對應之分散式存放裝置中讀取數據。
該數據返回模組824，用以將所讀取之數據返回至終端並展示。
本實施例中，於獲取終端所發送之數據讀取請求後，提取數據讀取請求中之虛擬讀取路徑與虛擬讀取指令，查找虛擬讀取路徑對應之分散式讀取路徑，於分散式指令庫中查找虛擬讀取指令對應之分散式讀取指令，根據分散式讀取指令由分散式讀取路徑對應之分散式存放裝置讀取數據，將所讀取之數據返回至終端並展示。使終端可直接訪問分散式存放裝置中存儲之數據，提高分散式存放裝置中存儲之數據之讀取效率。
本領域普通技術人員可理解實現上述實施例方法中之全部或部分流程，係可藉由電腦程式指示相關硬體所完成，該程式可存儲於一非易失性電腦可讀取存儲介質中，該程式於執行時，可包括如上述各方法實施例之流程。其中，該存儲介質可為磁碟、光碟、唯讀存儲記憶體（Read-Only Memory，ROM）等。
以上實施例之各技術特徵可進行任意組合，為使描述簡潔，未對上述實施例中各個技術特徵所有可能之組合均進行描述，然而，只要該些技術特徵之組合不存在矛盾，皆應當認為其係為本說明書所記載之範圍。
以上實施例僅表達本發明之數種實施方式，其描述較為具體與詳細，但並不能因此而理解為對發明專利範圍之限制。應當指出，對於本領域之通常知識者而言，於不脫離本發明構思之前提下，進一步可做出若干改變與改良，此等皆屬本發明之保護範圍。因此，本發明專利之保護範圍應以所附之申請專利範圍為準。
110‧‧‧終端
120‧‧‧分散式伺服器
302‧‧‧步驟
304‧‧‧步驟
306‧‧‧步驟
308‧‧‧步驟
402‧‧‧步驟
404‧‧‧步驟
406‧‧‧步驟
502‧‧‧步驟
504‧‧‧步驟
506‧‧‧步驟
602‧‧‧步驟
604‧‧‧步驟
606‧‧‧步驟
702‧‧‧步驟
704‧‧‧步驟
706‧‧‧步驟
708‧‧‧步驟
710‧‧‧步驟
800‧‧‧數據虛擬化存儲裝置
802‧‧‧存儲請求獲取模組
804‧‧‧數據獲取模組
806‧‧‧存儲指令查找模組
806a‧‧‧介面協定確定模組
806b‧‧‧指令庫查找模組
806c‧‧‧分散式指令查找模組
808‧‧‧數據存儲模組
808a‧‧‧數據加密壓縮模組
808b‧‧‧存放裝置查找模組
808c‧‧‧數據寫入模組
810‧‧‧容量獲取請求模组
812‧‧‧容量判斷模組
814‧‧‧存放裝置調度模組
816‧‧‧讀取請求接收模組
818‧‧‧讀取請求解析模組
820‧‧‧讀取指令查找模組
822‧‧‧數據讀取模組
824‧‧‧數據返回模組
圖1係本發明例之數據虛擬化存儲系統之應用環境圖。 圖2係本發明實施例之數據虛擬化存儲系統中分散式伺服器之內部結構示意圖。 圖3係本發明實施例之數據虛擬化存儲方法之流程示意圖。 圖4係本發明實施例之調度可用分散式存放裝置之步驟之流程示意圖。 圖5係本發明實施例之查找分散式存儲指令之步驟之流程示意圖。 圖6係本發明實施例之數據存儲步驟之流程示意圖。 圖7係本發明實施例之讀取分散式存放裝置中數據之步驟。 圖8係本發明實施例之數據虛擬化存儲裝置之結構框圖。 圖9係本發明實施例之數據虛擬化存儲裝置之結構框圖。 圖10係本發明實施例之存儲指令查找模組之結構框圖。 圖11係本發明實施例之數據存儲模組之結構框圖。 圖12係本發明實施例之數據虛擬化存儲裝置之結構框圖。

Claims (8)

  1. 一種數據虛擬化存儲方法，應用於分散式服務器，包括：獲取終端所發送之存儲請求，該存儲請求包括本地緩存位址、虛擬存儲路徑及虛擬存儲指令；提取該存儲請求中之本地緩存位址、虛擬存儲路徑與虛擬存儲指令；該虛擬儲存指令為終端的操作系統可識別的；在提取到該本地緩存位址後，根據該本地緩存位址生成待存儲數據的數據獲取請求，將該數據獲取請求發送至終端；接收終端根據該數據獲取請求中的本地緩存位址查找到該待存儲數據；查找與該虛擬存儲路徑對應之分散式存儲路徑，並確定該虛擬存儲指令對應的介面協議；查找該介面協議對應的分散式指令庫；在查找到的分散式指令庫中查找與該虛擬存儲指令對應之分散式存儲指令；該分散式儲存指令為分散式服務器中的分散式儲存程序可識別的存儲指令；根據該分散式存儲路徑與該分散式存儲指令將該待存儲數據存儲至分散式存放裝置。
  2. 如請求項1所述之數據虛擬化存儲方法，其中，該提取該存儲請求中之虛擬存儲路徑與虛擬存儲指令之後，進一步包括：獲取該虛擬存儲路徑對應之存放裝置剩餘容量與該待存儲數據之數據容量；判斷該待存儲數據之數據容量是否大於該存放裝置剩餘容量；若判定待存儲數據之數據容量大於存放裝置剩餘容量，調度可用之分散式存放裝置，將調度之分散式存放裝置對應之分散式存儲路徑與該虛擬存儲路徑對應存儲。
  3. 如請求項1所述之數據虛擬化存儲方法，其中，該根據該分散式存儲路徑與該分散式存儲指令將該待存儲數據存儲至分散式存放裝置，包括：根據該分散式存儲指令將該待存儲數據進行加密與壓縮處理；查找該分散式存儲路徑對應之分散式存放裝置；將處理後之待存儲數據寫入所查找之分散式存放裝置中。
  4. 如請求項1至3中任一項所述之數據虛擬化存儲方法，其中，該根據該分散式存儲路徑與該分散式存儲指令將該待存儲數據存儲至分散式存放裝置之後，進一步包括：接收該終端所發送之數據讀取請求；提取該數據讀取請求中之虛擬讀取路徑與虛擬讀取指令；查找與該虛擬讀取路徑對應分散式讀取路徑，並於該分散式指令庫中查找與該虛擬讀取指令對應之分散式讀取指令；根據該分散式讀取指令由該分散式讀取路徑對應之分散式存放裝置中讀取數據；將所讀取之數據返回至該終端並展示。
  5. 一種數據虛擬化存儲裝置，其應用於分散式服務器，該數據虛擬化存儲裝置包括：一存儲請求獲取模組，用以獲取終端所發送之存儲請求，該存儲請求包括本地緩存位址、虛擬存儲路徑及虛擬存儲指令；一數據獲取模組，用於提取該存儲請求中之本地緩存位址、虛擬存儲路徑及虛擬存儲指令；該虛擬存儲指令為終端的操作系統可識別的；在提取到該本地緩存位址後，根據該本地緩存位址生成待存儲數據的數據獲取請求，將該數據獲取請求發送至終端；接收終端根據該數據獲取請求中的本地緩存位址查找到的待存儲數據；一存儲指令查找模組，其包括：一介面協定確定模組、一指令庫查找模組及一分散式指令查找模組，該介面協定確定模組用以確定該虛擬存儲指令對應之介面協定；該指令庫查找模組用以查找該介面協定對應之分散式指令庫；該分散式指令查找模組用以於所查找之分散式指令庫中查找與該虛擬存儲指令對應之分散式存儲指令；一數據存儲模組，用以根據該分散式存儲路徑與該分散式存儲指令將該待存儲數據存儲至分散式存放裝置。
  6. 如請求項5所述之數據虛擬化存儲裝置，進一步包括：一容量獲取請求模組，用以獲取該虛擬存儲路徑對應之存放裝置剩餘容量與該待存儲數據之數據容量；一容量判斷模組，用以判斷該待存儲數據之數據容量是否大於該存放裝置剩餘容量；一存放裝置調度模組，用以於判定待存儲數據之數據容量大於該存放裝置剩餘容量時，調度可用之分散式存放裝置，將調度之分散式存放裝置對應之分散式存儲路徑與該虛擬存儲路徑對應存儲。
  7. 如請求項5所述之數據虛擬化存儲裝置，其中，該數據存儲模組包括：一數據加密壓縮模組，用以根據該分散式存儲指令將該待存儲數據進行加密與壓縮處理；一存放裝置查找模組，用以查找該分散式存儲路徑對應之分散式存放裝置；一數據寫入模組，用以將處理後之待存儲數據寫入所查找之分散式存放裝置中。
  8. 如申請求項5至7中任一項所述之數據虛擬化存儲裝置，進一步包括：一讀取請求接收模組，用以接收該終端所發送之數據讀取請求；一讀取請求解析模組，用以提取該數據讀取請求中之虛擬讀取路徑與虛擬讀取指令；一讀取指令查找模組，用以查找與該虛擬讀取路徑對應分散式讀取路徑，並於該分散式指令庫中查找與該虛擬讀取指令對應之分散式讀取指令；一數據讀取模組，用以根據該分散式讀取指令由該分散式讀取路徑對應之分散式存放裝置中讀取數據；一數據返回模組，用以將所讀取之數據返回至該終端並展示。
TW106140288A 2016-11-21 2017-11-21 數據虛擬化存儲方法和裝置 TWI680404B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201611026488.0A CN106708428B (zh) 2016-11-21 2016-11-21 数据虚拟化存储方法和装置
??201611026488.0 2016-11-21
CN201611026488.0 2016-11-21

Publications (2)

Publication Number Publication Date
TW201820126A TW201820126A (zh) 2018-06-01
TWI680404B true TWI680404B (zh) 2019-12-21

Family

ID=58940163

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106140288A TWI680404B (zh) 2016-11-21 2017-11-21 數據虛擬化存儲方法和裝置

Country Status (3)

Country Link
CN (1) CN106708428B (zh)
TW (1) TWI680404B (zh)
WO (1) WO2018090585A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107423301B (zh) * 2016-05-24 2021-02-23 华为技术有限公司 一种数据处理的方法、相关设备及存储系统
CN109445692A (zh) * 2018-10-18 2019-03-08 深圳市硅格半导体有限公司 基于网络的数据存储方法、终端、服务器和系统
CN109309590A (zh) * 2018-10-29 2019-02-05 武汉世捷通网络信息技术有限公司 虚拟化数据中心的可扩缩多租户网络架构信息采集方法
CN109783494A (zh) * 2018-12-29 2019-05-21 深圳云天励飞技术有限公司 数据存储方法及相关装置
CN112199050A (zh) * 2020-10-22 2021-01-08 Tcl通讯（宁波）有限公司 存储方法、装置、存储介质及终端设备
CN116204136B (zh) * 2023-05-04 2023-08-15 山东浪潮科学研究院有限公司 一种数据存储、查询方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102917005A (zh) * 2012-08-28 2013-02-06 大唐软件技术股份有限公司 一种支持事务的海量存储访问方法及装置
CN103513940A (zh) * 2013-10-21 2014-01-15 北京华胜天成科技股份有限公司 虚拟机在线扩展磁盘容量的方法和虚拟系统控制台
CN104020961A (zh) * 2014-05-15 2014-09-03 深圳市深信服电子科技有限公司 分布式数据存储方法、装置及系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7533389B2 (en) * 2003-06-20 2009-05-12 Sun Microsystems, Inc. Dynamic loading of remote classes
CN101587480B (zh) * 2008-05-21 2013-08-28 鸿富锦精密工业（深圳）有限公司 Notes文件分布式存储系统及方法
CN101662811B (zh) * 2009-08-17 2011-08-17 北京航空航天大学 基于可靠路径的分布式路由协议
CN103095832A (zh) * 2013-01-15 2013-05-08 北京邮电大学 一种基于通信可靠性的分布式存储方法
CN103257941B (zh) * 2013-04-17 2015-09-23 浪潮(北京)电子信息产业有限公司 多协议存储控制器和系统
CN104484130A (zh) * 2014-12-04 2015-04-01 北京同有飞骥科技股份有限公司 一种横向扩展存储系统的构建方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102917005A (zh) * 2012-08-28 2013-02-06 大唐软件技术股份有限公司 一种支持事务的海量存储访问方法及装置
CN103513940A (zh) * 2013-10-21 2014-01-15 北京华胜天成科技股份有限公司 虚拟机在线扩展磁盘容量的方法和虚拟系统控制台
CN104020961A (zh) * 2014-05-15 2014-09-03 深圳市深信服电子科技有限公司 分布式数据存储方法、装置及系统

Also Published As

Publication number Publication date
WO2018090585A1 (zh) 2018-05-24
CN106708428B (zh) 2018-06-29
TW201820126A (zh) 2018-06-01
CN106708428A (zh) 2017-05-24

Similar Documents

Publication Publication Date Title
TWI680404B (zh) 數據虛擬化存儲方法和裝置
TWI549060B (zh) Access methods and devices for virtual machine data
US8769269B2 (en) Cloud data management
US9858013B1 (en) Scalable distributed storage system infrastructure
US8621196B2 (en) Booting from an encrypted ISO image
US20150304212A1 (en) Method and apparatus for matching flow table, and switch
US11003719B2 (en) Method and apparatus for accessing a storage disk
KR20160139493A (ko) 클라우드 서비스를 위한 암호화 키 관리 방법 및 그 장치
CN109144406B (zh) 分布式存储系统中元数据存储方法、系统及存储介质
US10983908B1 (en) Method and system for garbage collection of data protection virtual machines in cloud computing networks
US20150128135A1 (en) Managing a template in an operator graph
US10235206B2 (en) Utilizing input/output configuration templates to reproduce a computing entity
US9201916B2 (en) Method, system, and computer-readable medium for providing a scalable bio-informatics sequence search on cloud
US10552089B2 (en) Data processing for managing local and distributed storage systems by scheduling information corresponding to data write requests
US9537780B2 (en) Quality of service agreement and service level agreement enforcement in a cloud computing environment
US9110820B1 (en) Hybrid data storage system in an HPC exascale environment
US10523753B2 (en) Broadcast data operations in distributed file systems
US10243799B2 (en) Method, apparatus and system for virtualizing a policy and charging rules function
WO2014094421A1 (zh) 数据处理方法和虚拟机管理平台
CN112636908B (zh) 密钥查询方法及装置、加密设备及存储介质
US20150088825A1 (en) Virtual machine storage replication schemes
JP2019531563A (ja) データ処理方法、記憶システムおよび切り換え装置
CA2941163A1 (en) Data processing method and apparatus
JP2016177688A (ja) データ処理装置、データ処理方法およびコンピュータプログラム
US10270879B1 (en) Multi-tenant caching storage intelligence