TWI756978B

TWI756978B - 遷移雲服務的虛擬磁碟的電子裝置和方法

Info

Publication number: TWI756978B
Application number: TW109143770A
Authority: TW
Inventors: 鄭廷軒; 許順興
Original assignee: 中華電信股份有限公司
Priority date: 2020-12-11
Filing date: 2020-12-11
Publication date: 2022-03-01
Also published as: TW202223639A

Abstract

提供一種用於遷移雲服務的虛擬磁碟的電子裝置和方法。方法包含：存取雲服務的第一儲存系統和第二儲存系統；響應於遷移指令而複製第一儲存系統中的第一虛擬磁碟的第一詮釋資料以產生複製第一詮釋資料；響應於遷移指令而將第一虛擬磁碟自第一儲存系統移動至第二儲存系統以在第二儲存系統中建立第二虛擬磁碟；以及用複製第一詮釋資料覆蓋第二儲存系統中的第二虛擬磁碟的第二詮釋資料。

Description

遷移雲服務的虛擬磁碟的電子裝置和方法

本發明是有關於一種用於遷移雲服務的虛擬磁碟（virtual disk）的電子裝置和方法。

雲服務能夠讓用戶供裝不同儲存區的虛擬磁碟，通常能夠選擇不同儲存效能的虛擬磁碟。若是已經選擇一儲存區，往後需要將虛擬磁碟更換至另一儲存區時，只能先再申租另一欲切換儲存區之磁碟，並掛載至使用者的虛擬磁碟上，透過虛擬磁碟內的作業系統中將資料從原磁碟複製到新磁碟上，其搬移資料的方式非常不便利，且搬移速度會受限於虛擬磁碟的運算資源能力以及資料的數量。

本發明提供一種用於遷移雲服務的虛擬磁碟的電子裝置和方法，可在雲服務的不同儲存系統之間遷移虛擬磁碟。

本發明的一種用於遷移雲服務的虛擬磁碟的電子裝置，包含處理器、儲存媒體以及收發器。收發器通訊連接至雲服務的第一儲存系統和第二儲存系統。儲存媒體儲存多個模組。處理器耦接儲存媒體以及收發器，並且存取和執行多個模組，其中多個模組包含磁碟遷移模組。磁碟遷移模組通過收發器接收遷移指令，響應於遷移指令而複製第一儲存系統中的第一虛擬磁碟的第一詮釋資料以產生複製第一詮釋資料，響應於遷移指令而將第一虛擬磁碟自第一儲存系統移動至第二儲存系統以在第二儲存系統中建立第二虛擬磁碟，並且用複製第一詮釋資料覆蓋第二儲存系統中的第二虛擬磁碟的第二詮釋資料。

在本發明的一實施例中，上述的多個模組更包含遷移推薦模組。遷移推薦模組通過收發器通訊連接至雲服務的多個儲存系統以監視多個儲存系統的效能，響應於多個儲存系統中的至少一儲存系統與第一虛擬磁碟的效能需求匹配而產生對應於至少一儲存系統的推薦訊息，並且通過收發器輸出推薦訊息。

在本發明的一實施例中，上述的多個模組更包含遷移推薦模組。遷移推薦模組通過收發器通訊連接至雲服務的多個儲存系統以監視多個儲存系統的效能，響應於多個儲存系統中的第二儲存系統與第一虛擬磁碟的效能需求匹配而將第一虛擬磁碟的轉移目標設定為第二儲存系統。

在本發明的一實施例中，上述的多個模組更包含多介面遷移模組。多介面遷移模組通過收發器存取第一儲存系統以及第二儲存系統以判斷第一儲存系統對應於第一檔案格式並且第二儲存系統對應於第二檔案格式，響應於第一檔案格式與第二檔案格式不匹配而將第一虛擬磁碟自第一檔案格式轉換成第二檔案格式，其中磁碟遷移模組對應於第二檔案格式的第一虛擬磁碟移動到第二儲存系統以建立第二虛擬磁碟。

在本發明的一實施例中，上述的多介面遷移模組判斷第二儲存系統是否支援精簡配置，並且響應於第二儲存系統支援精簡配置而基於精簡配置將第一虛擬磁碟轉換成第二檔案格式。

在本發明的一實施例中，上述的遷移指令指示將第一儲存系統中的多個虛擬磁碟遷移到第二儲存系統，其中磁碟遷移模組根據遷移指令建立對應於多個虛擬磁碟的遷移排程，並且根據遷移排程而依序地將多個虛擬磁碟移動到第二儲存系統。

在本發明的一實施例中，上述的雲服務對應於OpenStack架構。

在本發明的一實施例中，上述的第一儲存系統或第二儲存系統對應於下列的其中之一：可靠自主分散式物件儲存介面、網路文件系統介面以及網際網路小型電腦系統介面。

本發明的一種用於遷移雲服務的虛擬磁碟的方法，包含：存取雲服務的第一儲存系統和第二儲存系統；響應於遷移指令而複製第一儲存系統中的第一虛擬磁碟的第一詮釋資料以產生複製第一詮釋資料；響應於遷移指令而將第一虛擬磁碟自第一儲存系統移動至第二儲存系統以在第二儲存系統中建立第二虛擬磁碟；以及用複製第一詮釋資料覆蓋第二儲存系統中的第二虛擬磁碟的第二詮釋資料。

基於上述，本發明可在不改變虛擬磁碟的詮釋資料的情況下進行虛擬磁碟的遷移。

本發明提出一種遷移雲服務的虛擬磁碟的電子裝置和方法，可於雲服務的不同儲存系統中遷移虛擬磁碟。進行遷移時，虛擬磁碟可關閉且虛擬磁碟可在卸載的狀態下進行遷移。本發明能保留與重建遷移後的虛擬磁碟的相關詮釋資料（metadata）。此外，本發明可提供多個儲存服務叢集之間遷移的服務。當雲服務的提供商要維修儲存系統時，提供商可透過本發明將虛擬磁碟遷移至另一儲存系統以持續提供服務。本發明可將欲轉移之虛擬磁碟（及/或虛擬機）的詮釋資料備份後，將虛擬磁碟匯出，再將虛擬磁碟匯入目標儲存系統。在完成虛擬磁碟的匯入後，本發明可將原虛擬磁碟刪除，只保留虛擬磁碟的虛擬網卡，從而透過OpenStack管理區塊儲存元件Cinder將該虛擬磁碟納管，並將虛擬磁碟的詮釋資料更新進納管後的磁碟。最後，本發明可根據前述備分之詮釋資料重建虛擬磁碟的雲實例，藉此在不更動虛擬磁碟的詮釋資料的情況下，完成虛擬磁碟的遷移。

圖1根據本發明的實施例繪示一種用於遷移雲服務的虛擬磁碟的電子裝置100的示意圖。電子裝置100可包含處理器110、儲存媒體120以及收發器130。

處理器110例如是中央處理單元（central processing unit，CPU），或是其他可程式化之一般用途或特殊用途的微控制單元（micro control unit，MCU）、微處理器（microprocessor）、數位信號處理器（digital signal processor，DSP）、可程式化控制器、特殊應用積體電路（application specific integrated circuit，ASIC）、圖形處理器（graphics processing unit，GPU）、影像訊號處理器（image signal processor，ISP）、影像處理單元（image processing unit，IPU）、算數邏輯單元（arithmetic logic unit，ALU）、複雜可程式邏輯裝置（complex programmable logic device，CPLD）、現場可程式化邏輯閘陣列（field programmable gate array，FPGA）或其他類似元件或上述元件的組合。處理器110可耦接至儲存媒體120以及收發器130，並且存取和執行儲存於儲存媒體120中的多個模組和各種應用程式。

儲存媒體120例如是任何型態的固定式或可移動式的隨機存取記憶體（random access memory，RAM）、唯讀記憶體（read-only memory，ROM）、快閃記憶體（flash memory）、硬碟（hard disk drive，HDD）、固態硬碟（solid state drive，SSD）或類似元件或上述元件的組合，而用於儲存可由處理器110執行的多個模組或各種應用程式。在本實施例中，儲存媒體120可儲存包括磁碟遷移模組121、遷移推薦模組122以及多介面遷移模組123等多個模組，其功能將於後續說明。

收發器130以無線或有線的方式傳送及接收訊號。收發器130還可以執行例如低噪聲放大、阻抗匹配、混頻、向上或向下頻率轉換、濾波、放大以及類似的操作。收發器130可支援多種通訊協定。例如，收發器130可支援（但不限於）應用程式介面（application programming interface，API）。

圖2根據本發明的實施例繪示一種用於遷移雲服務的虛擬磁碟的方法的流程圖，其中所述方法可由如圖1所示的電子裝置100實施。電子裝置100可通過收發器130存取雲服務，並且通訊連接至雲服務的多個儲存系統（或多個儲存服務），其中所述多個儲存系統可包含第一儲存系統和第二儲存系統。雲服務可對應於OpenStack架構。雲服務的多個儲存系統可對應於可靠自主分散式物件儲存介面（Reliable automatic distributed object store block device，RBD）（例如：Ceph）、網路文件系統介面（network file system，NFS）或網際網路小型電腦系統介面（Internet small computer system interface，iSCSI），但本發明不限於此。

在步驟S210中，磁碟遷移模組121可通過收發器130接收遷移指令。遷移指令用以指示電子裝置100將第一儲存系統（即：來源儲存系統）內的一或多個待遷移的虛擬磁碟遷移到目標儲存系統（例如：第二儲存系統），其中所述一或多個待遷移的虛擬磁碟包含第一虛擬磁碟。舉例來說，電子裝置100可通過收發器130與用戶的終端裝置通訊連接。用戶可通過終端裝置的輸入介面輸入遷移指令，以由終端裝置將遷移指令傳送給電子裝置100。

第一虛擬磁碟的目標儲存系統可由用戶指示或由遷移推薦模組122決定。在一實施例中，遷移推薦模組122可通過收發器130通訊連接至雲服務的多個儲存系統以監視多個儲存系統的效能。遷移推薦模組122可判斷多個儲存系統中的至少一儲存系統與第一虛擬磁碟的效能需求是否匹配。若匹配，則遷移推薦模組122可產生對應於至少一儲存系統的推薦訊息，並可通過收發器130輸出推薦訊息以供用戶參考。用戶可參考遷移推薦模組122所推薦的儲存系統而通過遷移指令為第一虛擬磁碟選擇目標儲存系統。在一實施例中，遷移推薦模組122遷移推薦模組122可通過收發器130通訊連接至雲服務的多個儲存系統以監視多個儲存系統的效能。遷移推薦模組122可判斷多個儲存系統中的第二儲存系統與第一虛擬磁碟的效能需求是否匹配。若匹配，則遷移推薦模組122可將第一虛擬磁碟的轉移目標（即：目標儲存系統）設定為第二儲存系統。上述的效能例如是IOPS（input/output operations per second）或吞吐量（throughput），但本發明不限於此。

在步驟S220中，磁碟遷移模組121可響應於遷移指令而複製第一儲存系統中的第一虛擬磁碟的第一詮釋資料以產生複製第一詮釋資料。

在步驟S230中，磁碟遷移模組121可根據遷移指令建立對應於一或多個待遷移的虛擬磁碟的遷移排程。在後續的步驟中，磁碟遷移模組121可根據遷移排程而依序地以先進先出（first in first out，FIFO）的方式將一或多個待遷移的虛擬磁碟移動到第二儲存系統。

在步驟S240中，磁碟遷移模組121可遷移第一虛擬磁碟。具體來說，磁碟遷移模組121可根據遷移排程將第一儲存系統中的第一虛擬磁碟移動到第二儲存系統以在第二儲存系統中建立與第一虛擬磁碟相對應的第二虛擬磁碟。磁碟遷移模組121還可響應於第二虛擬磁碟的產生而在第二儲存系統中產生對應於第二虛擬磁碟的第二詮釋資料。

圖3根據本發明的實施例繪示遷移第一虛擬磁碟的步驟S240的流程圖。在步驟S241中，多介面遷移模組123可存取第一儲存系統和第二儲存系統以判斷對應於第一儲存系統的第一檔案格式以及對應於第二儲存系統的第二檔案格式。第一檔案格式和第二檔案格式可相同或相異。第一檔案格式或第二檔案格式可包含但不限於可靠自主分散式物件儲存介面、網路文件系統介面或網際網路小型電腦系統介面。

在步驟S242中，磁碟遷移模組121可將第一虛擬磁碟自第一儲存系統中匯出。在匯出第一虛擬磁碟後，原本儲存在第一儲存系統中的第一虛擬磁碟可被刪除。

在步驟S243中，多介面遷移模組123可判斷是否需要為匯出的第一虛擬磁碟進行轉檔。若多介面遷移模組123判斷需為第一虛擬磁碟進行轉檔，則進入步驟S244。若多介面遷移模組123不需為第一虛擬磁碟進行轉檔，則進入步驟S247。具體來說，多介面遷移模組123可判斷第一檔案格式與第二檔案格式是否匹配。若第一檔案格式與第二檔案格式匹配，則多介面遷移模組123判斷不需為第一虛擬磁碟進行轉檔。若第一檔案格式與第二檔案格式不匹配，則多介面遷移模組123判斷需為第一虛擬磁碟進行轉檔。

在步驟S244中，多介面遷移模組123可判斷第二儲存系統是否支援精簡配置（thin-provisioning）。若第二儲存系統支援精簡配置，則進入步驟S215。若第二儲存系統不支援精簡配置，則進入步驟S246。

在步驟S245中，多介面遷移模組123可響應於第二儲存系統支援精簡配置而產生用於將第一虛擬磁碟從第一檔案格式轉換成支援精簡配置的第二檔案格式的參數。

在步驟S246中，多介面遷移模組123可將第一虛擬磁碟自第一檔案格式轉換成第二檔案格式。在一實施例中，多介面遷移模組123可根據步驟S245中產生的參數來將第一虛擬磁碟自第一檔案格式轉換成第二檔案格式。多介面遷移模組123例如可通過qemu-img工具來對第一虛擬磁碟進行轉檔。

在步驟S247中，磁碟遷移模組121可將第一虛擬磁碟（或被轉換成第二檔案格式的第一虛擬磁碟）遷移至第二儲存系統，以在第二儲存系統建立對應於第一虛擬磁碟的第二虛擬磁碟，並且建立對應於第二虛擬磁碟的第二詮釋資料。

在步驟S250中，磁碟遷移模組121可用複製第一詮釋資料覆蓋第二儲存系統中的第二虛擬磁碟的第二詮釋資料，從而完成第一虛擬磁碟的遷移。

圖4根據本發明的實施例繪示另一種用於遷移雲服務的虛擬磁碟的方法的流程圖，其中所述方法可由如圖1所示的電子裝置100實施。在步驟S410中，存取雲服務的第一儲存系統和第二儲存系統。在步驟S420中，響應於遷移指令而複製第一儲存系統中的第一虛擬磁碟的第一詮釋資料以產生複製第一詮釋資料。在步驟S430中，響應於遷移指令而將第一虛擬磁碟自第一儲存系統移動至第二儲存系統以在第二儲存系統中建立第二虛擬磁碟。在步驟S440中，用複製第一詮釋資料覆蓋第二儲存系統中的第二虛擬磁碟的第二詮釋資料。

綜上所述，本發明的虛擬磁碟遷移功能可以提供用戶在不同需求情境下，進行儲存資源的動態選擇，此技術提供用戶於使用者介面變更虛擬磁碟的儲存系統。用戶可於使用者介面動態地修改虛擬磁碟的儲存資源。當用戶希望提高虛擬磁碟的效能，用戶可選擇將虛擬磁碟遷移至高速儲存系統以提供更快的儲存速度。或者，當用戶不需要高效能但需要較大的容量時，用戶可將虛擬磁碟遷移至低速儲存區並調整虛擬磁碟大小，以降低儲存使用的成本。

此外，本發明的遷移推薦模組能夠監控雲服務中的所有儲存系統或虛擬磁碟的IOPS與吞吐量。當使用者要選擇欲遷移的儲存服務時，遷移推薦模組可基於該虛擬磁碟的IOPS與吞吐量來建議針對該虛擬磁碟的最佳存放儲存系統。因每個儲存系統對應的最大IOPS與吞吐量皆不同，故遷移推薦模組可統計各儲存系統的剩餘容忍效能以進行推薦。藉此，遷移推薦模組能夠大幅地減少單一儲存系統的效能負載過高的問題。

虛擬磁碟遷移功能也為雲服務的維運人員帶來許多便利。當儲存系統需要下線維修時，維運人員往往需要請使用此儲存系統的用戶先停止使用。維運人員需協助用戶將虛擬磁碟搬移至其他儲存系統，最後還需為用戶重建虛擬磁碟。在完成虛擬磁碟的重建後，維運人員還需要想辦法將虛擬磁碟的相關詮釋資料（例如：UUID、IP位址、flavor等）改回原本虛擬磁碟的原貌，其工程非常浩大，且易有人為失誤資料填寫錯誤，導致後續虛擬磁碟進行異動時發生異常的狀況發生。

本發明還可提供批次遷移的功能。維運人員可以透過維運介面勾選多個虛擬磁碟以進行批次遷移。因虛擬磁碟的檔案容量都比較大，故轉移過程會花費較多時間。批次遷移功能能夠以排隊的方式，一次以多執行序的方式同時執行多個虛擬磁碟的遷移，且執行序數量能夠根據後端設定進行調整。例如，執行序數量可根據執行遷移的節點或是儲存的效能來進行調整，以減少遷移任務造成底層資源的負載增加。

基於OpenStack的雲服務可透過Cinder界接多種儲存系統，例如軟體定義儲存（software-defined storage，SDS）等，Cinder皆有對應的驅動軟體能夠界接。以往，由於雲服務可能需要同時界接多種儲存系統，因此難以實現跨儲存系統的虛擬磁碟的遷移。本發明可支援多種儲存界面的資料遷移，且能夠於這些界面之間進行虛擬磁碟遷移。如此一來，雲服務提供商便能夠不限儲存產品的限制挑選儲存產品。此外，為確保儲存系統的空間使用率，本發明在進行不同儲存系統之間的虛擬磁碟遷移時，會自動化地將虛擬磁碟從來源儲存系統匯出並匯入至目標儲存系統。匯入時，本發明可自動檢查檔案是否應為自動精簡配置的虛擬磁碟檔案。若為否，則先行轉檔後再進行匯入。舉例來說，若要將Ceph中的虛擬磁碟遷移至NetApp的NFS界面時，從Ceph將指定虛擬磁碟匯出，此時匯出後的檔案是屬於原始檔案（raw格式且無精簡配置特性的檔案），因此本發明可先將該原始檔案進行轉檔，轉成qcow2或是vmdk格式檔（有精簡配置特性的檔案）後，再將檔案匯入至NetApp NFS空間中，藉此確保儲存於NetApp NFS空間的虛擬磁碟皆有精簡配置的特性，增加空間使用率，也提升檔案遷移速度。

以往基於OpenStack技術的雲服務需要進行虛擬磁碟遷移都要依賴雲服務提供商維運人員協助，且通常遷移方法是將虛擬磁碟從儲存系統中匯出，匯入進指定儲存系統，再透過Cinder將匯入的虛擬磁碟納管於OpenStack中，最後再以手動的方式在系統中重建虛擬磁碟。此方式不但需要大量雲服務提供商維運的人力成本，虛擬磁碟的相關詮釋資料都會被改變。相對來說，本發明可讓使用者於使用者介面自行點選遷移目標，並以詮釋資料不變的方式將虛擬磁碟於不同的儲存系統中。

100:電子裝置 110:處理器 120:儲存媒體 121:磁碟遷移模組 122:遷移推薦模組 123:多介面遷移模組 130:收發器 S210、S220、S230、S240、S241、S242、S243、S244、S245、S246、S247、S250、S410、S420、S430、S440:步驟

圖1根據本發明的實施例繪示一種用於遷移雲服務的虛擬磁碟的電子裝置的示意圖。圖2根據本發明的實施例繪示一種用於遷移雲服務的虛擬磁碟的方法的流程圖。圖3根據本發明的實施例繪示遷移第一虛擬磁碟的步驟的流程圖。圖4根據本發明的實施例繪示另一種用於遷移雲服務的虛擬磁碟的方法的流程圖。

S410、S420、S430、S440:步驟

Claims

一種用於遷移雲服務的虛擬磁碟的電子裝置，包括：收發器，通訊連接至所述雲服務的第一儲存系統和第二儲存系統；儲存媒體，儲存多個模組；以及處理器，耦接所述儲存媒體以及所述收發器，並且存取和執行所述多個模組，其中所述多個模組包括：磁碟遷移模組，通過所述收發器接收遷移指令，響應於所述遷移指令而複製所述第一儲存系統中的第一虛擬磁碟的第一詮釋資料以產生複製第一詮釋資料，響應於所述遷移指令而將所述第一虛擬磁碟自所述第一儲存系統移動至所述第二儲存系統以在所述第二儲存系統中建立第二虛擬磁碟，並且用所述複製第一詮釋資料覆蓋所述第二儲存系統中的所述第二虛擬磁碟的第二詮釋資料，遷移推薦模組，通過所述收發器通訊連接至所述雲服務的多個儲存系統以監視所述多個儲存系統的IOPS(input/output operations per second)或吞吐量(throughput)，響應於所述多個儲存系統中的至少一儲存系統與所述第一虛擬磁碟的IOPS或吞吐量的需求匹配而產生對應於所述至少一儲存系統的推薦訊息，並且通過所述收發器輸出所述推薦訊息。
如請求項1所述的電子裝置，其中所述遷移推薦模組更包括：通過所述收發器通訊連接至所述雲服務的多個儲存系統以監視所述多個儲存系統的IOPS(input/output operations per second)或吞吐量(throughput)，響應於所述多個儲存系統中的所述第二儲存系統與所述第一虛擬磁碟的IOPS或吞吐量需求匹配而將所述第一虛擬磁碟的轉移目標設定為所述第二儲存系統。
如請求項1所述的電子裝置，其中所述多個模組更包括：多介面遷移模組，通過所述收發器存取所述第一儲存系統以及所述第二儲存系統以判斷所述第一儲存系統對應於第一檔案格式並且所述第二儲存系統對應於第二檔案格式，響應於所述第一檔案格式與所述第二檔案格式不匹配而將所述第一虛擬磁碟自所述第一檔案格式轉換成所述第二檔案格式，其中所述磁碟遷移模組對應於所述第二檔案格式的第一虛擬磁碟移動到所述第二儲存系統以建立所述第二虛擬磁碟。
如請求項3所述的電子裝置，其中所述多介面遷移模組判斷所述第二儲存系統是否支援精簡配置，並且響應於所述第二儲存系統支援所述精簡配置而基於所述精簡配置將所述第一虛擬磁碟轉換成所述第二檔案格式。
如請求項1所述的電子裝置，其中所述遷移指令指示將所述第一儲存系統中的多個虛擬磁碟遷移到所述第二儲存系統，其中所述磁碟遷移模組根據所述遷移指令建立對應於所述多個虛擬磁碟的遷移排程，並且根據所述遷移排程而依序地將所述多個虛擬磁碟移動到所述第二儲存系統。
如請求項1所述的電子裝置，其中所述雲服務對應於OpenStack架構。
如請求項1所述的電子裝置，其中所述第一儲存系統或所述第二儲存系統對應於下列的其中之一：可靠自主分散式物件儲存介面、網路文件系統介面以及網際網路小型電腦系統介面。
一種用於遷移雲服務的虛擬磁碟的方法，包括：存取所述雲服務的第一儲存系統和第二儲存系統；響應於遷移指令而複製所述第一儲存系統中的第一虛擬磁碟的第一詮釋資料以產生複製第一詮釋資料；響應於所述遷移指令而將所述第一虛擬磁碟自所述第一儲存系統移動至所述第二儲存系統以在所述第二儲存系統中建立第二虛擬磁碟；以及用所述複製第一詮釋資料覆蓋所述第二儲存系統中的所述第二虛擬磁碟的第二詮釋資料，通訊連接至所述雲服務的多個儲存系統以監視所述多個儲存系統的IOPS(input/output operations per second)或吞吐量(throughput)，響應於所述多個儲存系統中的至少一儲存系統與所述第一虛擬磁碟的IOPS或吞吐量的需求匹配而產生對應於所述至少一儲存系統的推薦訊息，並且輸出所述推薦訊息。