TWI709865B - 運維數據讀取裝置及其讀取方法 - Google Patents
運維數據讀取裝置及其讀取方法 Download PDFInfo
- Publication number
- TWI709865B TWI709865B TW108125713A TW108125713A TWI709865B TW I709865 B TWI709865 B TW I709865B TW 108125713 A TW108125713 A TW 108125713A TW 108125713 A TW108125713 A TW 108125713A TW I709865 B TWI709865 B TW I709865B
- Authority
- TW
- Taiwan
- Prior art keywords
- maintenance data
- logical disk
- data
- module
- maintenance
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0689—Disk arrays, e.g. RAID, JBOD
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
- G06F3/0611—Improving I/O performance in relation to response time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/062—Securing storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0656—Data buffering arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0662—Virtualisation aspects
- G06F3/0665—Virtualisation aspects at area level, e.g. provisioning of virtual or logical volumes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/22—Microcontrol or microprogram arrangements
- G06F9/24—Loading of the microprogram
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
- H04L63/0281—Proxies
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
- H04L63/1441—Countermeasures against malicious traffic
- H04L63/145—Countermeasures against malicious traffic the attack involving the propagation of malware through the network, e.g. viruses, trojans or worms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/03—Protocol definition or specification
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
- H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
- H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
- H04L69/324—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the data link layer [OSI layer 2], e.g. HDLC
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q11/00—Selecting arrangements for multiplex systems
- H04Q11/0001—Selecting arrangements for multiplex systems using optical switching
- H04Q11/0062—Network aspects
- H04Q11/0067—Provisions for optical access or distribution networks, e.g. Gigabit Ethernet Passive Optical Network (GE-PON), ATM-based Passive Optical Network (A-PON), PON-Ring
Abstract
本申請公開一種運維數據讀取裝置,包括:非網際網路協議連接模組、存儲模組與處理模組。運維數據讀取裝置通過非網際網路協議連接模組與運維數據存儲裝置通訊。運維數據存儲裝置中建立有第一邏輯磁碟與第二邏輯磁碟。第一邏輯磁碟存儲運維數據。第二邏輯磁碟存儲映射運維數據。映射運維數據相應於第一邏輯磁碟的運維數據。存儲模組存儲一組程式碼。處理模組調用存儲模組中存儲的程式碼,處理模組執行以下操作: 當處理模組偵測到非網際網路協議連接模組被致能,建立連結邏輯磁碟,連結邏輯磁碟建立擷取映射運維數據的數據連結通道。
Description
本申請涉及一種非網際網路協議的數據處理,尤其涉及一種運維數據讀取裝置及其讀取方法。
伴隨著網際網路不斷發展,網際網路數據中心順勢的迅速發展起來,成為網際網路產業中不可或缺的重要一環。網際網路數據中心為網際網路內容提供者、企業、媒體和各類網站提供大規模、高品質、安全可靠的專業化伺服器託管、空間租用以及網路批發頻寬等業務。
然而很多客戶缺乏專業的設備運維團隊維護網際網路數據中心,故而有相應的運維服務提供者為客戶提供服務。在網際網路數據中心的機房內部部署數據獲取系統,將收集好的數據存儲在抽取式磁碟中,並由人工將該磁碟帶出網際網路數據中心機房,找到可以連接運維服務提供者網路的地點,將數據傳輸給運維服務提供者。這個方案對於人工成本的消耗很大,用於進行數據傳輸的磁碟也有可能感染病毒從而對網際網路數據中心機房內部的設備或系統造成影響。這個維護方案只能定期對網際網路數據中心設備提供相關運維分析報告,因此運維數據的即時性也非常不理想,很難及時發現問題。
現有網際網路數據中心的機房為了防止數據洩漏與病毒攻擊等等,網際網路數據中心對外部的網路是隔離的,導致無法快速且即時的取得運維數據。又,現有技術的單一網閘的數據傳輸速度以及數據傳輸回饋不理想,大幅影響網際網路網路提供商的服務品質。有鑑於此,本申請公開一種運維數據讀取裝置及其讀取方法,可用來解決上述現有技術的問題。
為了解決上述問題,本申請公開一種運維數據讀取裝置,其用於讀取運維數據存儲裝置,其中運維數據收集裝置收集複數個設備的運維數據,並運維數據收集裝置將複數個運維數據傳輸至運維數據存儲裝置,包括:非網際網路協議連接模組、存儲模組與處理模組。運維數據讀取裝置通過非網際網路協議連接模組與運維數據存儲裝置通訊,運維數據存儲裝置包括暫存模組、代理管理模組、代理存儲模組與鏡像模組,暫存模組接收複數個運維數據,代理存儲模組中建立有第一邏輯磁碟與第二邏輯磁碟,第一邏輯磁碟與第二邏輯磁碟具有對應的儲存陣列位置,代理管理模組依據存儲陣列位置配置複數個運維數據存儲於第一邏輯磁碟,第一邏輯磁碟的運維數據經由鏡像模組產生映射運維數據,第二邏輯磁碟存儲映射運維數據,映射運維數據相應於第一邏輯磁碟的運維數據;存儲模組存儲一組程式碼;處理模組調用存儲模組中存儲的程式碼,處理模組執行以下操作: 當處理模組偵測到非網際網路協議連接模組被致能,建立連結邏輯磁碟,連結邏輯磁碟建立擷取映射運維數據的數據連結通道。
根據本申請公開的一種運維數據讀取裝置的一實施方式,上述連結邏輯磁碟更新可擷取映射運維數據是依據請求指令執行。
根據本申請公開的一種運維數據讀取裝置的一實施方式,上述連結邏輯磁碟更新可擷取映射運維數據是定期執行。
根據本申請公開的一種運維數據讀取裝置的一實施方式,上述運維數據讀取裝置與運維數據存儲裝置彼此間的數據傳輸方式是經由非網際網路協議,非網際網路協議是存儲訪問協議。
根據本申請公開的一種運維數據讀取裝置的一實施方式,上述存儲訪問協議是光纖協議。
本申請提供一種運維數據讀取方法,其步驟包括:在運維數據存儲裝置中建立第一邏輯磁碟與第二邏輯磁碟;在運維數據讀取裝置中建立連結邏輯磁碟;接收運維數據並存儲運維數據在第一邏輯磁碟中,當第一邏輯磁碟存儲有運維數據時,複製運維數據至第二邏輯磁碟,第二邏輯磁碟存儲映射運維數據;建立擷取映射運維數據的數據連結通道。
根據本申請公開的一種運維數據讀取方法的一實施方式,上述連結邏輯磁碟存儲映射運維數據是依據請求指令執行。
根據本申請公開的一種運維數據讀取方法的一實施方式,上述連結邏輯磁碟存儲映射運維數據是定期執行。
根據本申請公開的一種運維數據讀取方法的一實施方式,上述運維數據讀取裝置與運維數據存儲裝置彼此間的數據傳輸方式是經由非網際網路協議,非網際網路協議是存儲訪問協議。
根據本申請公開的一種運維數據讀取方法的一實施方式,上述存儲訪問協議是光纖協議。
通過本申請所公開的運維數據讀取裝置及其讀取方法,改良現有技術所存在的問題或缺點。本申請透過在客戶網際網路數據中心機房的網路邊界上,通過存儲裝置與讀取裝置,實現非網際網路協議的數據傳輸功能,以達到保護客戶網際網路數據中心機房的網路隔離性,同時又能夠實現運維數據的快速及即時傳輸的能力,以提升運維服務的服務水準以及客戶的使用體驗。
以下將以圖式揭露本申請的複數個實施方式,為明確說明起見,許多實施上的細節將在以下敘述中一併說明。然而,應瞭解到,這些實施上的細節不應用以限制本申請。也就是說,在本申請的部分實施方式中,這些實施上的細節是非必要的。此外,為簡化圖式起見,一些習知慣用的結構與元件在圖式中將以簡單的示意的方式繪示。在以下各實施例中,將以相同的標號表示相同或相似的組件。
圖1繪示本申請所公開的運維數據存儲裝置的系統架構示意圖。運維數據存儲裝置2用於存放裝置的運維數據。運維數據存儲裝置2中設置有第一邏輯磁碟201與第二邏輯磁碟203。運維數據收集裝置19所收集的運維數據會傳送給運維數據存儲裝置2,並存儲於第一邏輯磁碟201中。第二邏輯磁碟203存儲映射運維數據,映射運維數據相應於存儲於第一邏輯磁碟201中的運維數據。
在實際應用場景中,網際網路數據中心的機房內設置運維數據收集裝置19,運維數據收集裝置19與機房內複數個設備3進行通訊,運維數據收集裝置19收集複數個設備3的運維數據。圖中所示的設備3的數量為三個,是為了表示複數個設備,數量並不以此為限,其中設備3可為機房內的硬碟、存儲伺服器或記憶體裝置等等。運維數據收集裝置19與運維數據存儲裝置2進行通訊,將收集的數據傳輸至運維數據存儲裝置2。運維數據收集裝置19與運維數據存儲裝置2之間的數據傳輸可通過網際網路協議,換言之,運維數據收集裝置19與運維數據存儲裝置2可透過網際網路數據中心的內部區域網路完成運維數據傳輸。當然,也可通過非網際網路協議的方式進行,例如透過光纖通訊協議等。
運維數據收集裝置19所收集的運維數據可以概括成兩大類:即“設備管理資訊”和“運行監控資訊”,其中設備管理資訊包括了配置資訊,性能資訊,維保資訊,資產資訊以及設備變更記錄等;而運行監控資訊則包含了故障告警,狀態監控,資源監控等。
設備管理資訊屬於靜態資訊,用於描述設備中的部件的基本屬性,這些部件例如中央處理器、記憶體、硬碟、網路(物理和虛擬)、電源、系統板、輸入/輸出板(I/O板)、電源分配板、光纖背板、環境、板卡、作業系統與邏輯卷,而每一部件對應有配置資訊。中央處理器的配置資訊包括數量、位置、型號、主頻、序號、零件號與製造商等。記憶體的配置資訊包括數量、位置、主頻、大小、每條大小、序號與零件號等。硬碟的配置資訊包括數量、設備名、類型、製造商、序號、零件號、大小、全域名(WWN)與固件(Firmware)等。網路(物理和虛擬)的配置資訊包括網際網路網路協議、媒體存取控制位置、群組、名稱、最高速(maxspeed)等。電源的配置資訊包括風扇數量、序號、零件號與名稱等。系統板的配置資訊包括數量、類型、製造商、序號與零件號等。輸入/輸出板(I/O板)的配置資訊包括數量、名稱、製造商、序號與零件號等。電源分配板的配置資訊包括數量、製造商、序號與零件號等。光纖背板的配置資訊包括數量、製造商、序號與零件號等。環境的配置資訊包括風扇總數、中央處理器風扇、中央處理器風扇名、IO風扇數量與IO風扇名稱。板卡的配置資訊包括數量、類型、製造商、序號與零件號等(SCSI、FCHBA、RSC、SC卡)。作業系統的配置資訊包括版本、使用者數量、組ID、組名稱、用戶ID、用戶群組、用戶名、使用者密碼(密文)、關鍵設定檔、套裝軟體列表、主機名稱、管理IP、測試IP、服務IP、IP別名(IP Alias)、物理設備名、檔案系統名、大小、掛載點、邏輯裝置名等。邏輯卷的配置資訊包括群組數量、群組、群組大小、邏輯卷(Logic volume,lv)、邏輯卷數量、邏輯卷大小、軟體名稱、許可、軟體版本。
設備靜態資訊是對設備屬性的描述說明,雖然每台設備其屬性變化並不會太頻繁,但就整個網際網路數據中心而言,在某些情況下,依然會存在設備靜態資訊改變的情況,因此在採集過程中,為確保及時更新設備靜態資訊,智慧運維業務系統通常還是會採集設備相關的靜態資訊。導致設備靜態資訊變化的情況至少包括以下幾種情況。第一,網際網路數據中心設備進行維護時,若發現有設備元件故障,需要更換新元件的情況。第二,網際網路數據中心因為資源或性能需求,需要擴展已有設備能力的情況,例如添加記憶體,固態硬碟SSD或硬碟HDD。第三,網際網路數據中心因為業務拓展,需要增加新設備的情況,如採購伺服器,存儲或網路設備。最後,網際網路數據中心因設備老舊需要淘汰的情況。但並不限於上述幾種情況。
運行監控資訊主要包括針對設備進行監控的各項資訊,如:主機資源,網路資源,存儲資源的使用情況的監控,更進一步監控資訊會深入到各個設備的內部採集其內部模組或元件的使用狀態資訊,如:CPU資源,記憶體資源,網路介面頻寬,網路介面包轉發率,存儲資源使用量,存儲介質繁忙程度,元件告警資訊,系統運行日誌等。運維管理系統通過這一系列運行監控資訊,結合配置管理資訊,通過內嵌的分析引擎,可以為網際網路數據中心管理人員提供系統性能預警,狀態預警,變更預警,容量預警,生命週期預警,合規性檢查等多項服務。
圖2繪示本申請的運維數據存儲裝置與讀取裝置的示意圖,圖3繪示本申請的運維數據存儲裝置的結構框圖。運維數據讀取裝置1通過非網際網路協議數據傳輸通道讀取運維數據存儲裝置2內的運維數據。請一併參閱圖4,圖4繪示本申請的運維數據存儲裝置的系統示意圖。於本實施方式中,運維數據存儲裝置2包括暫存模組271、代理管理模組273、代理存儲模組275與鏡像模組277。暫存模組271接收複數個運維數據,代理存儲模組275中建立有第一邏輯磁碟201與第二邏輯磁碟203,第一邏輯磁碟201與第二邏輯磁碟203具有對應的儲存陣列位置,代理管理模組273依據存儲陣列位置將複數個運維數據配置存儲於第一邏輯磁碟201,第一邏輯磁碟201內的運維數據經由鏡像模組277產生映射運維數據,映射運維數據同時儲存於第二邏輯磁碟203內,其中鏡像模組277即時的將第一邏輯磁碟201內的運維數據複製到第二邏輯磁碟203內,使第二邏輯磁碟203內具有映射運維數據,其中運維數據相同於映射運維數據,鏡像模組277的磁碟鏡像可確保第一邏輯磁碟201與第二邏輯磁碟203內數據的一致性與準確性。鏡像模組277的磁碟鏡像可依據使用者的需求由同步、半同步、非同步或時間點等等方式進行建立。
另外,若需要讀取或下載第一邏輯磁碟201內的運維數據(或第二邏輯磁碟203內的映射運維數據),則代理管理模組273會對照先前儲存時的儲存陣列位置去讀取第一邏輯磁碟201內的運維數據(或第二邏輯磁碟203內的映射運維數據)。
運維數據讀取裝置1與運維數據存儲裝置2通過非網際網路協議通訊,運維數據讀取裝置1中的連結邏輯磁碟100建立擷取映射運維數據的數據連結通道,亦即,運維數據讀取裝置1通過非網際網路協議讀取第二邏輯磁碟203中的映射運維數據,而在連結邏輯磁碟100顯示可連結於第二邏輯磁碟203內的映射運維數據的數據連結通道。在實際的應用場景中,運維數據讀取裝置1與運維數據存儲裝置2設置於網際網路數據中心的機房處。運維數據讀取裝置1與運維數據存儲裝置2通過非網際網路協議連接模組11進行相互連接。
於現有技術中,在網際網路數據中心的機房內部部署數據獲取系統,將收集好的數據存儲在抽取式磁碟中,並由人工將該磁碟帶出網際網路數據中心機房,將數據通過連接運維服務提供者的網路傳輸給運維服務提供者。這個維護方案只能定期對網際網路數據中心設備提供相關運維分析報告,因此很難及時發現問題與即時處理。另外一種維護方案是在網際網路數據中心機房外部部署一台數據接收伺服器,網際網路數據中心機房內部通過網閘設備連接於數據接收伺服器。網閘設備是為單方向的數據傳輸設備,允許數據從網際網路數據中心內部傳輸到外部,但是外部數據無法傳輸回內部。這就造成了運維數據傳輸到外部之後,是否傳輸得完整或正確,外部是否接受完全,相關資訊很難回饋。
與現有技術不同的是,本申請的技術通過運維數據讀取裝置1與運維數據存儲裝置2彼此間的數據傳輸方式是經由非網際網路協議。非網際網路協議用於存儲訪問協議,而存儲訪問協議又可稱為是光纖協議,即FC(Fibre Channel)協議,是一種完全獨立的網路通訊協議,避免基於IP網路的數據傳輸方式,如此使運維數據存儲裝置2的數據可即時的通過內部傳輸到運維數據讀取裝置1,以確保數據的完整性與正確性,而運維數據讀取裝置1再通過網際網路協議的方式將數據即時的傳輸到外部進行維護,通常的運行速率有2Gbps、4Gbps、8Gbps和16Gbps等等,大部分用於連接電腦存放裝置。通過本申請的技術,其一方面解決習知技術外部接收數據後,外部人員無法確認接收到的數據的完整性與正確性的問題,另一方面也改良因為通過人工方式進行數據傳輸的維護方案所造成無法即時發現問題與處理問題的缺失。
運維數據讀取裝置1與運維數據存儲裝置2彼此間通過單向方式傳輸數據,亦即由運維數據存儲裝置2朝向運維數據讀取裝置1的傳輸方向。
如圖所示,運維數據讀取裝置1包括非網際網路協議連接模組11、存儲模組13與處理模組15。運維數據讀取裝置1通過非網際網路協議連接模組11讀取運維數據。非網際網路協議連接模組11的傳輸方式主要用於讀取或存儲數據的用途,不同於以往,不需將運維數據轉換成適用於網路通道傳輸的數據結構,傳輸效率也相較於以往的單閘網路通道快。
存儲模組13與非網際網路協議連接模組11通訊,存儲模組13存儲一組程式碼。處理模組15(即中央處理器)調用存儲模組13中存儲的程式碼,處理模組15執行以下操作: 當處理模組15偵測到非網際網路協議連接模組21被致能,例如運維數據讀取裝置與運維數據存儲裝置2彼此訊號連接,運維數據讀取裝置1的存儲模組13內建立連結邏輯磁碟100。
運維數據存儲裝置2通過非網際網路協議連接模組11與運維數據讀取裝置1中的非網際網路協議連接模組11進行通訊。運維數據存儲裝置2中具有存儲模組20,於存儲模組20內建立有第一邏輯磁碟201與第二邏輯磁碟203,第一邏輯磁碟201存儲運維數據,第二邏輯磁碟203存儲映射運維數據,映射運維數據相應於第一邏輯磁碟201的運維數據。運維數據讀取裝置1的連結邏輯磁碟100內建立擷取映射運維數據的數據連結通道。
於本實施方式中,運維數據讀取裝置1更包括網際網路協議連接模組17,網際網路協議連接模組17用於連接於外部裝置。網際網路協議連接模組17是用於封包交換數據網路的一種協議,此種協議是在TCP/IP協議套組中網路層的主要協議,其是根據源主機和目的主機的位址來傳送數據。網際網路協議是目前主要的協議。本實施方式的運維數據讀取裝置1可設定為讀取限制,即僅能用於讀取與擷取數據,但並不能對於連結邏輯磁碟100內所提供的運維數據進行竄改等行為。
圖4繪示本申請的運維數據存儲裝置的系統示意圖,圖5繪示本申請的讀取方法的流程圖。如圖所示,於本實施方式中,運維數據收集裝置19用於收集網際網路數據中心內的所有裝置的內部數據,運維數據收集裝置19將收集的數據傳輸至運維數據存儲裝置2。
首先在運維數據存儲裝置2中建立第一邏輯磁碟201與第二邏輯磁碟203(步驟S1)。此邏輯磁碟的數量是依據使用者需求增加或減少,並且依據使用者需求調整各個邏輯磁碟的記憶體大小。其中運維數據存儲裝置2的第一邏輯磁碟201接收並存儲運維數據收集裝置19傳輸的內部裝置數據。
在運維數據讀取裝置1中建立連結邏輯磁碟100。其中連結邏輯磁碟100內建立有為連接於第二邏輯磁碟203內的數據連結通道(步驟S3)。
接收運維數據,並存儲運維數據在第一邏輯磁碟201中,當第一邏輯磁碟201存儲有運維數據時,複製(即鏡射備份)運維數據至第二邏輯磁碟203存儲(步驟S5)。其中第一邏輯磁碟201與第二邏輯磁碟203的內部系統設定為備份關係,即第一邏輯磁碟201接收到數據後,其會自動映射到第二邏輯磁碟203,換言之,第一邏輯磁碟201內部的數據會備份至第二邏輯磁碟203。
建立擷取運維數據的數據連結通道(步驟S7)。此處連結邏輯磁碟100的數據連結通道用於提供可連通於第二邏輯磁碟203內空間的連通空間,即第二邏輯磁碟203作為分享映射運維數據的來源,而連結邏輯磁碟100作為擷取映射運維數據的連結通道。換言之,運維數據並未佔用連結邏輯磁碟100內的磁碟記憶體空間。
此外,請參閱圖4,運維數據存儲裝置2還可包括日誌模組23,或服務模組25。日誌模組23用於對運維數據存儲裝置2所進行運作的日程進行記錄的相關檔案,可針對於運維數據的存儲產生相關的記錄軟體。服務模組25為使用者對於運維數據存儲裝置2增加相關性的功能服務所使用的增設功能模組。
上述有關於第一邏輯磁碟201映射到第二邏輯磁碟203的方式有以下幾種。
第一種方式為容錯式磁碟陣列的技術。將第一邏輯磁碟201與第二邏輯磁碟203通過容錯式磁碟陣列的技術,使第一邏輯磁碟201與第二邏輯磁碟203構建成一個邏輯磁碟。當運維數據寫入第一邏輯磁碟201後,運維數據通過容錯式磁碟陣列技術而複寫入第二邏輯磁碟203。最後,第二邏輯磁碟203內的運維數據通過FC協議傳輸至連結邏輯磁碟100內。其中容錯式磁碟陣列技術通過磁碟數據鏡像實現數據冗餘,在成對的獨立磁碟上產生互為備份的數據。當原始數據繁忙時,可直接從鏡像複製中讀取數據,因此容錯式磁碟陣列技術可以提高讀取性能。容錯式磁碟陣列技術是磁碟陣列中單位成本較高,但提供了很高的數據安全性和可用性。當一個磁碟失效時,系統可以自動切換到鏡像磁碟上讀寫,而不需要重組失效的數據。
第二種方式為數據複製技術。於運維數據存儲裝置2內安裝持續數據保護(即Continuous Data Protection,CDP)的技術。將第一邏輯磁碟201中的數據,持續備份至第二邏輯磁碟203中,持續數據保護技術的軟體可以設置相應的時間間隔來完成數據備份的功能。被持續數據保護技術的軟體備份進入第二邏輯磁碟203的數據即可即時通過FC協議,進一步的將第二邏輯磁碟203中的運維數據持續更新於連結邏輯磁碟100,並且於連結邏輯磁碟100內建立更新後的數據連結通道。
承上所述,於本實施方式提供兩個映射方式。於本實施方式中,採集運維數據的流程中安放第一邏輯磁碟201,而不讓網際網路數據中心內部的運維數據獲取程式直接將數據寫入連結邏輯磁碟100,是為了防止在系統運行過程中,運維數據讀取裝置1與運維數據存儲裝置2間的FC通道中斷時,相應的運維原生數據沒有介質可以存儲。通過FC通道,避免了使網際網路帶來的風險,高通量的FC通道以及即時/非同步數據複製技術,保障了數據從網際網路數據中心內部傳輸到外部時的一致性。
再者,當第二邏輯磁碟203內存儲第一邏輯磁碟201的所有數據後,運維數據讀取裝置1連結於運維數據存儲裝置2後則會自動建立可擷取第二邏輯磁碟203內的運維數據至連結邏輯磁碟100的數據連結通道,其中連結邏輯磁碟100更新可擷取映射運維數據是依據請求指令執行或定期執行。如此廠商可將網際網路數據中心機房內部的運維數據上傳至特定網路位置,而運維服務商可透過特定網路位置擷取運維數據。
綜上所述,本實施方式提供一種運維數據讀取裝置及其讀取方法,其包括非網際網路協議連接裝置、存儲裝置與處理裝置。運維數據讀取裝置內部通過FC(Fibre Channel)協議的訊號線連結於運維數據存儲裝置,運維數據讀取裝置實現非網際網路協議鏈路的數據傳輸功能,以達到保護客戶網際網路數據中心機房的網際網路協議網路隔離性。同時運維數據讀取裝置1內部與外部通過網際網路協議的網路又能夠實現運維數據的快速及時傳輸的能力。提升運維服務公司的服務水準以及客戶的使用體驗。
本領域普通技術人員可以理解上述方法中的全部或部分步驟可以通過程式來指令相關硬體完成,所述程式可以存儲於電腦可讀存儲介質中,如唯讀記憶體,硬碟或者光碟等。該電腦可讀存儲介質存儲一個或複數個程式,該一個或複數個程式包括指令,該指令當被包括複數個應用程式的電子設備執行時,能夠使該電子設備執行實施例所公開的方法。可選的,上述實施例的全部或部分步驟也可以使用一個或者複數個積體電路來實現。相應的,上述實施例中的各模組單元,可以採用硬體形式實現,也可以由軟體功能模組的形式實現,本申請不限於任何特定形式的軟體和硬體的結合。
本申請是參照根據本申請實施例的方法、設備(系統)、和電腦程式產品的流程圖和/或方框圖來描述的。應理解可由電腦程式指令實現流程圖和/或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結合。可提供這些電腦程式指令到通用電腦、專用電腦、嵌入式處理機或其他可程式設計數據處理設備的處理器以產生一個機器,使得通過電腦或其他可程式設計數據處理設備的處理器執行的指令產生用於實現在流程圖一個流程或複數個流程和/或方框圖一個方框或複數個方框中指定的功能的裝置。
這些電腦程式指令也可存儲在能引導電腦或其他可程式設計數據處理設備以特定方式工作的電腦可讀記憶體中,使得存儲在該電腦可讀記憶體中的指令產生包括指令裝置的製造品,該指令裝置實現在流程圖一個流程或複數個流程和/或方框圖一個方框或複數個方框中指定的功能。
這些電腦程式指令也可裝載到電腦或其他可程式設計數據處理設備上,使得在電腦或其他可程式設計設備上執行一系列操作步驟以產生電腦實現的處理,從而在電腦或其他可程式設計設備上執行的指令提供用於實現在流程圖一個流程或複數個流程和/或方框圖一個方框或複數個方框中指定的功能的步驟。
電腦可讀介質包括永久性和非永久性、可移動和非可移動媒體可以由任何方法或技術來實現資訊存儲。資訊可以是電腦可讀指令、數據結構、程式的模組或其他數據。電腦的存儲介質的例子包括,但不限於相變記憶體 (PRAM)、靜態隨機存取記憶體 (SRAM)、動態隨機存取記憶體 (DRAM)、其他類型的隨機存取記憶體 (RAM)、唯讀記憶體 (ROM)、電子抹除式可複寫唯讀記憶體 (EEPROM)、快閃記憶體或其他記憶體技術、唯讀光碟唯讀記憶體 (CD-ROM)、數位多功能光碟 (DVD) 或其他光學存儲、磁盒式磁帶,磁帶磁碟存儲或其他磁性存放裝置或任何其他非傳輸介質,可用於存儲可以被計算設備訪問的資訊。按照本文中的界定,電腦可讀介質不包括暫存電腦可讀媒體 (transitory media),如調製的數據訊號和載波。
還需要說明的是,術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、商品或者設備不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、商品或者設備所固有的要素。在沒有更多限制的情況下,由語句“包括一個…”限定的要素,並不排除在包括所述要素的過程、方法、商品或者設備中還存在另外的相同要素。
上述說明示出並描述了本申請的若干優選實施方式,但如前物件,應當理解本申請並非局限於本文所披露的形式,不應看作是對其他實施方式的排除,而可用於各種其他組合、修改和環境,並能夠在本文物件發明構想範圍內,通過上述教導或相關領域的技術或知識進行改動。而本領域人員所進行的改動和變化不脫離本申請的精神和範圍,則都應在本申請所附權利要求的保護範圍內。
1:運維數據讀取裝置
100:連結邏輯磁碟
11:非網際網路協議連接模組
13:存儲模組
15:處理模組
17:網際網路協議連接模組
19:運維數據收集裝置
2:運維數據存儲裝置
20:存儲模組
21:網際網路協議連接模組
23:日誌模組
25:服務模組
201:第一邏輯磁碟
203:第二邏輯磁碟
271:暫存模組
273:代理管理模組
275:代理存儲模組
277:鏡像模組
3:設備
此處所說明的附圖用來提供對本申請的進一步理解,構成本申請的一部分,本申請的示意性實施方式及其說明用於解釋本申請,並不構成對本申請的不當限定。在附圖中:
圖1其為本申請的運維數據存儲裝置的系統架構示意圖。
圖2其為本申請的運維數據存儲裝置與讀取裝置的示意圖。
圖3其為本申請的運維數據存儲裝置的結構框圖。
圖4其為本申請的運維數據存儲裝置的系統示意圖。
圖5其為本申請的讀取方法的流程圖。
1:運維數據讀取裝置
100:連結邏輯磁碟
11:非網際網路協議連接模組
13:存儲模組
15:處理模組
17:網際網路協議連接模組
2:運維數據存儲裝置
20:存儲模組
21:網際網路協議連接模組
201:第一邏輯磁碟
203:第二邏輯磁碟
Claims (6)
- 一種運維數據讀取裝置,其用於讀取一運維數據存儲裝置,其中一運維數據收集裝置收集一網際網路數據中心之複數個設備個別的一運維數據,並該運維數據收集裝置將該些個運維數據傳輸至該運維數據存儲裝置,包括:一非網際網路協議連接模組,該運維數據讀取裝置通過該非網際網路協議連接模組與該運維數據存儲裝置通訊,該運維數據讀取裝置與該運維數據存儲裝置彼此間的數據傳輸方式是經由非網際網路協議,該非網際網路協議是光纖協議,該運維數據存儲裝置包括一暫存模組、一代理管理模組、一代理存儲模組與一鏡像模組,該暫存模組接收該些個運維數據,該代理存儲模組中建立有一第一邏輯磁碟與一第二邏輯磁碟,該第一邏輯磁碟與該第二邏輯磁碟具有對應的一儲存陣列位置,該代理管理模組依據該存儲陣列位置配置該些個運維數據存儲於該第一邏輯磁碟,該第一邏輯磁碟的該運維數據經由該鏡像模組產生一映射運維數據,該第二邏輯磁碟存儲該映射運維數據,該映射運維數據相應於該第一邏輯磁碟的該運維數據;一存儲模組,存儲一組程式碼;一處理模組,調用該存儲模組中存儲的該程式碼,該處理模組執行以下操作:當該處理模組偵測到該非網際網路協議連接模組被致能,建立連結邏輯磁碟,該連結邏輯磁碟建立連接於該第二邏輯磁碟以擷取該映射運 維數據的數據連結通道,使得該運維數據讀取裝置透過該非網際網路協議連接模組讀取該第二邏輯磁碟中的該映射運維數據。
- 如請求項第1項所述之運維數據讀取裝置,其中該連結邏輯磁碟更新可擷取該映射運維數據是依據請求指令執行。
- 如請求項第1項所述之運維數據讀取裝置,其中該連結邏輯磁碟更新可擷取該映射運維數據是定期執行。
- 一種運維數據讀取方法,其步驟包括:在一運維數據存儲裝置中建立一第一邏輯磁碟與一第二邏輯磁碟;在一運維數據讀取裝置中建立一連結邏輯磁碟;接收一網際網路數據中心之複數個設備個別的一運維數據,並存儲該運維數據在該第一邏輯磁碟中,當該第一邏輯磁碟存儲有該運維數據時,複製該運維數據至該第二邏輯磁碟,該第二邏輯磁碟存儲映射運維數據,其中,該運維數據讀取裝置與該運維數據存儲裝置彼此間的數據傳輸方式是經由非網際網路協議,該非網際網路協議是光纖協議;以及建立連接於該第二邏輯磁碟以擷取該映射運維數據的數據連結通道,使得該運維數據讀取裝置透過該非網際網路協議連接模組讀取該第二邏輯磁碟中的該映射運維數據。
- 如請求項第4項所述之運維數據讀取方法,其中該連結邏輯磁碟存儲該映射運維數據是依據請求指令執行。
- 如請求項第4項所述之運維數據讀取方法,其中該連結邏輯磁碟存儲該映射運維數據是定期執行。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910102306.0 | 2019-02-01 | ||
CN201910102306.0A CN111522499B (zh) | 2019-02-01 | 2019-02-01 | 运维数据读取装置及其读取方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW202030620A TW202030620A (zh) | 2020-08-16 |
TWI709865B true TWI709865B (zh) | 2020-11-11 |
Family
ID=71837428
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW108125713A TWI709865B (zh) | 2019-02-01 | 2019-07-19 | 運維數據讀取裝置及其讀取方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11494130B2 (zh) |
CN (1) | CN111522499B (zh) |
TW (1) | TWI709865B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11509716B2 (en) | 2020-04-29 | 2022-11-22 | Silicon Motion Technology (Hong Kong) Limited | Method and apparatus for performing simple storage service seamless migration using index objects |
TWI805380B (zh) * | 2020-04-29 | 2023-06-11 | 香港商希瑞科技股份有限公司 | 利用索引物件來進行簡易儲存服務無縫遷移的方法、主裝置以及儲存伺服器 |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112491786A (zh) * | 2020-10-16 | 2021-03-12 | 中国铁路信息科技集团有限公司 | 基于单向传输的安全运维方法和系统 |
CN113378245A (zh) * | 2021-07-07 | 2021-09-10 | 北京安天网络安全技术有限公司 | 安全状态数据的运维方法、装置、电子设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1811756A (zh) * | 2005-01-26 | 2006-08-02 | 宇汇知识科技股份有限公司 | 可携式数据库搜寻代理器处理系统及修正方法 |
TW201028852A (en) * | 2009-01-23 | 2010-08-01 | Infortrend Technology Inc | Storage subsystem and storage system architecture performing storage virtualization and method thereof |
CN206388319U (zh) * | 2017-01-20 | 2017-08-08 | 深圳市华德安科技有限公司 | 一种无线数据采集设备以及系统 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6683883B1 (en) * | 2002-04-09 | 2004-01-27 | Sancastle Technologies Ltd. | ISCSI-FCP gateway |
CN101676882B (zh) * | 2008-09-16 | 2013-01-16 | 美光科技公司 | 存储器装置的内嵌映射信息 |
US8438349B2 (en) * | 2009-08-21 | 2013-05-07 | Symantec Corporation | Proxy backup of virtual disk image files on NAS devices |
CN101788889B (zh) * | 2010-03-03 | 2011-08-10 | 浪潮(北京)电子信息产业有限公司 | 一种存储虚拟化系统及方法 |
US10587684B2 (en) * | 2013-12-13 | 2020-03-10 | C Series Aircraft Limited Partnership | Apparatus and methods for providing network security on a mobile platform |
CN103942014B (zh) * | 2014-04-29 | 2017-02-08 | 哈尔滨工业大学 | Fc-ae-1553协议接口卡存储器映射装置及存储器映射方法 |
US9959073B1 (en) * | 2016-03-30 | 2018-05-01 | EMC IP Holding Company LLC | Detection of host connectivity for data migration in a storage system |
US10684888B1 (en) * | 2017-10-23 | 2020-06-16 | Amazon Technologies, Inc. | Self-organizing server migration to service provider systems |
-
2019
- 2019-02-01 CN CN201910102306.0A patent/CN111522499B/zh active Active
- 2019-07-19 TW TW108125713A patent/TWI709865B/zh active
-
2020
- 2020-01-15 US US16/743,587 patent/US11494130B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1811756A (zh) * | 2005-01-26 | 2006-08-02 | 宇汇知识科技股份有限公司 | 可携式数据库搜寻代理器处理系统及修正方法 |
TW201028852A (en) * | 2009-01-23 | 2010-08-01 | Infortrend Technology Inc | Storage subsystem and storage system architecture performing storage virtualization and method thereof |
CN206388319U (zh) * | 2017-01-20 | 2017-08-08 | 深圳市华德安科技有限公司 | 一种无线数据采集设备以及系统 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11509716B2 (en) | 2020-04-29 | 2022-11-22 | Silicon Motion Technology (Hong Kong) Limited | Method and apparatus for performing simple storage service seamless migration using index objects |
TWI805380B (zh) * | 2020-04-29 | 2023-06-11 | 香港商希瑞科技股份有限公司 | 利用索引物件來進行簡易儲存服務無縫遷移的方法、主裝置以及儲存伺服器 |
Also Published As
Publication number | Publication date |
---|---|
CN111522499B (zh) | 2023-08-08 |
CN111522499A (zh) | 2020-08-11 |
US20200249845A1 (en) | 2020-08-06 |
TW202030620A (zh) | 2020-08-16 |
US11494130B2 (en) | 2022-11-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI709865B (zh) | 運維數據讀取裝置及其讀取方法 | |
US11249857B2 (en) | Methods for managing clusters of a storage system using a cloud resident orchestrator and devices thereof | |
US9703647B2 (en) | Automated policy management in a virtual machine environment | |
CN103890729B (zh) | 计算机化方法、存储服务器及管理服务器 | |
US7430616B2 (en) | System and method for reducing user-application interactions to archivable form | |
US10146636B1 (en) | Disaster recovery rehearsals | |
US8910172B2 (en) | Application resource switchover systems and methods | |
US10289694B1 (en) | Method and system for restoring encrypted files from a virtual machine image | |
US20060095705A1 (en) | Systems and methods for data storage management | |
JP5015351B2 (ja) | 実行プログラムによる非ローカルブロックデータストレージへの信頼性の高いアクセスの実現 | |
US8341119B1 (en) | Flexible copies having different sub-types | |
CN103034563A (zh) | 用于管理数据的备份操作的方法和系统 | |
Kim et al. | Human-centric storage resource mechanism for big data on cloud service architecture | |
CN105446831A (zh) | 一种结合SAN的Server-Free备份方法 | |
US20150381727A1 (en) | Storage functionality rule implementation | |
CN106095618A (zh) | 数据操作的方法和系统 | |
US10365950B2 (en) | Resource throttling and automated policy management in a virtual machine environment | |
US20180314430A1 (en) | Methods for improved data replication in cloud environments and devices thereof | |
Orlando et al. | IBM ProtecTIER Implementation and Best Practices Guide | |
US11074002B2 (en) | Object storage system with meta object replication | |
Rao | Data duplication using Amazon Web Services cloud storage | |
US20230334026A1 (en) | Asynchronous metadata replication and migration between compute sites | |
US10929250B2 (en) | Method and system for reliably restoring virtual machines | |
Kawato et al. | Auto-construction for Distributed Storage System Reusing Used Personal Computers. | |
Raghav | Oracle Recovery Appliance Handbook: An Insider’S Insight |