TW201719417A - 資料儲存裝置監測技術 - Google Patents

資料儲存裝置監測技術 Download PDF

Info

Publication number
TW201719417A
TW201719417A TW105133858A TW105133858A TW201719417A TW 201719417 A TW201719417 A TW 201719417A TW 105133858 A TW105133858 A TW 105133858A TW 105133858 A TW105133858 A TW 105133858A TW 201719417 A TW201719417 A TW 201719417A
Authority
TW
Taiwan
Prior art keywords
classification unit
data storage
access
storage device
access requirements
Prior art date
Application number
TW105133858A
Other languages
English (en)
Other versions
TWI590052B (zh
Inventor
克里斯多夫 J. 葛拉漢
湯瑪士 J. 弗琳
維吉尼亞 Q. 希瑞拉
Original Assignee
惠普發展公司有限責任合夥企業
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 惠普發展公司有限責任合夥企業 filed Critical 惠普發展公司有限責任合夥企業
Publication of TW201719417A publication Critical patent/TW201719417A/zh
Application granted granted Critical
Publication of TWI590052B publication Critical patent/TWI590052B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3034—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a storage system, e.g. DASD based or network based
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/16—Threshold monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/008—Reliability or availability analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3452—Performance evaluation by statistical analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466—Performance evaluation by tracing or monitoring
    • G06F11/3485—Performance evaluation by tracing or monitoring for I/O devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/81—Threshold

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mathematical Physics (AREA)
  • Computer Hardware Design (AREA)
  • Environmental & Geological Engineering (AREA)
  • Storage Device Security (AREA)
  • Debugging And Monitoring (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一種用以監測跨越一網路之不同資料儲存裝置之方法的範例，該方法包括接收對於跨越一網路之不同資料儲存裝置所進行的資料儲存存取要求。指派該等存取要求之一子集合至存取要求特性之一分類法的一分類單元。對於該分類單元，依據該等存取要求之該子集合而判定對於一參數之一分類單元臨界值。所觀察之存取要求的一樣本之參數，其被進行於一資料儲存裝置且屬於該分類單元，被比較於該分類單元臨界值。關於該資料儲存裝置之一通知依據該比較而進行。

Description

資料儲存裝置監測技術
發明領域 本發明係有關於資料儲存裝置監測技術。
發明背景 資料儲存裝置被使用以儲存資料。自資料儲存裝置讀取資料或寫入資料至儲存裝置之對於資料儲存裝置之存取要求可能耗損一資料儲存裝置，而導致該資料儲存裝置可能發生失效。
發明概要 依據本發明之一實施例，係特地提出一種用以監測跨越一網路之不同資料儲存裝置的方法，該方法包含下列步驟：接收對於跨越一網路之不同資料儲存裝置所進行的資料儲存存取要求；指派該等存取要求之一子集合至存取要求特性之一分類法的一分類單元；對於該分類單元，依據該等存取要求之該子集合而判定對於一參數之一分類單元臨界值；比較所觀察之存取要求的一樣本之參數，其被進行於一資料儲存裝置且屬於該分類單元，與該分類單元臨界值；以及依據該比較而輸出關於該資料儲存裝置之一通知。
較佳實施例之詳細說明 自一資料儲存裝置之讀取資料或寫入資料至該資料儲存裝置之任何存取要求將施加耗損於資料儲存裝置上。量測和追蹤一個別的資料儲存裝置之耗損通常是困難的。依據它們的使用情況之變化，不同資料儲存裝置可能以不同的比率受耗損。一資料儲存裝置之意外故障可能會導致資料之損失。
圖1分解地例示一資料儲存裝置監測系統20範例。如將在隨後所說明，資料儲存裝置監測系統20監視施加於一資料儲存裝置上之耗損。監測系統20比較對於該資料儲存裝置且屬於存取要求之一特別分類單元所進行的存取要求之一參數，與對於該參數之一臨界值(其已自對於跨越一網路之複數個資料儲存裝置之存取要求被導出並且被指派至相同分類單元)。依據該比較，監測系統20輸出關於該特別資料儲存裝置之耗損狀態以及可能的故障顧慮之一通知。
資料儲存裝置監測系統20包含資料儲存裝置監視器30，其自跨越一網路之不同資料儲存裝置40接收所進行之資料儲存存取要求或關於此等存取要求之資訊。在例示之範例中，資料儲存裝置監測系統20接收資料儲存存取要求或關於對資料儲存裝置40(DSD1 -DSDN )所進行之此等存取要求的資訊。此等資料儲存裝置40可以包含固態儲存裝置，例如，NAND-型式快閃記憶體裝置。於其他實行例中，記憶體儲存裝置40可以包含其他型式的資料儲存裝置或記憶體裝置。
在例示之範例中，存取要求AR，也被稱為輸入/輸出要求或讀取/寫入要求，是藉由一要求者42(R)對於各個資料儲存裝置40所進行者。各要求者42可以包含多種要求之任何一者，例如，計算裝置之一中央處理單元。在例示之範例中，此等要求被發送至一中間記憶體控制器44，其可以管理至相關資料儲存裝置40之資料的寫入以及自該相關資料儲存裝置40之資料的讀取。在例示之範例中，除了發送存取要求至該相關的資料儲存裝置40之外，記憶體控制器44進一步地發送關於該等存取要求之存取要求資料至監視器30。在例示之範例中，對於一個別的資料儲存裝置DSD所進行之存取要求包含存取要求ARx,y ，其中第一下標表示一特別資料儲存裝置並且其中第二下標表示個別的存取要求之一辨識。例如，對於DSD1 所進行之存取要求包含存取要求AR1,1 至AR1,n 。於其他實行例中，監視器30可以取得或得到對於跨越網路之該等不同資料儲存裝置40所進行之該等存取要求AR或關於自其他來源對於跨越網路之該等不同資料儲存裝置所進行之該等存取要求AR的資訊。例如，對於它們的相關資訊之存取要求可以直接地自要求者42被發送至記憶體控制器44和監視器30兩者。
資料儲存裝置監視器30包含處理單元(PU)50和記憶體52。處理單元50遵循藉由記憶體52(一非暫態電腦可讀取媒體)所提供的指令。為了這申請案之目的，字詞“處理單元”將是指一目前開發或未來開發的處理單元，其執行包含於一記憶體(例如，記憶體52)中之指令序列。指令序列之執行導致處理單元進行步驟，例如，產生控制信號。該等指令可以被裝載於一隨機存取記憶體(RAM)中，以供藉由處理單元自一唯讀記憶體(ROM)、一大容量之儲存裝置、或一些其他的永久儲存器之執行。在其他另外的實施例中，硬線電路可以被使用以代替或與軟體指令組合以實行上述功能。例如，監視器30可以被實施作為一個或多個特定應用積體電路(ASIC)之部件。除非明確地被提到，否則該控制器是不受限定於硬體電路和軟體之任何特定組合，也不受限定於藉由處理單元被執行之指令的任何特定來源。
記憶體52包含了含有指令之一非暫態電腦可讀取媒體，該等指令指示處理單元50以實行例示於圖3中之資料儲存裝置監測方法100的範例。如藉由圖3中之方塊104所表明地，記憶體52指示處理單元50以接收或得到對於跨越一網路之二個不同資料儲存裝置DSD 40所進行之資料儲存存取要求AR。如上所述，在一實行例中，監視器30自與各資料儲存裝置40相關聯的記憶體控制器得到資料儲存存取要求AR。於其他實行例中，監視器30可以自其他的來源取得該資料儲存存取要求。
如藉由圖3中之方塊108所表明地，記憶體52指示處理單元50以指派一接收的存取要求子集合至存取要求特性之一分類法的一分類單元。圖2例示藉由監視器30自各種資料儲存裝置40所接收的存取要求之整體或全部的人口60。在存取要求的這人口60中，監視器30維護存取要求特性之一總體分類法的一界定分類單元62。分類單元62包含存取要求特性之複數個位準之階層的一個別位準，各位準或分類單元62包含與個別的存取要求相關聯的預定特性之一特別集合。分類單元62可以是依據一存取要求之特性，例如，該存取要求所起源之要求者42的特性、藉由該要求者所實行之程式或應用及對於該存取要求所進行之特性、有關存取要求所進行的時間之特性以及其類似者。例如，來自不同要求者42之不同存取要求可以依據該等不同要求者之一些不同特性被指派至不同分類單元62。在一第一程式或型式程式或應用執行之期間所啟動的存取要求可以被指派至第一分類單元，而在一第二程式或第二型式之程式或應用執行之一啟動的存取要求可以被指派至一第二不同分類單元。在一天之一第一時間、一週之日期、一年之月份或其他時間週期的期間所進行之存取要求可以被指派至一第一分類單元，而在一天的一不同時間、一週之不同日期、一年之不同月份或一不同的其他時間之期間所進行的其他存取要求，可以被指派至一第二不同分類單元。落在所界定的邊界內之存取要求AR的人口60子集合或分類單元62之特性被指派至特別分類單元62。在例示之範例中，存取要求AR1,4 ，AR1,5 … AR3,1 被指派至分類單元62，此等存取要求AR之各者具有落在所界定特性邊界或分類單元62範圍之內的特性。
如藉由圖3之方塊112所表明地，對於分類單元，例如，分類單元62，記憶體52指示處理單元50以依據被指派至該分類單元之該存取要求子集合而判定用於一參數之一分類單元臨界值。在圖1中所例示之範例中，對於該等存取要求之各存取要求子集合，監視器30判定或確認對於特別存取要求AR的一特別參數P之數值PV。監視器30可以判定或辨識數值之存取要求的參數範例包括，但不受限定於，一特別存取要求被接收的一時間週期之期間被接收的存取要求之一頻率，或根據個別存取要求被轉移(被讀取或被寫入)之資料數量。
如進一步地藉由圖1所展示地，對於特別參數P，記憶體52指示處理單元50以依據個別的參數值而判定對於該等個別的存取要求之一聚集統計數值PVstat 。例如，監視器30可以判定該等存取要求所進行之各種頻率的一中數或平均值。監視器30可以根據屬於分類單元62之存取要求子集合而判定被轉移的資料數量之一中數或平均值。依據所判定之PVstat ，監視器30(根據包含於記憶體52中之指令)，判定一啟始或新的分類單元臨界值(TT)或調整一現存的分類單元臨界值(TT)。例如，在一實行例中，一分類單元臨界值TT可以被界定如落在對於被指派至分類單元62之存取的子集合54的參數P之平均或中數值(PVstat )的一標準偏差值之外的一數值。
在一實行例中，對於分類單元62之分類單元臨界值TT依據對於監視器30在一啟始設定階段期間所進行的存取要求而被判定。在另一實行例中，對於分類單元62之分類單元臨界值TT依據在週期時間區間之預定時間區間所進行的存取要求而被判定，其中一新判定的分類單元臨界值TT取代在各時間區間之一舊的分類單元臨界值TT。而在另一個實行例中，當對於不同資料儲存裝置40之新的存取要求被進行且藉由監視器30被接收時，該分類單元臨界值TT即時連續地被修訂。在一實行例中，被使用作為用以判定該分類單元臨界值TT之一基礎的PVstat 數值是依據被指派至分類單元62的存取要求之一預定集合，其中當新的存取要求被接收而屬於分類單元62且被添加至被使用以判定該PVstat 數值之預定集合時，較舊的存取要求自該預定集合被移除或被逐出。在一實行例中，屬於分類單元62且先前被使用以判定該分類單元臨界值是以其為基礎之PVstat 數值之較舊的存取要求，以一先進先出為基礎地自預定集合被逐出或被移除。於其他實行例中，在它們相關的參數值PV中之該等特別存取要求被添加至該預定集合，並且依據其他協定自該預定集合被移除。
在一實行例中，監視器30藉由應用一加權至不同存取要求AR之不同參數值PV而判定或計算分類單元臨界值自其被判定之PVstat 數值。在一實行例中，監視器30依據相關聯的存取要求AR之年齡而不同地加權參數值PV。例如，在一實行例中，當比較至較新之更新近被接收的存取要求之參數值時，較舊的存取要求之參數值被給予一較低的加權。而在另一實行例中，監視器30可以依據存取要求之其他特性(例如，對於該存取要求被指示之特別資料儲存裝置、一存取要求被接收之當天時間、存取要求自其所起源之要求者及/或存取要求進行所用之程式或應用)，而不同地加權不同存取要求之參數值。
如藉由圖3之方塊116所表明地，監視器30藉由觀察對於個別的資料儲存裝置所進行之存取要求的一樣本而監視資料儲存裝置40之健康或耗損。監視器30比較所觀察之對於一資料儲存裝置所進行且屬於分類單元62的存取要求之樣本參數與分類單元臨界值TT，以辨識該資料儲存裝置相對於其他資料儲存裝置是否為一異常者。例如，當接受到對一個別的資料儲存裝置之一存取要求或一存取要求族群時，監視器30確認或判定對於在方塊112中被判定之分類單元臨界值的參數之數值。於其中所觀察之存取要求的樣本包含複數個存取要求之情況中，監視器30可以依據該樣本之複數個存取要求而判定一平均值或其他統計數值。
如上所提及地，在一實行例中，所評估之參數包含在對於個別的資料儲存裝置之個別的存取要求所進行的時間之期間，存取要求之接受的頻率。在另一實行例中，所量測之參數可以包含根據該存取要求被轉移(被讀取或被寫入)的資料之一數量。監視器30比較存取要求或存取要求族群之數值與分類單元臨界值TT。
如藉由圖3之方塊120所表明地，依據所觀察的存取要求之參數以及目前分類單元臨界值TT之比較，監視器30輸出一通知。該通知可以依據分類單元62之邊界而變化。在一實行例中，該通知可能警告資料儲存裝置之一使用者或擁有者、一資訊技術部門或其他管理者，該特別資料儲存裝置正處於不正常之耗損率，可能地表明該資料儲存裝置之未被授權的外來使用。在另一實行例中，該通知可能警告裝置之資料儲存的一使用者或擁有者、資訊技術部門或其他管理者，該特別資料儲存裝置可能是接近一失效時間，以至於是否考慮該資料儲存裝置之更頻繁地備份或一可能的更換。又於其他實行例中，該通知可能警告裝置之資料儲存的一使用者或擁有者、資訊技術部門或其他管理者，該特別資料儲存裝置是未充足被利用，當比較至其他同樣地被使用之資料儲存裝置時，其是以一較緩慢於平均或正常之速率受耗損。於此一情況中，該警告可能建議或引導正運轉的資料儲存裝置之使用或切換具有較重耗損的其他資料儲存裝置以方便於一資料儲存裝置族群之中的負載或耗損平衡。再於其他實行例中，該通知可能自動地觸發一記憶體控制器44或存取要求者42以藉由一網路之替代的資料儲存裝置而儲存新的資料，而減少依據方塊116中之比較被辨識是在風險的資料儲存裝置之耗損。
在一實行例中，藉由監視器30之複數個資料儲存裝置40的監測即時地被進行並且自動地被進行。在一實行例中，監視器30同時地監視數百個且甚至數千個不同資料儲存裝置40，當存取要求串流連續地被接收時，固定地且連續地更新或調整分類單元臨界值TT。此等存取要求可能是以每秒數百個且甚至數千個存取要求之速率流動。監視器30便利此等存取要求之即時的監測以辨識偏差，其可能表明個別的資料儲存裝置偏離正常的使用、耗損或性能。因而，該等個別的資料儲存裝置之性能可以被改進。
圖4分解地例示資料儲存裝置監測系統220，資料儲存裝置監測系統20之一實行範例。除了系統220是特定地例示如依據或透過複數個不同分類單元的使用之監測資料儲存裝置之外，資料儲存裝置監測系統220是相似於資料儲存裝置監測系統20。那些對應至系統20之構件或元件的系統220之其餘構件或元件是相似地被編標號。
如藉由圖4所展示地，監視器30指派資料儲存存取要求AR至分類單元262、分類單元1、分類單元2、分類單元3…、分類單元N。分類單元1-N之各者包含存取要求特性之複數個位準的一層次之一個別的位準，各位準或分類單元262包含與個別的存取要求相關聯的預定特性之一特別集合。分類單元262之各者可以是依據一存取要求之特性，例如，存取要求所起源的要求者42之特性、藉由要求者被實行及對於存取要求所進行之程式或應用的特性、相對於存取要求所進行之時間的特性以及其類似者。例如，來自不同要求者42之不同存取要求可以依據不同要求者之一些不同特性而被指派至不同分類單元262。在一第一程式或型式程式或應用之執行的期間被啟動之存取要求可以被指派至第一分類單元，而在一第二程式或第二型式程式或應用執行之期間被啟動的存取要求可以被指派至一第二不同分類單元。在每天之一第一時間、每週之日期、每年之月份或其他時間週期的期間所進行的存取要求可以被指派至一第一分類單元，而在一天之一不同的時間、一週之不同的日期，一年之一不同的月份或一不同的其他時間週期之期間所進行的其他存取要求被指派至一第二不同分類單元。落在所界定的邊界之內的存取要求AR之人口子集合或分類單元262的特性被指派至特別分類單元262。
在許多情況中，一個別的存取要求可以屬於複數個分類單元。例如，分類單元262可以包含一第一分類單元，其是對於該第一分類單元之種類的複數個第二分類單元之一屬分類單元。在一些情況中，一個別的存取要求可以屬於一種類分類單元262並且因此也屬於該屬分類單元262。圖4例示存取要求AR的不同子集合至不同分類單元262之一指派範例。在例示之範例中，存取要求AR1,4 (其是對於資料儲存裝置DSD1所進行之第四存取要求)被例示如被指派至分類單元1和分類單元2兩者。
如進一步地藉由圖4所展示地，對於各個分類單元262，監視器30得到與屬於特別分類單元之存取要求相關聯的參數值，依據被指派至個別的分類單元之存取要求子集合的參數值而計算且判定一參數值統計，並且依據如上述相對於方法100之方塊112的參數值統計而判定一分類單元臨界值。因而，各個分類單元可以具有對於參數P之一不同分類單元臨界值。
在一實行例中，分類單元262之各者的參數P是相同，其中由於不同存取要求(以及它們之相關聯的參數值)被指派至不同分類單元262，對於該等不同分類單元262之該等參數值以及該分類單元臨界值可以仍然是不同的。在另一實行例中，一些的分類單元262可以具有不同的參數P，其中該分類單元臨界值將是依據用於不同的參數P之數值的一參數值統計。例如，在一實行例中，一分類單元可以採用包含被轉移至一存取要求之資料數量的一參數P，而另一分類單元則可以採用參數P，該參數P包含在一個別的存取要求被接收之一時間週期的期間之存取要求的一頻率。
不同分類單元之判定的分類單元臨界值被儲存作為包含於記憶體52中的一資料庫之部份或被儲存於一遠處安置之資料庫中。如系統20，在一實行例中，當新的存取要求於跨越網路39之不同資料儲存裝置40被進行時，監視器30連續地且重複地更新供用於各個分類單元262之分類單元臨界值。在一實行例中，對於分類單元262之各者的分類單元臨界值TT依據在是為週期時間區間之預定時間區間所進行的存取要求而被判定，其中在各時間區間之一新的判定分類單元臨界值TT取代一舊的分類單元臨界值TT。而在另一個實行例中，當對於不同資料儲存裝置40之新的存取要求被進行且藉由監視器30被接收時，分類單元臨界值TT即時連續地被修訂。在一實行例中，被使用作為用以判定分類單元臨界值TT之一基礎的PVstat 數值是依據於被指派至一特別分類單元262之存取要求的一預定集合，其中當屬於特別分類單元262之新的存取要求被接收並且被添加至係使用以判定該PVstat 數值之預定集合時，較舊的存取要求自該預定集合被移除或被逐出。在一實行例中，屬於特別分類單元262且先前被使用以判定作為分類單元臨界值之基礎的PVstat 數值之較舊的存取要求，以一先進先出為基礎自該預定集合被逐出或被移除。於其他實行例中，在它們之相關聯的參數值PV中之特別存取要求被添加至該預定集合並且依據其他協定自該預定集合被移除。
在一實行例中，監視器30藉由應用一加權至不同參數值PV而判定或計算PVstat 數值(分類單元臨界值自該PVstat 數值而被判定)，以供用於不同存取要求AR。在一實行例中，監視器30依據相關聯於存取要求AR的年齡而不同地加權參數值PV。例如，在一實行例中，當比較至較新之更新近被接收的存取要求之參數值時，較舊的存取要求之參數值被給予一較低的加權。而在另一個實行例中，監視器30可以依據該等存取要求的其他特性(例如，對於該存取要求被指示之特別資料儲存裝置、一存取要求被接收之當天的時間、該存取要求自其所起源之要求者及/或供用於存取要求被進行之程式或應用)，而不同地加權不同存取要求之參數值。
圖5例示一資料儲存裝置監測方法300之範例，方法300可以藉由系統220被實行。依據方法300，對於被監控之一資料儲存裝置40所進行之被觀察的存取要求之一樣本的參數值被比較至分類單元之各者的分類單元臨界值，該分類單元是所觀察之存取要求或樣本要求所屬。依據此比較，一通知或複數個不同通知可以被輸出。
如藉由方塊304所表明地，一監視器，例如，監視器30，接收供用於對於一個別的資料儲存裝置40所進行之被觀察的存取要求之樣本參數的數值。如藉由判定方塊306、308以及310所表明地，監視器30(處理單元50遵循包含於記憶體52中之指令)判定所觀察的存取要求或要求之樣本所屬的分類單元。如藉由判定方塊316、318以及320所表明地，對於存取要求之一樣本所屬的各個分類單元，監視器30比較用於存取要求之樣本的參數值與用於特別分類單元T的分類單元臨界值TT以判定該分類單元臨界值是否已被滿足。在判定方塊316、318以及320中，“=”是指特別分類單元臨界值TT是否已被滿足的一準則。當依據分類單元臨界值它本身之性質，用於存取要求之樣本的參數值是等於該分類單元臨界值、是較大於該分類單元臨界值、及/或是較小於該分類單元臨界值時，分類單元臨界值TT之滿足可能發生。
如藉由圖5中之方塊326、328以及330所表明地，如果用於特別分類單元T之特別分類單元臨界值TT被滿足，則監視器30輸出一對應的通知。在一實行例中，在方塊326、328以及330中輸出之通知N1 、N2 …NN 由於它們之不同相關聯的分類單元T及分類單元臨界值TT而是彼此不同。
圖6分解地例示資料儲存裝置監測系統420，其是資料儲存裝置監測系統20之一實行範例。除了資料儲存裝置監測系統420是特定地被例示作為依據屬於分類單元之存取要求的不同參數而依據或透過含有具有複數個不同臨界值之各分類單元的複數個不同分類單元之使用以監測資料儲存裝置之外，該資料儲存裝置監測系統420是相似於資料儲存裝置監測系統220。系統420的那些其餘構件或元件(其對應至系統20和220之構件或元件)也是相似地被編標號。
如藉由圖6所展示地，對於各個分類單元462，監視器30得到與屬於該特別分類單元的存取要求之各者相關聯的複數個參數值，依據被指派至個別的分類單元之存取要求子集合的參數值而計算以及判定供用於參數(P1 ，P2 )之各者的一參數值統計，並且依據如上所述之相對於方法100的方塊112之參數值統計而判定供用於參數P1 ，P2 之各者的一分類單元臨界值。因而，各個分類單元可以具有用於複數個參數P之複數個不同分類單元臨界值。
在一實行例中，分類單元262之各者的參數P1 是相同及/或分類單元262之各者的參數P2 是相同，其中由於被指派至不同分類單元262之不同存取要求(以及它們之相關聯的參數值)，對於該等不同分類單元262之該等參數值以及該分類單元臨界值可以仍然是不同的。在另一實行例中，分類單元1之參數P1 可以是不同於分類單元2之參數P1 。同樣地，分類單元1之參數P2 可以是不同於分類單元2之參數P2 。例如，在一實行例中，一第一分類單元之參數P1 可以包含被轉移至一存取要求之資料數量而第二分類單元之參數P1 可以包含在一個別的存取要求被接收時之一時間週期的期間之存取要求的一頻率。
對於不同分類單元之不同參數P1 、P2 之所判定的分類單元臨界值被儲存作為包含於記憶體52中之一資料庫的部份或被儲存於一遠處安置之資料庫中。如系統20，在一實行例中，當新的存取要求是對於跨越網路39之不同資料儲存裝置40被進行時，監視器30連續地且重複地更新用於各個分類單元462之分類單元臨界值。在一實行例中，對於分類單元462之各者的分類單元臨界值TT依據在是為週期時間區間之預定時間區間所進行的存取要求被判定，其中在各時間區間之一新的判定分類單元臨界值TT取代一舊的分類單元臨界值TT。而在另一個實行例中，當新的存取要求對於不同資料儲存裝置40被進行並且藉由監視器30被接收時，分類單元臨界值TT即時連續地被修訂。在一實行例中，被使用作為用以判定該分類單元臨界值TT之一基礎的PVstat 數值是依據被指派至一特別分類單元462之存取要求的一預定集合，其中當屬於特別分類單元462之新存取要求被接收時並且被添加至被使用以判定該PVstat 數值之預定集合時，較舊的存取要求自該預定集合被移除或被逐出。在一實行例中，屬於特別分類單元462並且先前被使用以判定作為分類單元臨界值之基礎的PVstat 數值之較舊的存取要求，以一先進先出為基礎自該預定集合被逐出或被移除。於其他實行例中，在它們之相關聯的參數值PV中之特別存取要求可以被添加至該預定集合並且依據其他協定自該預定集合被移除。
在一實行例中，監視器30藉由應用一加權至供用於不同存取要求AR之不同參數值PV而判定或計算對於各參數P之PVstat 數值(用於特別參數的分類單元臨界值是自該PVstat 數值之中被判定)。在一實行例中，監視器30依據相關聯的存取要求AR之年齡而不同地加權參數值PV。例如，在一實行例中，當比較於較新之更新近被接收的存取要求之參數值時，較舊的存取要求之參數值被給予一較低加權。而在另一個實行例中，監視器30可以依據存取要求的其他特性，例如，對於存取要求被指示之特別資料儲存裝置、一存取要求被接收之當天的時間、存取要求所起源之要求者及/或供用於存取要求之進行的程式或應用，而不同地加權不同存取要求之參數值。
圖7例示資料儲存裝置監測方法500之一範例，方法500可以藉由系統420被實行。依據方法500，對於被監控之一資料儲存裝置40所進行之被觀察的存取要求之一樣本的參數值被比較於被觀察的存取要求或樣本之要求所屬的分類單元之各者的複數個分類單元臨界值。該樣本可以包含一個別的存取要求或一存取要求族群。依據此比較，一通知或複數個不同的通知可以被輸出。
如藉由方塊504所表明地，一監視器，例如監視器30，接收用於對於一個別的資料儲存裝置40所進行之被觀察的存取要求之樣本的參數之數值。如藉由判定方塊506、508所表明地，監視器30(處理單元50遵循包含於記憶體52中的指令)判定被觀察的存取要求或要求之樣本是屬於哪個分類單元。如所表明地，藉由判定方塊516、518，對於存取要求之一樣本所屬的各個分類單元，監視器30比較用於存取要求之樣本的參數值P1 與供用於特別分類單元T之參數P1 的分類單元臨界值TT以判定分類單元臨界值TT1,1 (第一下標表示分類單元ID且第二下標表示參數ID)是否已被滿足(方塊516)及/或分類單元臨界值TT2,1 (第一下標表示分類單元ID且第二下標表示參數ID)是否已被滿足(方塊518)。如藉由判定方塊517、519所表明地，對於存取要求之一樣本所屬的各個分類單元，監視器30比較用於存取要求之樣本的參數值P2 與用於特別分類單元T之參數P2 的分類單元臨界值TT以判定分類單元臨界值TT1,2 是否已被滿足(方塊517)及/或是否分類單元臨界值TT2,2 已被滿足(方塊519)。在判定方塊516、517、518以及519中，“=”是指特別分類單元臨界值TT是否已被滿足的一準則。當依據分類單元臨界值它本身之性質，用於存取要求之樣本的參數值是等於該分類單元臨界值、是較大於該分類單元臨界值、及/或是較小於該分類單元臨界值時，分類單元臨界值TT之滿足可能發生。
如藉由方塊526、527、528以及529所表明地，於圖7中，如果用於特別分類單元T之特別參數P的特別分類單元臨界值TT被滿足，則監視器30輸出一對應的通知Nx,y ，其中第一下標x指示分類單元ID並且第二下標y指示參數ID。在一實行例中，在方塊526、527、528以及529中輸出之通知Nx,y ，由於它們之不同的相關聯之分類單元T、不同的參數P以及相關聯的分類單元臨界值而是彼此不同的。
圖8是分類單元之層次或分類法600的範例之圖形，其是供如上所述之任何的系統20、220及420以及如上所述之任何的方法100、300及500所使用。分類法600包含分類單元，分類單元在它們的層次階級中包含：人口分類單元604、社區分類單元608、活動分類單元612、會期分類單元616、工作量分類單元620、應用分類單元624以及處理分類單元628。各個分類單元包含在其之下的那些分類法之任何或所有的特性。人口分類單元604包含對於具有相同或相似儲存裝置之資料儲存裝置40的整體人口所進行之存取要求AR的整體人口。
社區分類單元608包含存取要求AR之人口分類單元604的一子集合。社區分類單元608包含對於在一相似活動或多個相似活動中所參與的人口之裝置所進行的那些存取要求。此等相似活動之範例包括，但是不受限定於，在相同分配時間內之相同或相似資料集合的聚集處理(例如，一CGI形成場、聚集資料分析、聚集計算之估計(基因組研究)、聚集自動化(例如，自動化測試)。此外，一社區也可以包含在會期分類法之間的特性差異，例如，在一地理位置中之一秘密室對另一者、企業財務會計對商業會計線、CAD操作對軟體發展以及其類似者。
活動分類單元612包含社區608之存取要求的一子集合。活動分類單元612包含相似於會期地執行之對於社區分類單元608之存取要求所進行的那些存取要求AR。會期範例包括，但是不受限定於，在一時間週期上之相似工作流程，例如，活動群集藉由終端使用者型式及職業功能(秘書任務對會計任務對工程任務)。
會期分類單元616包含活動分類單元612之存取要求的一子集合。會期分類單元616包含在當工作承載被進行時之一時間範圍或相似的時間週期之期間所進行的活動分類單元612之那些存取要求。例如，對於具有相似或相同儲存裝置特性，具有資料型式、資料集合之大小、該資料之處理或轉換、以及計算時間中之相似性的特性，之資料儲存裝置所進行的存取要求可以藉由監視器30被指派至會期分類單元616。
工作量分類單元620包含會期分類單元616的那些存取要求之一子集合。工作量分類單元620包含實行一特別工作量之會期分類單元612的那些存取要求。工作量可以是由一應用或複數個應用所組成。界定工作量分類單元620之特性範例包括，但是不受限定於，涉及相同資料集合之共同任務或具有異類資料來源之共同資料處理流程，例如，源程式碼之編譯、處理大容量資料、資料轉換。
應用分類單元624包含工作量分類單元620之那些存取要求的一子集合。應用分類單元624包含工作量分類單元620與相同單一應用相關聯的那些存取要求。一應用分類單元624範例包括，但是不受限定於，不同任務集合，例如，一給予的資料集合之一工作流程，例如，存取一資料庫、視覺化資料、文書處理、在一試算表內之數學計算、編輯視頻或音訊。
處理分類單元628包含應用分類單元624的那些存取要求之一子集合。處理程序分類單元628包含與作為應用分類單元624之應用的部份被實行之一特別處理相關聯的應用分類單元624之那些存取要求(個別的工作單元或個別的存取要求，例如，個別的輸入/輸出操作)。處理分類單元628之範例包括，但是不受限定於，在一操作系統內之一特別電腦處理程序的執行。此等處理範例包含根據一服務或守護程式、一可執行檔案、或一裝置驅動器之一處理程序。
雖然本揭示已參考實行範例被說明，熟習本技術之工作人員應明白，本揭示之形式和細節可以改變而不脫離申請專利範圍主題標的之精神和範疇。例如，雖然不同的實行範例可能已被說明如包括提供一個或多個利益之一個或多個特點，其是預期所說明之特點可以在上述之實行範例或其他替代的實行例中彼此互換或替代地彼此組合。因為本揭示之技術是相對地複雜，並不是技術中的所有改變是可預見的。參考實行範例被說明並且在隨後的申請專利範圍中被提出之本揭示是明顯地有意儘可能地廣泛。例如，除非明確地被提及，否則列舉一單一特別的元件之申請專利範圍也包括複數個此等特別元件。在申請專利範圍中之字詞“第一”、“第二”、“第三”以及等等，僅區分不同的元件，並且，除非另有說明，否則將不是特定地與本揭示中之元件的一特別順序或特別計數相關聯。
20‧‧‧監測系統 30‧‧‧監視器 40‧‧‧資料儲存裝置 42‧‧‧要求者 44‧‧‧記憶體控制器 50‧‧‧處理單元(PU) 52‧‧‧記憶體 60‧‧‧人口 62‧‧‧界定分類單元 100‧‧‧監測方法 54‧‧‧存取參數P子集合 104-116‧‧‧步驟方塊 220‧‧‧監測系統 262‧‧‧分類單元 300‧‧‧監測方法 304-330‧‧‧步驟方塊 420‧‧‧監測系統 462‧‧‧分類單元 39‧‧‧網路 500‧‧‧監測方法 504-529‧‧‧步驟方塊 600‧‧‧分類法 604‧‧‧人口分類單元 608‧‧‧社區分類單元 612‧‧‧活動分類單元 616‧‧‧會期分類單元 620‧‧‧工作量分類單元 624‧‧‧應用分類單元 628‧‧‧處理分類單元
圖1是一資料儲存裝置監測系統範例之分解圖。
圖2是一存取要求的一分類法之一分類單元範例的圖形。
圖3是一資料儲存裝置監測方法範例之流程圖。
圖4是另一資料儲存裝置監測系統範例的分解圖。
圖5是另一資料儲存裝置監測方法範例之流程圖。
圖6是另一資料儲存裝置監測系統範例之分解圖。
圖7是另一資料儲存裝置監測方法範例之流程圖。
圖8是一分類單元之分類法範例的圖形。
20‧‧‧監測系統
30‧‧‧監視器
40‧‧‧資料儲存裝置
42‧‧‧要求者
44‧‧‧記憶體控制器
50‧‧‧處理單元(PU)
52‧‧‧記憶體
60‧‧‧人口
62‧‧‧界定分類單元

Claims (15)

  1. 一種用以監測跨越一網路之不同資料儲存裝置的方法，該方法包含下列步驟： 接收對於跨越一網路之不同資料儲存裝置所進行的資料儲存存取要求； 指派該等存取要求之一子集合至存取要求特性之一分類法的一分類單元； 對於該分類單元，依據該等存取要求之該子集合而判定對於一參數之一分類單元臨界值； 比較所觀察之存取要求的一樣本之參數，其被進行於一資料儲存裝置且屬於該分類單元，與該分類單元臨界值；以及 依據該比較而輸出關於該資料儲存裝置之一通知。
  2. 如請求項1之方法，其中該參數包含供用於一時間週期之存取要求的接受之一頻率。
  3. 如請求項1之方法，其中該參數包含根據該等存取要求被轉移的資料之一數量。
  4. 如請求項1之方法，其中自該等不同資料儲存裝置接收該等資料儲存存取要求包含自該等不同資料儲存裝置接收存取要求之一即時網路串流，並且其中用於該分類單元之該分類單元臨界值是依據對於跨越該網路之該等不同資料儲存裝置的該等存取要求之該網路串流的該等存取要求之子集合而自動地週期性地被更新。
  5. 如請求項4之方法，其中該網路串流的該等存取要求之該子集合是基於一先入先出基礎而自動地被更新。
  6. 如請求項4之方法，其中對於被比較至該分類單元臨界值之該儲存裝置之樣本存取要求包含即時地被接收作為一裝置串流之存取要求之一子集合。
  7. 如請求項6之方法，其中該裝置串流之該存取要求之該子集合是基於一先入先出基礎而自動地被更新。
  8. 如請求項1之方法，其中該分類單元是選自由下列者所構成之一分類單元族群：人口、社區、活動、會期、工作量、應用以及處理程序。
  9. 如請求項1之方法，其進一步地包含依據屬於該分類單元之該等存取要求之子集合而判定一第二分類單元臨界值，其中該通知包含響應於該分類單元臨界值被滿足之一第一通知型式以及響應於該第二分類單元臨界值被滿足之一第二通知型式，該第二通知型式是不同於該第一通知型式。
  10. 如請求項1之方法，其中該通知表明該等不同資料儲存裝置之一資料儲存裝置的一預期失效。
  11. 一種資料儲存裝置監測系統，其包含： 一資料庫，其儲存在一網路上對於不同資料儲存裝置所進行的存取要求之特性的一分類法之一分類單元的一存取要求參數之一分類單元臨界值；以及 一資料儲存裝置監視器，其用以進行： 接收對於跨越一網路之不同資料儲存裝置所進行的資料儲存存取要求； 當該等接收之存取要求依據屬於該分類單元之那些所接收的存取要求被接收時，則自動地更新該分類單元臨界值； 比較所觀察之存取要求的一樣本之參數，其被進行於一資料儲存裝置且屬於該分類單元，與該分類單元臨界值；及 依據該比較而輸出關於該資料儲存裝置之一通知。
  12. 如請求項11之監測系統，其中該參數包含供用於一時間週期之存取要求的接受之一頻率。
  13. 如請求項11之監測系統，其中該參數包含根據該等存取要求之一存取要求被轉移的資料之一數量。
  14. 一種非暫態電腦可讀取媒體，其含有指令以監視跨越一網路之不同資料儲存裝置，該等指令用以指示一處理器以進行： 接收對於跨越該網路之不同資料儲存裝置所進行的資料儲存存取要求； 指派該等存取要求之一子集合至存取要求特性之一分類法的一分類單元； 對於該分類單元，依據該等存取要求之該子集合而判定用於一參數之一分類單元臨界值； 當被進行於跨越該網路之該等不同資料儲存裝置之新的存取要求依據屬於該分類單元之新近接收存取要求被接收時，則自動地更新用於該分類單元之該分類單元臨界值； 比較對一資料儲存裝置的受觀測存取要求之一樣本的參數，其屬於該分類單元，與該分類單元臨界值；以及 依據該比較而輸出關於該資料儲存裝置之一通知。
  15. 如請求項14之非暫態電腦可讀取媒體，其中該等分類單元是選自由下列者所構成之一分類單元族群：人口、社區、活動、會期、工作量、應用以及處理程序。
TW105133858A 2015-10-23 2016-10-20 資料儲存裝置監測技術 TWI590052B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2015/057134 WO2017069775A1 (en) 2015-10-23 2015-10-23 Data storage device monitoring

Publications (2)

Publication Number Publication Date
TW201719417A true TW201719417A (zh) 2017-06-01
TWI590052B TWI590052B (zh) 2017-07-01

Family

ID=58557752

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105133858A TWI590052B (zh) 2015-10-23 2016-10-20 資料儲存裝置監測技術

Country Status (5)

Country Link
US (1) US10719421B2 (zh)
EP (1) EP3365787B1 (zh)
CN (1) CN108027760B (zh)
TW (1) TWI590052B (zh)
WO (1) WO2017069775A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110896361B (zh) * 2019-10-29 2020-10-30 北京航空航天大学 一种基于增强现实的信息物理系统可视化及故障定位方法
US11159449B1 (en) * 2020-07-09 2021-10-26 International Business Machines Corporation Dispatching tasks and data using multi-access edge computing
US11605286B1 (en) 2021-10-22 2023-03-14 X Development Llc Alert generation algorithm for tracking devices

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050091369A1 (en) * 2003-10-23 2005-04-28 Jones Michael D. Method and apparatus for monitoring data storage devices
TW200532524A (en) 2005-05-09 2005-10-01 Ting-Cheng Chang Method for constructing investment system
US8499132B1 (en) * 2008-02-12 2013-07-30 Netapp, Inc. Software module for using flash memory as a secondary permanent storage device
US8954654B2 (en) 2008-06-18 2015-02-10 Super Talent Technology, Corp. Virtual memory device (VMD) application/driver with dual-level interception for data-type splitting, meta-page grouping, and diversion of temp files to ramdisks for enhanced flash endurance
US20100061207A1 (en) 2008-09-09 2010-03-11 Seagate Technology Llc Data storage device including self-test features
US8255642B2 (en) * 2009-12-03 2012-08-28 International Business Machines Corporation Automatic detection of stress condition
US8499116B2 (en) * 2010-06-11 2013-07-30 Hewlett-Packard Development Company, L.P. Managing wear on independent storage devices
WO2012116369A2 (en) 2011-02-25 2012-08-30 Fusion-Io, Inc. Apparatus, system, and method for managing contents of a cache
US9146855B2 (en) * 2012-01-09 2015-09-29 Dell Products Lp Systems and methods for tracking and managing non-volatile memory wear
US9037826B1 (en) * 2012-02-29 2015-05-19 Amazon Technologies, Inc. System for optimization of input/output from a storage array
US20140013028A1 (en) * 2012-07-09 2014-01-09 Hamilton Sundstrand Corporation Hardware flash memory wear monitoring
US8832024B2 (en) 2012-10-26 2014-09-09 Netapp, Inc. Simplified copy offload
US20140181430A1 (en) * 2012-12-26 2014-06-26 Unisys Corporation Equalizing wear on storage devices through file system controls
US9153331B2 (en) * 2013-03-13 2015-10-06 Sandisk Technologies Inc. Tracking cell erase counts of non-volatile memory
US9354994B2 (en) * 2014-02-18 2016-05-31 International Business Machines Corporation Preemptive relocation of failing data
US9448876B2 (en) * 2014-03-19 2016-09-20 Sandisk Technologies Llc Fault detection and prediction in storage devices
CN105573660B (zh) * 2014-09-30 2019-05-17 伊姆西公司 用于改善分簇磁盘阵列的性能的方法和装置

Also Published As

Publication number Publication date
TWI590052B (zh) 2017-07-01
EP3365787A4 (en) 2019-06-05
CN108027760B (zh) 2021-03-19
EP3365787B1 (en) 2021-07-21
EP3365787A1 (en) 2018-08-29
CN108027760A (zh) 2018-05-11
US10719421B2 (en) 2020-07-21
US20180253366A1 (en) 2018-09-06
WO2017069775A1 (en) 2017-04-27

Similar Documents

Publication Publication Date Title
Gao et al. Machine learning based workload prediction in cloud computing
US10877683B2 (en) Tiered storage optimization and migration
US8000932B2 (en) System and method for statistical performance monitoring
CN109597685B (zh) 任务分配方法、装置和服务器
US8171060B2 (en) Storage system and method for operating storage system
US20180287925A1 (en) Assessing user activity using dynamic windowed forecasting on historical usage
US9870269B1 (en) Job allocation in a clustered environment
KR101865318B1 (ko) 버스트 모드 제어
US20140095696A1 (en) Evaluating utilization of one or more computer systems
TWI590052B (zh) 資料儲存裝置監測技術
US11556445B2 (en) Mechanism for monitoring and alerts of computer systems applications
JP5387779B2 (ja) 運用管理装置、運用管理方法、及びプログラム
WO2020172852A1 (en) Computing resource scheduling method, scheduler, internet of things system, and computer readable medium
CN108809760A (zh) 数据采样系统中采样周期的控制方法和装置
CN115454322A (zh) 使用经训练的模型的工作负载管理
Dieye et al. On achieving high data availability in heterogeneous cloud storage systems
WO2020206699A1 (en) Predicting virtual machine allocation failures on server node clusters
US20170346889A1 (en) Co-locating application instances
Zeng et al. Argus: A Multi-tenancy NoSQL store with workload-aware resource reservation
CN112685157B (zh) 任务处理方法、装置、计算机设备及存储介质
JP4594877B2 (ja) 計算機リソース割当管理方法および計算機リソース割当管理装置
US10325092B2 (en) Dynamically adjusting a model for a security operations center
Saeedizade et al. I/O Burst Prediction for HPC Clusters using Darshan Logs
US11556451B2 (en) Method for analyzing the resource consumption of a computing infrastructure, alert and sizing
US20240061494A1 (en) Monitoring energy consumption associated with users of a distributed computing system using tracing