TWI533123B

TWI533123B - 自動化測試及結果比對方法及系統

Info

Publication number: TWI533123B
Application number: TW102135885A
Authority: TW
Inventors: 陳飛騰; 陳信宇
Original assignee: 緯創資通股份有限公司
Priority date: 2013-10-03
Filing date: 2013-10-03
Publication date: 2016-05-11
Also published as: US20150100296A1; CN104518924B; US9569325B2; CN104518924A; TW201514686A

Description

自動化測試及結果比對方法及系統

本發明是有關於一種自動化測試方法及系統，且特別是有關於一種遠端伺服器的自動化測試及結果比對方法及系統。

國際商業機器(International Business Machines，IBM)公司提出了一種名為IBM Systems Director(ISD)的系統平台管理工具，此工具可與協力廠商的管理平台整合，從而提供虛擬化、整合式的服務管理。ISD為系統管理人員提供單點控制功能，讓系統管理人員能夠最佳化地運用運算和網路資源，大幅減少作業的成本及複雜性。

ISD更提供了遠端測試的功能，提供系統管理人員藉由網路連結到管理伺服器，並透過管理伺服器控制待測伺服器的基板管理控制器(Baseboard Management Controller，BMC)來測試並找出待測伺服器的問題，進而做快速的維修。

圖1為習知遠端測試系統的示意圖。請參照圖1，遠端測試系統10包括透過網路18彼此連接的待測伺服器12、管理伺服器14及用戶端(client)電腦16。其中，待測伺服器12包括基板管理控制器122以及配置在待測伺服器12內的感測器126。管理伺服器14包括處理器142以及儲存有遠端控制程式146的記憶體144。用戶端電腦16包括處理器162以及儲存有瀏覽程式166的記憶體164。用戶端電腦16並連接螢幕168、鍵盤170及滑鼠172。其中使用者可藉由用戶端電腦16的瀏覽程式166連結管理伺服器14並開啟遠端控制程式146的操作介面。

藉此，使用者即可利用鍵盤170及滑鼠172操作顯示在螢幕168上的操作介面，從而控制管理伺服器14的遠端控制程式146對待測伺服器12上的感測器126逐一進行測試，其中包括對待測伺服器12進行清除事件記錄(clear event log)、觸發事件(trigger event)及收取事件記錄(get event log)等動作。

然而，測試工程師在對遠端伺服器進行一系列的測試時，需要針對每一項感測器事件的測試結果進行比對，以致需耗費許多時間。因此，有必要提供一種自動化測試系統，能夠有效率地控制遠端控制程式執行對遠端伺服器的測試工作，以節省測試工程師的人力成本。

本發明提供一種自動化測試及結果比對方法及系統，藉由自動化控制管理伺服器測試待測伺服器上的感測器，並對測試結果進行比對、截圖、存檔等動作，可有效降低測試成本。

本發明的自動化測試及結果比對方法適於由用戶端電腦控制管理伺服器測試待測伺服器上的多個感測器。所述方法透過網路登入管理伺服器之管理程式的操作介面，之後模擬使用者使用此操作介面測試所述感測器的多個操作動作，而利用鍵盤滑鼠自動化程式來產生對應於所述操作動作的多個鍵盤控制指令及多個滑鼠控制指令。接著，執行所述鍵盤控制指令及滑鼠控制指令傳送至待測伺服器，以操作所述操作介面並透過操作介面控制管理程式測試所述感測器。然後，擷取管理程式測試感測器所獲得的測試參數，並與資料庫中的多筆預設參數進行比對，以獲得測試結果。最後，將測試結果儲存為測試檔案。

在本發明的一實施例中，上述擷取管理程式測試感測器所獲得的測試參數的步驟包括擷取操作介面顯示測試參數的畫面中的多個文字，以獲得所述測試參數。

在本發明的一實施例中，上述擷取的畫面包括管理程式對感測器執行之多個測試事件的事件清單以及執行各個測試事件所獲得的測試參數。

在本發明的一實施例中，上述將測試結果儲存為測試檔案的步驟更包括儲存操作介面顯示測試參數的畫面。

在本發明的一實施例中，在上述擷取管理程式測試感測器所獲得的測試參數，並與資料庫中的預設參數進行比對，以獲得測試結果的步驟之前，所述方法更包括產生整合式管理模組 (Integrated management module，IMM)的感測器組態檔案(configuration file)，並在其中記錄待測伺服器中各個感測器的名稱、編號及偏移量，以及在此感測器組態檔案中建立事件記錄(event log)資料庫及事件嚴重性(Severity)資料庫。其中，事件記錄資料庫記錄多個感測器事件的名稱及對應的事件記錄；事件嚴重性資料庫則記錄所述感測器事件的名稱及對應的事件嚴重性。

在本發明的一實施例中，上述擷取管理程式測試感測器所獲得的測試參數，並與資料庫中的預設參數進行比對，以獲得測試結果的步驟包括讀取事件記錄資料庫，並據以比對測試感測器所獲得的事件名稱，以獲得事件名稱的測試結果，以及讀取事件嚴重性資料庫，並據以比對測試感測器所獲得的事件嚴重性，以獲得事件嚴重性的測試結果。

在本發明的一實施例中，在上述將測試結果儲存於測試檔案的步驟之後，所述方法更重複上述步驟，以測試所述感測器中的其他感測器，獲得各個感測器的測試結果，並將此測試結果儲存為測試檔案。

本發明的自動化測試及結果比對系統包括待測伺服器、管理伺服器及用戶端電腦。其中，待測伺服器包括多個感測器及耦接感測器的基板管理控制器。管理伺服器包括第一網路連結單元、第一儲存單元及第一處理單元，其中第一網路連結單元是用以透過網路連結待測伺服器的基板管理控制器，第一儲存單元是用以儲存管理程式，第一處理單元則耦接第一網路連結單元及第一儲存單元，而用以載入並執行管理程式。用戶端電腦包括第二網路連結單元、第二儲存單元及第二處理單元，其中第二網路連結單元是用以透過網路連結管理伺服器的第一網路連結單元，第二儲存單元是用以儲存多個模組，第二處理單元則耦接第二網路連結單元及第二儲存單元，用以載入並執行儲存在第二儲存單元中的模組。所述模組包括自動化模組、操作模組、比對模組及儲存模組。其中，自動化模組是用以模擬使用者使用管理伺服器之管理程式的操作介面測試待測伺服器上之感測器的多個操作動作，而利用鍵盤滑鼠自動化程式來產生對應於所述操作動作的多個鍵盤控制指令及多個滑鼠控制指令。操作模組是用以透過網路登入操作介面，並執行鍵盤控制指令及滑鼠控制指令，以操作所述操作介面並透過操作介面控制管理程式測試所述感測器。比對模組是用以擷取管理程式測試感測器所獲得的測試參數，並與資料庫中的多筆預設參數進行比對，以獲得測試結果。儲存模組是用以將測試結果儲存為測試檔案。

在本發明的一實施例中，上述的比對模組包括參數擷取模組，其是用以擷取操作介面顯示測試參數的畫面中的多個文字，以獲得測試參數。

在本發明的一實施例中，上述的擷取的畫面包括管理程式對感測器執行之多個測試事件的事件清單以及執行各個測試事件所獲得的測試參數。

在本發明的一實施例中，上述的儲存模組更用以儲存操作介面顯示測試參數的畫面。

在本發明的一實施例中，上述的模組更包括組態檔案產生模組，其是用以產生整合式管理模組的感測器組態檔案，並在其中記錄待測伺服器中各個感測器的名稱、編號及偏移量。

在本發明的一實施例中，上述的感測器組態檔案更包括事件記錄資料庫與事件嚴重性資料庫，其中事件記錄資料庫是用以記錄多個感測器事件的名稱及對應的事件記錄，事件嚴重性資料庫是用以記錄所述感測器事件的名稱及對應的事件嚴重性。

在本發明的一實施例中，上述的比對模組會讀取事件記錄資料庫，並據以比對管理程式測試感測器所獲得的事件名稱，以獲得事件名稱的測試結果。此比對模組也會讀取事件嚴重性記錄資料庫，並據以比對測試感測器所獲得的事件嚴重性，以獲得事件嚴重性的測試結果。

基於上述，本發明的自動化測試方法及系統係模擬使用者對於管理伺服器之操作介面的操作動作，利用鍵盤滑鼠自動化程式產生這些操作動作相對應的鍵盤及滑鼠的控制指令，從而控制管理伺服器自動對待測伺服器上的感測器進行測試。而藉由讀取預先建立的資料庫，本發明可進一步對管理伺服器執行測試的結果進行比對、截圖、存檔等動作，從而達到降低測試成本、提高測試設備使用率等功效。

為讓本發明的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。

12、22‧‧‧待測伺服器

122、224‧‧‧基板管理控制器

126、222‧‧‧感測器

14、24‧‧‧管理伺服器

142、162‧‧‧處理器

144、164‧‧‧記憶體

146‧‧‧遠端控制程式

16‧‧‧用戶端電腦

166‧‧‧瀏覽程式

168‧‧‧螢幕

170‧‧‧鍵盤

172‧‧‧滑鼠

18‧‧‧網路

20‧‧‧自動化測試及結果比對系統

242、262‧‧‧網路連結單元

244、264‧‧‧儲存單元

246、266‧‧‧處理單元

2642‧‧‧自動化模組

2644‧‧‧操作模組

2646‧‧‧比對模組

2648‧‧‧儲存模組

80‧‧‧現行狀態頁面

90‧‧‧事件記錄頁面

100‧‧‧測試結果試算表

102~120‧‧‧測試結果欄位

S302~S310、S402~S420‧‧‧自動化測試及結果比對方法的步驟

圖1為習知遠端測試系統的示意圖。

圖2是依照本發明一實施例所繪示之自動化測試及結果比對系統的方塊圖。

圖3是依照本發明一實施例所繪示之自動化測試及結果比對方法的流程圖。

圖4是依照本發明一實施例所繪示之自動化測試及結果比對方法的流程圖。

圖5~7是依照本發明一實施例所繪示之感測器組態檔案產生方法的範例。

圖8~9是依照本發明一實施例所繪示之操作介面畫面。

圖10是依照本發明一實施例所繪示之測試結果畫面。

本發明藉由模擬使用者對於管理程式之操作介面的操作動作，利用鍵盤滑鼠自動化程式產生對應的鍵盤及滑鼠控制指令，而能夠透過對操作介面的控制，控制管理程式自動對待測伺服器上的感測器執行測試，並自動對管理程式執行測試所獲得的參數進行比對、截圖、存檔等動作。其中，對於管理程式執行測試所獲得的參數，本發明更進一步藉由將各種感測器的名稱、編號、偏移量、事件記錄(event log)、事件嚴重性(event severity)等資料預先建立於資料庫中，並用來與測試參數進行比對，從而自動判別測試結果。藉此，可減少測試工程師手動操作的項目，達到降低測試成本、提高測試設備使用率的功效。

圖2是依照本發明一實施例所繪示之自動化測試及結果比對系統的方塊圖。請參照圖2，本實施例的自動化測試系統20包括透過網路28彼此連接的待測伺服器22、管理伺服器24及用戶端(client)電腦26，這些裝置例如是桌上型電腦、筆記型電腦、平板電腦等電子裝置，其具有基本的網路連線及運算能力，而可實現本實施例所述的自動化測試功能。

待測伺服器22中例如會針對中央處理單元(Central Processing Unit，CPU)、雙線記憶體模組(Dual In-line Memory Module，DIMM)、風扇、電源、驅動器等硬體元件設置多個感測器222。待測伺服器22中還包括基板管理控制器(Baseboard Management Controller，BMC)224，此基板管理控制器224例如是透過智慧平台管理匯流排(Intelligent Platform Management Bus，IPMB)與各個感測器222連接，而測試配置在待測伺服器22中的各個感測器222。

另一方面，管理伺服器24包括網路連結單元242、儲存單元244及處理單元246。其中，網路連結單元242例如是有線網路介面卡或是支援電機電子工程師學會(Institute of Electrical and Electronics Engineers，IEEE)802.11b/g/n等通訊協定的無線網路介面卡，其可提供管理伺服器24透過網路28連結至待測伺服器22的基板管理控制器224。儲存單元244例如是任意型式的固定式或可移動式隨機存取記憶體、唯讀記憶體、快閃記憶體、硬碟或其他類似裝置或這些裝置的組合，而用以記錄可由處理單元246執行的管理程式，此管理程式可經由處理單元246載入並執行，以控制待測伺服器22的基板管理控制器224對各個感測器222進行測試。處理單元246例如是中央處理單元，或是其他可程式化之一般用途或特殊用途的微處理器(Microprocessor)、數位訊號處理器(Digital Signal Processor，DSP)、可程式化控制器、特殊應用積體電路(Application Specific Integrated Circuits，ASIC)、可程式化邏輯裝置(Programmable Logic Device，PLD)或其他類似裝置或這些裝置的組合。處理單元246係耦接至網路連結單元242及儲存單元244，而可存取並執行記錄在儲存單元244中的管理程式，以控制待測伺服器22的基板管理控制器224對各個感測器222進行測試。

用戶端電腦26包括網路連結單元262、儲存單元264及處理單元266。其中，網路連結單元262例如是有線網路介面卡或是支援IEEE 802.11b/g/n等通訊協定的無線網路介面卡，其可提供用戶端電腦26透過網路28連結至管理伺服器24的網路連結單元242。儲存單元264例如是任意型式的固定式或可移動式隨機存取記憶體、唯讀記憶體、快閃記憶體、硬碟或其他類似裝置或這些裝置的組合，而用以記錄可由處理單元266執行的模組，這些模組可經由處理單元266載入以執行自動化測試及結果比對功能。處理單元266例如是中央處理單元，或是其他可程式化之一般用途或特殊用途的微處理器、數位訊號處理器、可程式化控制器、特殊應用積體電路、可程式化邏輯裝置或其他類似裝置或這些裝置的組合。處理單元266係耦接至網路連結單元262及儲存單元264，而可存取並執行記錄在儲存單元264中的模組，以執行自動化測試及結果比對功能。

上述儲存單元264中記錄的模組包括自動化模組2642、操作模組2644、比對模組2646及儲存模組2648，這些模組例如是電腦程式，其可載入處理單元266，而執行自動化測試及結果比對功能。以下即舉實施例說明自動化測試及結果比對系統20執行自動化測試的詳細步驟。

圖3是依照本發明一實施例所繪示之自動化測試及結果比對方法的流程圖。請參照圖3，本實施例的方法適用於圖2的自動化測試及結果比對系統20，以下即搭配自動化測試及結果比對系統20中的各項元件說明本發明之自動化測試及結果比對方法的詳細步驟：首先，由操作模組2644透過網路28登入管理伺服器24之管理程式的操作介面(步驟S302)。其中，操作模組2644例如會執行網頁瀏覽程式(例如Internet Explorer，IE)，而透過網路連結單元262與網路連結單元242所建立的網路連結，登入管理伺服器24之管理程式的操作介面，此操作介面例如是整合式管理模組(Integrated management module，IMM)的網頁，在此不設限。

之後，由自動化模組2642模擬使用者使用操作介面測試待測伺服器22上之感測器222的多個操作動作，而利用鍵盤滑鼠自動化程式來產生對應於所述操作動作的多個鍵盤控制指令及多個滑鼠控制指令(步驟S302)。上述的管理程式例如是安裝在管理伺服器24上的ISD程式，此程式可提供管理伺服器24用以對待測伺服器22上的感測器222執行測試。詳言之，當上述管理程式啟動後，例如會先對待測伺服器22進行清除事件記錄、觸發事件以及取得事件記錄等動作。其中，清除事件記錄是指將BMC事件記錄全部清除；觸發事件是指以實體或IPMI指令的方式產生BMC事件記錄；取得事件記錄是指將BMC事件記錄用系統管理橋接器(System Management Bridge，SMBridge)讀出。上述的感測器事件是針對單一感測器進行測試而言，其中包括記錄感測器222是否通過測試之記錄。

當用戶端電腦26透過網路28登入管理伺服器24的管理程式時，例如會在其螢幕(未繪示)上顯示管理程式的操作介面。此時，自動化模組2642例如會運用AutoIt等鍵盤滑鼠的自動化程式來模擬使用者對於此操作介面的操作動作，將使用者使用操作介面來控制管理程式對感測器222進行測試之過程中會實施的滑鼠移動、滑鼠或鍵盤按鍵輸入或是上述動作的組合轉換成對應的鍵盤及滑鼠控制指令，藉此取代使用者的手動操作。

接著，操作模組2644會執行上述自動化模組2642產生的鍵盤控制指令及滑鼠控制指令，以操作所述操作介面並透過操作介面控制管理程式對待測伺服器22上的感測器222進行測試(步驟S304)。其中，管理伺服器24的管理程式例如會運用智慧平台管理介面(Intelligent Platform Management Interface，IPMI)公用程式向待測伺服器222之基板管理控制器224發送一系列的智慧平台管理介面命令，以控制管理程式對感測器222進行測試。

管理程式在對感測器222進行測試後會獲得至少一項測試參數。此時，比對模組266會擷取管理程式測試感測器222所獲得的測試參數，並與資料庫中的多筆預設參數進行比對，以獲得測試結果(步驟S306)。其中，比對模組266例如是將測試參數中的感測器名稱、編號、偏移量、事件記錄(event log)、事件嚴重性(event severity)與資料庫中與上述測試參數相對應的預設參數進行比對，從而判斷感測器222是否異常。

需說明的是，在一實施例中，比對模組266可直接向管理程式要求並取得測試參數。而在另一實施例中，比對模組266則可擷取管理程式的操作介面中的文字，其中，由於網頁中的文字是使用爪哇(Java)語法編寫，故造成比對模組266無法直接抓取網頁中的測試參數。對此，比對模組266例如會藉由參數擷取模組(未繪示)來擷取此操作介面顯示測試參數之畫面中的文字，再貼到筆記本內以進行後續比對，從而獲得所需之事件名稱、事件嚴重性等測試參數。

最後，儲存模組268會將比對模組266獲得的測試結果儲存為測試檔案(步驟S308)。其中，儲存模組268例如會將感測器事件中的必要文字及對應的測試結果使用試算表儲存，藉此提供測試工程師檢視。

藉由上述方法，本實施例的自動化測試及結果比對系統20即可自動產生並記錄測試結果，不僅可減少測試工程師使用管理程式測試感測器的操作動作，也可減少測試工程師人工比對感測器事件、嚴重性等參數所耗費的時間以及發生錯誤的機率。

需說明的是，在一實施例中，自動化測試及結果比對系統還可針對事件記錄、事件嚴重性等重要參數，在用戶端電腦中預先建立對應的資料庫，以便用於測試參數的比對。此外，用戶端電腦在儲存測試結果時，除了儲存測試參數及比對結果外，還可將管理程式執行感測器測試後之操作介面的畫面一併儲存，以便測試工程師日後檢視感測器測試的細節。以下則再舉一實施例詳細說明。

圖4是依照本發明一實施例所繪示之自動化測試及結果比對方法的流程圖。請參照圖4，本實施例的方法適用於圖2的自動化測試及結果比對系統20，以下即搭配自動化測試及結果比對系統20中的各項元件說明本發明之自動化測試及結果比對方法的詳細步驟：首先，由組態檔案產生模組(未繪示)產生適用於整合式管理模組的感測器組態檔案，並在其中記錄待測伺服器22中各個感測器222的名稱、編號及偏移量(步驟S402)。接著，由組態檔案產生模組在感測器組態檔案中建立一個事件記錄資料庫，並在其中記錄多個感測器事件的名稱及對應的至少一項事件記錄(步驟S404)，以及在感測器組態檔案中建立一個事件嚴重性資料庫，並在其中記錄所述感測器事件的名稱及對應的至少一項事件嚴重性(步驟S406)。

舉例來說，圖5~7是依照本發明一實施例所繪示之感測器組態檔案產生方法的範例。在本實施例中，用戶端電腦會根據使用者的輸入，在整合式管理模組的感測器組態檔案中記錄感測器的名稱DIMM 1、編號0xB0以及偏移量Offset 00、Offset 10、Offset 08(請參照圖5)。接著，用戶端電腦會進一步在感測器組態檔案中建立事件記錄資料庫，並在此事件記錄資料庫中記錄感測器的名稱DIMM 1及對應的至少一項事件記錄(請參照圖6)，例如多重位元錯誤(Multi-Bit Error，MBE)判定、擦除失敗(Scrub failure)判定、單位元錯誤(Single Bit Error，SBE)判定等事件記錄。此外，用戶端電腦還會在感測器組態檔案中建立事件嚴重性資料庫，並在此事件嚴重性資料庫中記錄感測器DIMM 1之事件：MBE判定、擦除失敗判定、SBE判定，以及這些事件對應的嚴重性：危急(Critical)、警告(Warning)、輕微(Minor)等(請參照圖7)。

回到圖4的流程，在感測器組態檔案產生之後，接著即可由自動化模組2642模擬使用者使用管理程式的操作介面測試待測伺服器22上的感測器222的多個操作動作，而利用鍵盤滑鼠自動化程式來產生對應於所述操作動作的多個鍵盤控制指令及多個滑鼠控制指令(步驟S408)，並由操作模組2644執行上述自動化模組2642產生的鍵盤控制指令及滑鼠控制指令，以操作所述操作介面並透過操作介面控制管理程式來測試待測伺服器22上的感測器222(步驟S410)。上述步驟S408~S410的實施方式與前述實施例中的步驟S302~S304相同或相似，故在此不再贅述。

之後，由比對模組2646擷取管理程式測試感測器222所獲得的測試參數(步驟S412)。其中，比對模組2646例如會藉由參數擷取模組(未繪示)擷取操作介面顯示測試參數的畫面中的文字，以獲得事件名稱、事件嚴重性等測試參數。上述由參數擷取模組擷取的畫面包括管理程式對感測器222執行之多個測試事件的事件清單以及執行各個測試事件所獲得的測試參數。

舉例來說，圖8~9是依照本發明一實施例所繪示之操作介面畫面。在本實施例中，用戶端電腦例如會擷取管理程式之操作介面顯示現行狀態(active status)頁面80的畫面(如圖8所示)，其中包括對CPU進行測試所產生之CPU狀態失效事件的詳細測試內容。此外，用戶端電腦還會擷取操作介面顯示事件記錄(event log)頁面90的畫面(如圖9所示)，其中包括針對CPU狀態失效事件所產生的事件記錄。

另一方面，比對模組2646在擷取測試參數之後，例如會讀取事件記錄資料庫，並據以比對管理程式測試感測器222所獲得的事件名稱，以獲得此事件名稱的測試結果(步驟S414)。此外，比對模組2646還會讀取事件嚴重性記錄資料庫，並據以比對測試感測器222所獲得的事件嚴重性，以獲得此事件嚴重性的測試結果(步驟S416)。

最終，儲存模組2648會判斷管理程式是否已完成所有感測器222的測試(步驟S418)。其中，若仍有感測器222未完成測試，則流程將回到步驟S408，繼續進行下一個感測器222的測試。反之，若儲存模組2648判斷所有感測器222均已完成測試，則會將比對模組2646獲得的測試結果儲存為測試檔案，同時也會儲存先前由參數擷取模組所擷取的操作介面顯示測試參數的畫面(步驟S420)，藉以提供給測試工程師檢視。其中，儲存模組268例如會將感測器事件中的必要文字及對應的測試結果使用試算表儲存，藉此提供測試工程師檢視。

舉例來說，圖10是依照本發明一實施例所繪示之測試結果畫面。在本實施例中，用戶端電腦26會整合上述比對模組2646進行事件記錄與事件嚴重性等比對所產生的測試結果，將各個感測器事件中的必要文字及對應的測試結果儲存在測試結果試算表100中，其中包括感測器的名稱102、判定結果104、現行狀態嚴重性106及其是否通過/失敗108、現行狀態事件110及其是否通過/失敗112、事件記錄嚴重性114及其是否通過/失敗116、事件記錄事件118及其是否通過/失敗120等欄位。

藉由上述方法，本實施例的自動化測試及結果比對系統 20即可自動產生及記錄測試結果，並對顯示測試參數之操作介面的畫面進行截圖、存檔等動作，藉此提供測試工程師進行檢視，從而降低測試成本。

綜上所述，本發明之自動化測試及結果比對方法及系統藉由將使用者對於管理程式之操作介面的操作動作自動化，並對測試結果進行比對、截圖、存檔等動作，藉此可減少測試工程師重覆測試的動作，並減少人工比對的錯誤。此外，自動化的過程可減少測試工程師在設備前的時間，且能全天對伺服器進行測試，從而達到降低測試成本、提高測試設備使用率等功效。

雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明的精神和範圍內，當可作些許的更動與潤飾，故本發明的保護範圍當視後附的申請專利範圍所界定者為準。

S302~S310‧‧‧自動化測試及結果比對方法的步驟

Claims

一種自動化測試及結果比對方法，適於由一用戶端電腦控制一管理伺服器測試一待測伺服器上的多個感測器，其中該用戶端電腦、該管理伺服器及該待測伺服器透過網路彼此連接，該方法包括下列步驟：透過該網路登入該管理伺服器之一管理程式的一操作介面；模擬一使用者使用該操作介面測試該待測伺服器上所述感測器之一的多個操作動作，利用一鍵盤滑鼠自動化程式產生對應於所述操作動作的多個鍵盤控制指令及多個滑鼠控制指令；執行所述鍵盤控制指令及所述滑鼠控制指令，以操作該操作介面並透過該操作介面控制該管理程式測試該感測器；擷取該管理程式測試該感測器所獲得的至少一測試參數，並與一資料庫中的多筆預設參數進行比對，以獲得一測試結果；以及儲存該測試結果為一測試檔案。
如申請專利範圍第1項所述的自動化測試及結果比對方法，其中擷取該管理程式測試該感測器所獲得的所述測試參數的步驟包括：擷取該操作介面顯示所述測試參數的一畫面中的多個文字，以獲得所述測試參數。
如申請專利範圍第2項所述的自動化測試及結果比對方法，其中所擷取的該畫面包括該管理程式對該感測器執行之多個測試事件的一事件清單以及執行各所述測試事件所獲得的所述測試參數。
如申請專利範圍第2項所述的自動化測試及結果比對方法，其中儲存該測試結果為該測試檔案的步驟更包括：儲存該操作介面顯示所述測試參數的該畫面。
如申請專利範圍第1項所述的自動化測試及結果比對方法，其中在擷取該管理程式測試該感測器所獲得的所述測試參數，並與該資料庫中的所述預設參數進行比對，以獲得該測試結果的步驟之前，更包括：產生適用於一整合式管理模組(Integrated management module，IMM)的一感測器組態檔案(configuration file)，其中包括記錄該待測伺服器中各所述感測器的名稱、編號及偏移量；建立一事件記錄(event log)資料庫於該感測器組態檔案，該事件記錄資料庫包括記錄多個感測器事件的名稱及對應的至少一事件記錄；以及建立一事件嚴重性(Severity)資料庫於該感測器組態檔案，該事件嚴重性資料庫包括記錄所述感測器事件的名稱及對應的至少一事件嚴重性。
如申請專利範圍第5項所述的自動化測試及結果比對方法，其中擷取該管理程式測試該感測器所獲得的所述測試參數，並與該資料庫中的所述預設參數進行比對，以獲得該測試結果的步驟包括：讀取該事件記錄資料庫，並據以比對測試該感測器所獲得的一事件名稱，以獲得該事件名稱的該測試結果；以及讀取該事件嚴重性資料庫，並據以比對測試該感測器所獲得的一事件嚴重性，以獲得該事件嚴重性的該測試結果。
如申請專利範圍第1項所述的自動化測試及結果比對方法，其中在儲存該測試結果於該測試檔案的步驟之後，更包括：重複上述步驟，以測試所述感測器中的其他感測器，獲得各所述感測器的該測試結果，並儲存該測試結果於該測試檔案。
一種自動化測試及結果比對系統，包括：一待測伺服器，包括：多個感測器；以及一基板管理控制器，耦接所述感測器；一管理伺服器，包括：一第一網路連結單元，透過一網路連結該待測伺服器的該基板管理控制器；一第一儲存單元，儲存一管理程式；以及一第一處理單元，耦接該第一網路連結單元及該第一儲存單元，載入並執行該管理程式；以及一用戶端電腦，包括：一第二網路連結單元，透過該網路連結該管理伺服器的該第一網路連結單元；一第二儲存單元，儲存多個模組；以及一第二處理單元，耦接該第二網路連結單元及該第二儲存單元，載入並執行儲存於該第二儲存單元中的所述模組，所述模組包括：一自動化模組，模擬一使用者使用該管理程式的一操作介面測試該待測伺服器上所述感測器之一的多個操作動作，利用一鍵盤滑鼠自動化程式產生對應於所述操作動作的多個鍵盤控制指令及多個滑鼠控制指令；一操作模組，透過該網路登入該操作介面，並執行所述鍵盤控制指令及所述滑鼠控制指令，以操作該操作介面並透過該操作介面控制該管理程式測試該感測器；一比對模組，擷取該管理程式測試該感測器所獲得的至少一測試參數，並與一資料庫中的多筆預設參數進行比對，以獲得一測試結果；以及一儲存模組，儲存該測試結果為一測試檔案。
如申請專利範圍第8項所述的自動化測試及結果比對系統，其中該比對模組包括：一參數擷取模組，擷取該操作介面顯示所述測試參數的一畫面中的多個文字，以獲得所述測試參數。
如申請專利範圍第9項所述的自動化測試及結果比對系統，其中所擷取的該畫面包括該管理程式對該感測器執行之多個測試事件的一事件清單以及執行各所述測試事件所獲得的所述測試參數。
如申請專利範圍第9項所述的自動化測試及結果比對系統，其中該儲存模組更儲存該操作介面顯示所述測試參數的該畫面。
如申請專利範圍第8項所述的自動化測試及結果比對系統，其中所述模組更包括：一組態檔案產生模組，產生適用於一整合式管理模組的一感測器組態檔案，其中包括記錄該待測伺服器中各所述感測器的名稱、編號及偏移量。
如申請專利範圍第12項所述的自動化測試及結果比對系統，其中所述感測器組態檔案更包括：一事件記錄資料庫，記錄多個感測器事件的名稱及對應的至少一事件記錄；以及一事件嚴重性資料庫，記錄所述感測器事件的名稱及對應的至少一事件嚴重性。
如申請專利範圍第13項所述的自動化測試及結果比對系統，其中該比對模組讀取該事件記錄資料庫，並據以比對該管理程式測試該感測器所獲得的一事件名稱，以獲得該事件名稱的該測試結果；讀取該事件嚴重性記錄資料庫，並據以比對測試該感測器所獲得的一事件嚴重性，以獲得該事件嚴重性的該測試結果。