TWI393897B - 整合測試方法及其系統 - Google Patents

Description

整合測試方法及其系統

本發明與用於整合、管理測試程式的軟體系統有關。

諸如個人電腦、筆記型電腦、手機、個人數位助理…等各種電腦產品在出廠之前，都會進行一系列的功能測試，例如硬碟測試、光碟測試、連接埠測試、CPU的記憶體測試…等等，以確保其所有的功能都能正常運作。然而，這類電腦產品的功能很多，產生這些功能的硬體或組件也會因規格差異問題而無法適用同一測試程式。因此，生產這類電腦產品的廠商，需要準備許多測試程式，才能滿足這類電腦產品的測試需求。

這些測試程式有的是生產這類電腦產品的廠商自行開發的，有的是提供硬體或組件的廠商提供的，也有從市場購買的。這些測試程式各自都是獨立的，不但操作方式有所差異，運作時所需要的測試參數也各不相同，回應測試結果的方式亦有差別，因此，有需要提出一套管理方案或軟體來管理與使用該些測試程式，以減輕負責測試這類電腦產 品的人員的負擔，並提高其工作效率，及確保其測試品質。

在台灣I230857號專利案中，一待測電腦係先根據所選擇之一測試項目，從一伺服器下載完成該測試項目所需用到的所有測試程式與批次檔。然後，該待測電腦逐一安裝及執行該些測試程式，並在每一測試程式執行完成之時，將其所獲得的測試結果傳回該伺服器。

在台灣I250289號專利案中，一電腦生產線之測試工具整合方法，包括將複數個測試項封裝到複數個測試項模組；將複數個測試流程封裝到複數個測試流程模組；設置待測電腦的測試類型；根據該測試類型設置測試項；根據該測試類型設置測試流程；以及根據該測試項及執行流程生成測試程式。經過封裝的測試項及測試流程可以根據測試需求或類型分類，以便進行管理及以後測試過程中的調用。

在台灣I289745號專利案中，一整合管理軟體能用於建立多個TI檔及多個MTF檔。每一TI檔是針對一測試程式而建立的。每一TI檔的內容包括該測試程式的路徑、檔名、格式、內部參數、欲測試次數、錯誤碼門檻值、錯誤訊息代碼、與錯誤訊息內容。每一MTF檔包括一或多個TI檔。該整合管理軟體還能用於根據一MTF檔執行複數個測試程式。

在台灣200708944號專利中，一整合測試軟體具有複數個測試程式分別用以測試不同種類之複數個待測模組。該整合測試軟體中還有一測試設定檔及一控制介面。該測試設定檔中的資訊包括該等待測模組名稱、該等測試程式檔名、測試項目、執行順序、測試執行次數及該等測試程式之路徑、以及點選執行欄。該控制介面係設有可接受不同指令之複數個指令選項。該整合測試軟體可依照該控制介面所接收之指令及該測試設定檔中的資訊，對該等待測模組進行測試，或對該測試設定檔進行瀏覽及編輯等工作。該整合測試軟體還能依該等測試程式之測試結果，產生一測試報告，並將該測試報告顯示於該控制介面上。此外，該整合測試軟體更能根據該測試設定檔中的點選執行欄，辨識欲測試之待測模組，使得只有被點選的待測模組所對應的測試程式才會被執行，未被點選的待測模組所對應的測試程式則不會被執行。

本發明提供一種整合測試方法及實現該方法的系統。

該方法包括建立一待測裝置資料檔、一位置設定檔、及一啟動設定檔，該待測裝置資料檔中儲存有測試一待測裝置所需要的測試程式的執行資訊，該位置設定檔儲存一位置資訊，該位置資訊包括該待測裝置資料檔的路徑；接著，將該位置設定檔中的位置資訊複製到該啟動設定檔；然後執行一測試程序。該測試程序包括讀取該啟動設定檔；根據該啟動設定檔中的位置資訊取得該待測裝置資料檔；讀取該待測裝置資料檔中的執行資訊，並依其所定義的執行方式，執行其相對應的測試程式；以及顯示被執行的測試程式的執行結果。

在本發明中，該測試程序實質上是藉由一整合測試程式予以執行，該整合測試程式是由一啟動程式(批次檔)予以啟動的。藉由該待測裝置資料檔、該位置設定檔、該啟動程式(批次檔)、與該啟動設定檔的支援與配合，該整合測試程式是可以直接用於測試不同的待測裝置。

至於本發明之其它技術特徵及其功能，將揭露於隨後的說明。

第一圖顯示一待測電腦7中有許多個待測裝置8及多個測試程式9。該待測電腦7可能是一桌上型電腦、一筆記型電腦、一手機、一個人數位助理、或是任何能安裝及執行應用程式的其它電腦產品。每一待測裝置8可能包含該待測電腦7中的一個硬體或多個硬體。此處所稱的硬體係指該待測電腦7中的CPU、記憶體、鍵盤、螢幕、光碟機、硬碟、或主機板，也可能是該主機板上的某一電子元件，例如系統晶片、圖形顯示控制器、IDE硬碟控制器、網路控制器、並列埠控制器、序列埠控制器…等等。該些測試程式9有的是生產這類電腦產品的廠商自行開發的，有的是提供前述硬體或電子元件的廠商提供的，也有從市場購買的。無論如何，它們都被儲存在該待測電腦7的硬碟中，當該待測電腦7的CPU接收到執行某一測試程式9的指令時，就會啟動並執行該某一測試程式9。有的待測裝置8只需執行一個測試程式9就能完成測試。有的待測裝置8則可能需要執行兩個或更多的測試程式9才能完成測試。無論如何，當任一測試程式9被該CPU執行完成之後，都會對應產生一個用以表示是否通過的執行結果。

為了有效率地對該待測電腦7進行測試，本發明提供一種新的整合測試系統100，其儲存在該待測電腦7中。在一較佳例子中，該整合測試系統100包括一待測裝置資料檔1、一位置設定檔2、一啟動設定檔3、一啟動程式4、及一整合測試程式5。

該待測裝置資料檔1是針對一個待測裝置8而建立的，其儲存有測試該待測裝置8所需要的測試程式9的執行資訊10。如果該待測裝置8所需要的測試程式9只有一個，則該待測裝置資料檔1中就只有一筆執行資訊10，用來定義該測試程式9的執行方式。如果該待測裝置8所需要的測試程式9有n個，則該待測裝置資料檔1中就會有n筆互不相同的執行資訊10，用來分別定義每一個測試程式9的執行方式，簡言之，該些執行資訊10與該些測試程式9兩者之間係存在著一對一的對應關係。舉例來說，如果某一型號的主機板被規定需要執行五個不同的測試程式9，才算是完成測試，那麼，針對該某一型號的主機板而建立的待測裝置資料檔1中就會有五個執行資訊10分別對應這五個測試程式9。

第二圖顯示該待測裝置資料檔1中的任一筆執行資訊10的一個較佳例子，其包括一啟動參數101、一順序參數102、一多工參數103、一路徑參數104、一結果參數105、以及一測試參數106。在本例當中，由於該待測裝置資料檔1是一個.xls檔案，所以，前述參數實質上分別是該.xls檔案中的一欄位。無論如何，該啟動參數101的值能決定其相對應的測試程式9是否執行。該順序參數102的值能決定其相對應的測試程式9的啟動順序。該多工參數103的值能決定其相對應的測試程式9是否略過其相對應的順序參數102而直接啟動。該路徑參數104的值係為其相對應的測試程式9的路徑。該結果參數105的值能決定其相對應的測試程式9的執行結果的處理方式。該測試參數9係為其相對應的測試程式9在執行過程中所需要的參數。不是所有的測試程式9都需要這種用於測試的參數。

如第一圖所示，該位置設定檔2是針對該待測裝置資料檔1而建立的，其儲存一位置資訊，根據該位置資訊能找到該待測裝置資料檔1。在一例子中，該位置資訊係為該待測裝置資料檔1的路徑。

該啟動設定檔3係用以儲存從該位置設定檔2所複製到的位置資訊。

該啟動程式4係用以執行一啟動程序，如第三圖所示，該啟動程序包括：如步驟40，將該位置設定檔2中的位置資訊複製到該啟動設定檔3中；以及如步驟41，啟動該整合測試程式5。

在本例當中，該啟動程式4係撰寫在一個.bat的批次檔中，它是針對該待測裝置資料檔1而建立的。

該整合測試程式5係一應用程式，它可選用VB、VBA、C#....等程式語言來撰寫，無論如何，該整合測試程式5係用以執行一測試程序及產生一人機介面。請注意，該整合測試程式5是由該啟動程式4所啟動，且在它被啟動之前，該該啟動設定檔3中已經儲存有從該位置設定檔2所複製到之一位置資訊。一旦該整合測試程式5被啟動，即產生如第五圖所示的人機介面，並執行如第四圖所示的測試程序，其包括：如步驟50，讀取該啟動設定檔3；如步驟51，根據該啟動設定檔3中的位置資訊取得該待測裝置資料檔1；如步驟52，讀取該待測裝置資料檔1中的執行資訊10，並依其所定義的執行方式，執行其相對應的測試程式9；及如步驟53，將被執行的測試程式9的執行結果，顯示在該人機介面上。

在步驟52當中，根據該些執行資訊10的路徑參數104的值，可以很快地找到其相對應的測試程式9並予以啟動，然而，並不是無條件地全數啟動，更詳細地說，凡其啟動參數101被設為”false”的執行資訊10所相對應的測試程式9，是不會被啟動的，只有那些啟動參數101被設為”true”的執行資訊10所相對應的測試程式9，才會被啟動。

這些被啟動的測試程式9原則上是依照其相對應的順序參數102的值所訂的順序而依序啟動的，但也有例外的情形，即當它們相對應的的多工參數103的值被設為”true”時，它們是略過其相對應的順序參數102而同時一起啟動的。如此，就能充份運該待測電腦7的多工能力，加快執行完那些啟動參數101被設為”true”的執行資訊10所相對應的測試程式9。

當那些被啟動的測試程式9執行完成之時，其對應的執行結果，例如代表測試通過之一訊息或是代表測試不通過之另一訊息，可以根據其相對應的結果參數105的值，而選擇直接顯示於該人機介面，或是先將它儲存於一個.txt的文字檔之後再顯示於該人機介面。

如第五圖所示，該人機介面具有一工作表61用於顯示多筆記錄，每一記錄係一對一地對應到那 些啟動參數101被設為”true”的執行資訊10及其所對應的測試程式9，進一步言之，每一筆記錄都包括一啟動參數欄610係用以顯示其相對應的啟動參數101的值，一順序參數欄611係用以顯示其相對應的順序參數102的值，一多工參數欄612係用以顯示其相對應的多工參數103的值，一路徑參數欄613係用以顯示其相對應的路徑參數104的值，一測試參數欄614係用以顯示其相對應的測試參數106的值，一結果參數欄615係用以顯示其相對應的結果參數105的值，一處理進度欄616係用以顯示其相對應的測試程式9的執行進度，一執行結果欄617係用以顯示其相對應的測試程式9的執行結果，以及一完成時間欄618係用以顯示其相對應的測試程式9執行完成的時間。

在本例當中，該工作表61中顯示五筆記錄，這表示該待測裝置資料檔1中的執行資訊10至少有五筆，且這五筆的啟動參數101的值都是被設定為”true”，所以它們相對應的測試程式9，即A.exe、B.exe、C.exe、D.exe、及E.exe都被啟動，且它們的執行結果顯示在其相對應的執行結果欄617中。

該人機介面具有一整合測試結果顯示區62，只要該工作表61中有一筆記錄的執行結果欄617是顯示代表測試不通過之訊息，例如「fail」，該整合測試結果顯示區62就會顯示代表測試不通過的訊息，反之，則顯示代表測試通過的訊息。因此，根據該整合測試結果顯示區62中的內容，就可以知道該待測裝置資料檔1所對應的待測裝置8是否通過測試，並且可以從該工作表61中去觀察用於測試該待測裝置8的每一測試程式9的執行結果。

該人機介面中還具有一組編輯工具63，用以新增、修改、刪除該工作表61中的記錄，及將該工作表61中的工作記錄儲存成一個.xls檔案。有些編輯工具63是隱藏的，需要時可以透過按滑鼠右鍵的方式來使用它們。例如在該工作表61的路徑參數欄613與結果參數欄615中按滑鼠右鍵可以開啟相對應的操作表單，以方便該路徑參數欄613與結果參數欄615的填寫。

該人機介面中還具有一單步鈕64及一執行鈕65。當該單步鈕64被按時，可啟動該工作表61中目前被選取的記錄所對應的測試程式9。當該執行鈕65被按時，可啟動該工作表61中全部記錄所對應的測試程式9。

雖然可以直接增、刪、修該待測裝置資料檔1中的執行資訊10，然而，也可以透過該人機介面中的編輯工具63來編輯該待測裝置資料檔1，並將編輯結果儲存起來或另存成一個新的待測裝置資料檔1。

當有新的待測裝置8希望進行測試時，只需針對該測試裝置8建立一待測裝置資料檔1、一位置設定檔2、及一啟動程式4(批次檔)，然後，要求該CPU執行該啟動程式4，就能啟動並執行該整合測試程式5，如此，就能完成該新的待測裝置8的測試。這表示，面對不同的待測裝置8，該整合測試程式5及其啟動設定檔3是完全不需要作修改的，唯一需要作的工作是，分別為每一待測裝置8建立一待測裝置資料檔1、一位置設定檔2、及一啟動程式4(批次檔)，這項工作相對於撰寫或修改應用程式而言是簡單的，如果選擇使用該整合測試程式5來協助編輯該待測裝置資料檔1的話，這項工作會變得更加簡單，即使是一個未具程式撰寫能力的一般工作人員者也能勝任這項工作。

由於該待測電腦7中往往有多個待測裝置8，針對每一待測裝置8都需要建立一個待測裝置資料檔1、一個位置設定檔2、及一個啟動程式4，也就是說，該整合測試系統100應當會有多組分別由一個待測裝置資料檔1、一個位置設定檔2、及一個啟動程式4所構成的模組。儘管第一圖中只例示其中一個模組，但這不代表該待測電腦7中只有這個模組。

如第一圖所示，該待測電腦7還包括一測試卡80，該整合測試系統100還包括一對照表6及多個模組(圖中僅例示其中一個模組)，如前段所述地，每一模組分別是由一個待測裝置資料檔1、一個位置設定檔2、及一個啟動程式4所構成。每一模組中的位置設定檔2中的位置資訊除了該待測裝置資料檔1的路徑之外，還包括一判斷參數。

該測試卡80是插在該待測電腦7的擴充連接插槽，例如PCI插槽。該測試卡80上有一數值設定開關801，其能設定一數值。該對照表6係儲存多個數值及該些模組中的每一待測裝置資料檔1的路徑，該些數值係一對一地對應該些路徑。

在上述步驟51中，根據該啟動設定檔3中的位置資訊取得該待測裝置資料檔1之步驟，係包括如第六圖所示的子步驟：如步驟510，根據該位置設定檔2中的判斷參數判斷是否讀取該測試卡80；如步驟511，當判斷結果為”否”時，根據該啟動設定檔3中的路徑取得位在該路徑上的待測裝置資料檔1；如步驟512，當判斷結果為”是”時，讀取該測試卡80上的數值設定開關801所設定的數值，然後如步驟513，從該對照表6中找出與所讀取到的數值相同之一數值，如步驟514，根據從該對照表6所找到的數值所對應的路徑，取得位在該路徑上的待測裝置資料檔1。

因此，一測試操作者可以經由撥動該測試卡80上的數值設定開關801的撥鈕來設定一數值，該數值實質上是對應到某一待測裝置資料檔1，而此對應關係是被儲存在該對照表6中。這表示，該測試操作者可以經由該測試卡80來指定目前應被讀取的待測裝置資料檔1，這能讓整個測試操作更為簡單。

1．．．待測裝置資料檔

10．．．執行資訊

100．．．整合測試系統

101．．．啟動參數

102．．．順序參數

103．．．多工參數

104．．．路徑參數

105．．．結果參數

106．．．測試參數

2．．．位置設定檔

3．．．啟動設定檔

4．．．啟動程式

5．．．整合測試程式

6．．．對照表

61．．．工作表

610．．．啟動參數欄

611．．．順序參數欄

612．．．多工參數欄

613．．．路徑參數欄

614．．．測試參數欄

615．．．結果參數欄

616．．．處理進度欄

617．．．執行結果欄

618．．．完成時間欄

62．．．整合測試結果顯示區

63．．．編輯工具

64．．．單步鈕

65．．．執行鈕

7．．．待測電腦

8．．．待測裝置

80．．．測試卡

801．．．數值設定開關

9．．．測試程式

第一圖顯示本發明之整合測試系統安裝於一待測電腦中的情形。

第二圖顯示本發明之執行資訊的組成。

第三圖顯示本發明之啟動程序的流程。

第四圖顯示本發明之測試程序的流程。

第五圖顯示本發明之人機介面。

第六圖顯示本發明之取得一待測裝置資料檔的流程。

1‧‧‧待測裝置資料檔

10‧‧‧執行資訊

100‧‧‧整合測試系統

2‧‧‧位置設定檔

3‧‧‧啟動設定檔

4‧‧‧啟動程式

5‧‧‧整合測試程式

6‧‧‧對照表

7‧‧‧待測電腦

8‧‧‧待測裝置

80‧‧‧測試卡

801‧‧‧數值設定開關

9‧‧‧測試程式

Claims (6)

1. 一種整合測試方法，包括：建立一待測裝置資料檔，其儲存有測試一待測裝置所需要的測試程式的執行資訊；建立一位置設定檔，其儲存一位置資訊，根據該位置資訊能找到該待測裝置資料檔；建立一啟動設定檔，其儲存從該位置設定檔所複製到的位置資訊；將該位置設定檔中的位置資訊複製到該啟動設定檔；及執行一測試程序，該測試程序包括：讀取該啟動設定檔；根據該啟動設定檔取得該待測裝置資料檔；讀取該待測裝置資料檔中的執行資訊，並依其所定義的執行方式，執行其相對應的測試程式；及顯示被執行的測試程式的執行結果。
2. 如申請專利範圍第1項所述的方法，還包括：提供一測試卡，該測試卡上有能用於設定一數值之一數值設定開關；及建立一對照表，該對照表中係以一對一的方式儲存至少一數值及至少一待測裝置資料檔的路徑；其中，該位置資訊包括該待測裝置資料檔的路徑及 一判斷參數，且根據該啟動設定檔中的位置資訊而取得該待測裝置資料檔之步驟係包括以下的子步驟：根據該位置設定檔中的判斷參數判斷是否讀取該測試卡；當判斷結果為”否”時，根據該啟動設定檔中的路徑，取得位在該路徑上的待測裝置資料檔；當判斷結果為”是”時，讀取該測試卡上的數值設定開關所設定的數值，接著從該對照表中找出與所讀取到的數值相同之一數值，最後根據從該對照表所找到的數值所對應的路徑，取得位在該路徑上的待測裝置資料檔。
3. 如申請專利範圍第1項所述的方法，任一執行資訊均包括一啟動參數、一順序參數、一多工參數、一路徑參數、及一結果參數，該啟動參數的值能決定其相對應的測試程式否執行，該順序參數的值能決定其相對應的測試程式的啟動順序，該多工參數的值能決定其相對應的測試程式是否略過其相對應的順序參數而直接啟動，該路徑參數的值係為其相對應的測試程式的路徑，以及該結果參數的值能決定其相對應的測試程式的執行結果的處理方式。
4. 一種整合測試系統，包括：一待測裝置資料檔，其儲存有測試一待測裝置所需 要的測試程式的執行資訊；一位置設定檔，其儲存一位置資訊，根據該位置資訊能找到該待測裝置資料檔；一啟動設定檔；一整合測試程式；以及一啟動程式，其用以執行一啟動程序，該啟動程序包括將該位置設定檔中的位置資訊複製到該啟動設定檔中，並於隨後啟動該整合測試程式；其中，該整合測試程式係用以執行一測試程序及產生一人機介面，該測試程序包括：讀取該啟動設定檔；根據該啟動設定檔取得該待測裝置資料檔；讀取該待測裝置資料檔中的執行資訊，並依其所定義的執行方式，執行其相對應的測試程式；及將被執行的測試程式的執行結果，顯示在該人機介面上。
5. 如申請專利範圍第4項所述的整合測試系統，包括：一對照表，其以一對一的方式儲存至少一數值及至少一待測裝置資料檔的路徑；其中，該位置資訊包括該待測裝置資料檔的路徑及一判斷參數，且根據該啟動設定檔中的位置資訊而取得 該待測裝置資料檔之步驟係包括以下的子步驟：根據該位置設定檔中的判斷參數判斷是否讀取一測試卡；當判斷結果為”否”時，根據該啟動設定檔中的路徑，取得位在該路徑上的待測裝置資料檔；當判斷結果為”是”時，讀取該測試卡上的一數值設定開關所設定的數值，接著從該對照表中找出與所讀取到的數值相同之一數值，最後根據從該對照表所找到的數值所對應的路徑，取得位在該路徑上的待測裝置資料檔。
6. 如申請專利範圍第4項所述的整合測試系統，任一執行資訊均包括一啟動參數、一順序參數、一多工參數、一路徑參數、及一結果參數，該啟動參數的值能決定其相對應的測試程式否執行，該順序參數的值能決定其相對應的測試程式的啟動順序，該多工參數的值能決定其相對應的測試程式是否略過其相對應的順序參數而直接啟動，該路徑參數的值係為其相對應的測試程式的路徑，以及該結果參數的值能決定其相對應的測試程式的執行結果的處理方式。