TWI789907B - 自動分派除錯人員的方法 - Google Patents

自動分派除錯人員的方法 Download PDF

Info

Publication number
TWI789907B
TWI789907B TW110134268A TW110134268A TWI789907B TW I789907 B TWI789907 B TW I789907B TW 110134268 A TW110134268 A TW 110134268A TW 110134268 A TW110134268 A TW 110134268A TW I789907 B TWI789907 B TW I789907B
Authority
TW
Taiwan
Prior art keywords
test failure
test
failure result
debugger
personnel
Prior art date
Application number
TW110134268A
Other languages
English (en)
Other versions
TW202311962A (zh
Inventor
曾騰輝
Original Assignee
神雲科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 神雲科技股份有限公司 filed Critical 神雲科技股份有限公司
Priority to TW110134268A priority Critical patent/TWI789907B/zh
Application granted granted Critical
Publication of TWI789907B publication Critical patent/TWI789907B/zh
Publication of TW202311962A publication Critical patent/TW202311962A/zh

Links

Images

Landscapes

  • Debugging And Monitoring (AREA)
  • Telephone Function (AREA)

Abstract

一種自動分派除錯人員的方法，藉由一分派系統來實施，並包含以下步驟：(A)獲得一待測試專案經多個測試案例測試後的多個測試結果；(B)自該等測試結果篩選出指示測試失敗的至少一目標測試失敗結果，每一目標測試失敗結果包含一測試案例種類及一缺陷描述；及(C)對於每一目標測試失敗結果，根據該目標測試失敗結果利用一用於依據所輸入之測試失敗結果判定出對應之除錯人員的人員決策模型，獲得該目標測試失敗結果所對應之一推薦的除錯人員，藉此達成自動分派除錯人員之目的。

Description

自動分派除錯人員的方法
本發明是有關於一種自動分派除錯人員的方法，特別是指一種可對產品在測試時所發現的問題自動分派對應之除錯人員的自動分派除錯人員的方法。
系統整合與整合測試流程的目的是：(1)整合系統元件，產出一個整合系統，並確保該整合系統與系統架構設計的一致性；(2)確保對系統元件(包含系統元件間的介面)進行測試，以驗證整合系統元件是否符合系統架構設計。
目前系統整合測試人員在進行系統整合測試時，若有偵測出一缺陷(bug)時，通常需要手動進行下列事項：(1)指派一除錯人員去檢查該缺陷；及(2)將該缺陷及所指派的除錯人員加入該缺陷跟蹤系統，以供後續追蹤。
而在指派對應的除錯人員時，現有技術皆是依個人的經驗主觀地決定出負責檢查該缺陷的該除錯人員，此種人工決定方式需花費多餘的人力資源，且過於仰賴指派者的指派經驗，亦過於主觀，實有必要提供一更客觀且節省人力的指派方法。
因此，本發明的目的，即在提供一種較客觀且節省人力的自動分派除錯人員的方法。
於是，本發明自動分派除錯人員的方法，藉由一分派系統來實施，並包含以下步驟：
(A)獲得一待測試專案經多個測試案例測試後的多個測試結果；
(B)自該等測試結果篩選出指示測試失敗的至少一目標測試失敗結果，每一目標測試失敗結果包含一測試案例種類及一缺陷描述；及
(C)對於每一目標測試失敗結果，根據該目標測試失敗結果利用一用於依據所輸入之測試失敗結果判定出對應之除錯人員的人員決策模型，獲得該目標測試失敗結果所對應之一推薦的除錯人員。
本發明的功效在於：藉由該分派系統利用該決策模型，自動獲得該待測試專案之每一目標測試失敗結果所對應之該推薦的除錯人員，以達成自動分派除錯人員之目的，進而節省人力並更客觀地推薦除錯人員。
參閱圖1，本發明自動分派除錯人員的方法的實施例藉由一系統來實施。該系統包含一缺陷跟蹤系統11(Bug tracking system)、一測試案例系統12(Test case system)，以及一經由一通訊網路100與該缺陷跟蹤系統11及該測試案例系統12連接的分派系統13。
該缺陷跟蹤系統11儲存有多個專案之每一者的至少一測試失敗結果及其對應之至少一除錯人員與至少一建檔人員，每一測試失敗結果皆包含一測試案例(test case)種類及一缺陷描述(bug description)，測試案例(test case)種類例如可以為BMC之WEB UI的儀表板、BMC之WEB UI的感測器、BMC之iKVM的進入BIOS設定頁面以及BMC之iKVM的熱鍵功能等。該測試案例系統12儲存有多個測試失敗項目及其對應之多個除錯人員，每一測試失敗項目亦包含一測試案例種類及一缺陷描述，該缺陷跟蹤系統11及該測試案例系統12所儲存的資料皆可持續被擴增。該缺陷跟蹤系統11與該測試案例系統12之實施態樣可為一資料庫伺服器。該分派系統13之實施態樣可為一個人電腦、一筆記型電腦、一伺服器電腦，或一雲端伺服器等。
以下將藉由本發明自動分派除錯人員的方法的實施例來說明該系統中各元件的運作細節。本實施例依序包含一人員決策模型獲得程序，及一分派程序。
參閱圖1與圖2，該自動分派除錯人員的方法的人員決策模型獲得程序說明了如何獲得一人員決策模型，該人員決策模型為一機器學習模型並用於依據所輸入之測試失敗結果判定出對應之除錯人員，並包含下列步驟。
在步驟21中，該分派系統13自該缺陷跟蹤系統11獲得多組訓練資料，每組訓練資料包括一測試失敗結果及其對應之除錯人員，其中，該分派系統13所獲得之每組訓練資料之測試失敗結果所對應的建檔人員皆是一系統整合測試人員。
在步驟22中，該分派系統13根據該等訓練資料，利用一機器學習演算法，建立該人員決策模型。在本實施例中，該機器學習演算法例如可為一類神經網路演算法。
在步驟23中，該分派系統13自該測試案例系統12獲得多組驗證資料，每組驗證資料包括一測試失敗項目及其對應之除錯人員。其中，該分派系統13係自該測試案例系統12獲得該測試案例系統12所儲存的該等測試失敗項目及其對應之該等除錯人員，來作為該等驗證資料。
在步驟24中，該分派系統13根據該等驗證資料，獲得該人員決策模型之一準確率。值得一提的是，對於每一驗證資料，該分派系統13係先將該驗證資料的測試失敗項目利用該人員決策模型判定出推薦的除錯人員，接著比對該人員決策模型判定出的除錯人員與該驗證資料對應的除錯人員是否相符，以獲得該人員決策模型之準確率，根據該人員決策模型之準確率可用於評估該人員決策模型所判定出之除錯人員的正確性。
在步驟25中，該分派系統13判定該人員決策模型之該準確率是否高於一門檻值。當該分派系統13判定出該人員決策模型之該準確率高於該門檻值時，流程進行步驟26；當該分派系統13判定出該人員決策模型之該準確率未高於該門檻值時，流程進行步驟27。
在步驟26中，該分派系統13將準確率高於該門檻值的人員決策模型作為所獲得之人員決策模型。
在步驟27中，該分派系統13修正該人員決策模型，並回到步驟24。
參閱圖1與圖3，該自動分派除錯人員的方法的分派程序說明了如何自動分派除錯人員，並包含下列步驟。
在步驟31中，該分派系統13獲得一待測試專案經多個測試案例測試後的多個測試結果。
在步驟32中，該分派系統13自該等測試結果篩選出指示測試失敗的至少一目標測試失敗結果，每一目標測試失敗結果包含一測試案例種類及一缺陷描述。
在步驟33中，對於每一目標測試失敗結果，該分派系統13根據該目標測試失敗結果利用該人員決策模型，獲得該目標測試失敗結果所對應之一推薦的除錯人員。
在步驟34中，該分派系統13自動將該待測試專案之每一目標測試失敗結果及其對應之推薦的除錯人員儲存至該缺陷跟蹤系統11。
綜上所述，本發明自動分派除錯人員的方法，藉由該分派系統13利用該決策模型，自動獲得該待測試專案之每一目標測試失敗結果所對應之該推薦的除錯人員，以達成自動分派除錯人員之目的，進而節省人力並更客觀地推薦除錯人員，此外，藉由該分派系統13自動將該待測試專案之每一目標測試失敗結果及其對應之推薦的除錯人員儲存至該缺陷跟蹤系統11，可節省過去手動建檔所需耗費的人力，故確實能達成本發明的目的。
惟以上所述者，僅為本發明的實施例而已，當不能以此限定本發明實施的範圍，凡是依本發明申請專利範圍及專利說明書內容所作的簡單的等效變化與修飾，皆仍屬本發明專利涵蓋的範圍內。
11:缺陷跟蹤系統 12:測試案例系統 13:分派系統 100:通訊網路 21~27:步驟 31~34:步驟
本發明的其他的特徵及功效，將於參照圖式的實施方式中清楚地呈現，其中： 圖1是一方塊圖，說明執行本發明自動分派除錯人員的方法之實施例的一系統； 圖2是一流程圖，說明本發明自動分派除錯人員的方法之實施例的一人員決策模型獲得程序；及 圖3是一流程圖，說明本發明自動分派除錯人員的方法之實施例的一分派程序。
31~34:步驟

Claims (3)

  1. 一種自動分派除錯人員的方法，藉由一分派系統來實施，並包含以下步驟：(A)獲得一待測試專案經多個測試案例測試後的多個測試結果；(B)自該等測試結果篩選出指示測試失敗的至少一目標測試失敗結果，每一目標測試失敗結果包含一測試案例種類及一缺陷描述；及(C)對於每一目標測試失敗結果，根據該目標測試失敗結果利用一用於依據所輸入之測試失敗結果判定出對應之除錯人員的人員決策模型，獲得該目標測試失敗結果所對應之一推薦的除錯人員；其中，該分派系統與一缺陷跟蹤系統電連接，該缺陷跟蹤系統儲存有多個專案之每一者的至少一測試失敗結果及其對應之至少一除錯人員，在步驟(C)之前，還包含以下步驟：(D)自該缺陷跟蹤系統獲得多組訓練資料，每組訓練資料包括一測試失敗結果及其對應之除錯人員；及(E)根據該等訓練資料，利用一機器學習演算法，建立該人員決策模型。
  2. 如請求項1所述的自動分派除錯人員的方法，該分派系統還與一測試案例系統電連接，該測試案例系統儲存有多個測試失敗項目及其對應之多個除錯人員，每一測試失敗項目亦包含一測試案例種類及一缺陷描述，在步驟(E)之後， 還包含以下步驟：(F)自該測試案例系統獲得多組驗證資料，每組驗證資料包括一測試失敗項目及其對應之除錯人員；(G)根據該等驗證資料，將每一驗證資料的測試失敗項目利用該人員決策模型判定出推薦的除錯人員，接著比對該人員決策模型判定出的除錯人員與該驗證資料對應的除錯人員是否相符，以獲得該人員決策模型之一準確率；(H)判定該人員決策模型之該準確率是否高於一門檻值；及(I)當判定出該人員決策模型之該準確率未高於該門檻值時，修正該人員決策模型，並重複進行步驟(G)~(H)直到修正後的該人員決策模型之該準確率高於該門檻值。
  3. 如請求項1所述的自動分派除錯人員的方法，該分派系統經由一通訊網路與一缺陷跟蹤系統電連接，該缺陷跟蹤系統儲存有多個專案之每一者的至少一測試失敗結果及其對應之至少一除錯人員，在步驟(C)之後，還包含以下步驟：(J)將該待測試專案之每一目標測試失敗結果及其對應之推薦的除錯人員儲存至該缺陷跟蹤系統。
TW110134268A 2021-09-14 2021-09-14 自動分派除錯人員的方法 TWI789907B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW110134268A TWI789907B (zh) 2021-09-14 2021-09-14 自動分派除錯人員的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW110134268A TWI789907B (zh) 2021-09-14 2021-09-14 自動分派除錯人員的方法

Publications (2)

Publication Number Publication Date
TWI789907B true TWI789907B (zh) 2023-01-11
TW202311962A TW202311962A (zh) 2023-03-16

Family

ID=86670088

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110134268A TWI789907B (zh) 2021-09-14 2021-09-14 自動分派除錯人員的方法

Country Status (1)

Country Link
TW (1) TWI789907B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101976205A (zh) * 2010-05-27 2011-02-16 福州开睿动力通信科技有限公司 基于电子地图技术的对讲手机任务调度管理系统及方法
CN104461842A (zh) * 2013-09-23 2015-03-25 伊姆西公司 基于日志相似性来处理故障的方法和装置
US20170109636A1 (en) * 2011-05-08 2017-04-20 Panaya Ltd. Crowd-Based Model for Identifying Executions of a Business Process
CN107224291A (zh) * 2017-05-27 2017-10-03 西南交通大学 调度员能力测试系统
US20170300862A1 (en) * 2016-04-14 2017-10-19 Linkedln Corporation Machine learning algorithm for classifying companies into industries
TW202115601A (zh) * 2019-09-30 2021-04-16 美商尤帕斯公司 用於機器人流程自動化的文件處理架構

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101976205A (zh) * 2010-05-27 2011-02-16 福州开睿动力通信科技有限公司 基于电子地图技术的对讲手机任务调度管理系统及方法
US20170109636A1 (en) * 2011-05-08 2017-04-20 Panaya Ltd. Crowd-Based Model for Identifying Executions of a Business Process
CN104461842A (zh) * 2013-09-23 2015-03-25 伊姆西公司 基于日志相似性来处理故障的方法和装置
US20170300862A1 (en) * 2016-04-14 2017-10-19 Linkedln Corporation Machine learning algorithm for classifying companies into industries
CN107224291A (zh) * 2017-05-27 2017-10-03 西南交通大学 调度员能力测试系统
TW202115601A (zh) * 2019-09-30 2021-04-16 美商尤帕斯公司 用於機器人流程自動化的文件處理架構

Also Published As

Publication number Publication date
TW202311962A (zh) 2023-03-16

Similar Documents

Publication Publication Date Title
CN105427695B (zh) 编程类考题自动测评方法和系统
CN105589837B (zh) 一种电子文档的自动查错方法
TW202004574A (zh) 人工智慧複檢系統及其方法
CN111752833B (zh) 一种软件质量体系准出方法、装置、服务器及存储介质
CN115952081A (zh) 一种软件测试方法、装置、存储介质及设备
US11520966B2 (en) Automated assisted circuit validation
CN111625454A (zh) 基于测试用例的数据处理方法及相关设备
CN111611154B (zh) 一种回归测试的方法、装置和设备
TWI789907B (zh) 自動分派除錯人員的方法
CN111552641A (zh) 一种判断软件产品质量的方法、装置、设备及存储介质
JP7190246B2 (ja) ソフトウェア不具合予測装置
CN111249743A (zh) 一种美术资源的检查提交方法和装置
CN115860341A (zh) 自动分派除错人员的方法
CN115934559A (zh) 表单智能测试系统的测试方法
CN115185819A (zh) 系统测试方法、装置、设备及计算机可读存储介质
CN104156312A (zh) 一种评估软件可靠性的方法
CN113806194A (zh) 一种基于DevOps的研发效能评估方法
TWI735511B (zh) 代碼提交方法和設備
Chu et al. FAST: a framework for automating statistics-based testing
US10586014B1 (en) Method and system for verification using combined verification data
CN111966665A (zh) 数据迁移测试方法及装置
CN106033391A (zh) 基于FOG数据的修复bug和变更控制的方法及装置
CN111752823A (zh) 一种车载电源应用软件的测试方法、装置及设备
TWI819239B (zh) 產品物質檢查系統及產品物質檢查方法
CN110046067A (zh) 接口测试方法及装置