TWI741488B - 除錯系統及預警系統 - Google Patents

除錯系統及預警系統 Download PDF

Info

Publication number
TWI741488B
TWI741488B TW109102620A TW109102620A TWI741488B TW I741488 B TWI741488 B TW I741488B TW 109102620 A TW109102620 A TW 109102620A TW 109102620 A TW109102620 A TW 109102620A TW I741488 B TWI741488 B TW I741488B
Authority
TW
Taiwan
Prior art keywords
debugging
communication interface
learning device
learning
error information
Prior art date
Application number
TW109102620A
Other languages
English (en)
Other versions
TW202129495A (zh
Inventor
陳冠禹
Original Assignee
宏正自動科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏正自動科技股份有限公司 filed Critical 宏正自動科技股份有限公司
Priority to TW109102620A priority Critical patent/TWI741488B/zh
Priority to CN202010498637.3A priority patent/CN113157471B/zh
Publication of TW202129495A publication Critical patent/TW202129495A/zh
Application granted granted Critical
Publication of TWI741488B publication Critical patent/TWI741488B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0793Remedial or corrective actions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/079Root cause analysis, i.e. error or fault diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324Display of status information
    • G06F11/325Display of status information by lamps or LED's
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324Display of status information
    • G06F11/327Alarm or error message display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/453Help systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Debugging And Monitoring (AREA)

Abstract

一種除錯系統,包含通訊介面裝置和學習裝置。通訊介面裝置通訊連接受控裝置。通訊介面裝置包含擷取單元。擷取單元擷取受控裝置之操作畫面。於受控裝置發生異常時由操作畫面提取異常錯誤資訊。學習裝置連接通訊介面裝置。學習裝置包含至少一除錯子集。至少一除錯子集中任一者分別包含錯誤模型與對應錯誤模型的自動除錯步驟或除錯說明。學習裝置通過通訊介面裝置接收異常錯誤資訊,且於比對異常錯誤資訊相符於至少一除錯子集各自的錯誤模型時,學習裝置輸出對應的自動除錯步驟或除錯說明至受控裝置。

Description

除錯系統及預警系統
本揭示內容是關於一種除錯系統及一種預警系統,且特別是關於一種自動化除錯系統及預警系統。
一般而言,當機台或電腦等電子設備發生問題時,電子設備將發出告警訊息以通知現場操作人員,接著操作人員能根據告警訊息進行障礙排除。
然而,操作人員有更替時,如輪班制或有新進人員等,往往會有經驗不足或不熟悉電子設備等因素,而有不知如何障礙排除或障礙排除的操作步驟錯誤的問題發生。
因此,有關上述的問題,是本領域的重要課題之一。
本揭示內容的一態樣係關於一種除錯系統,包含通訊介面裝置和學習裝置。通訊介面裝置通訊連接受控裝置與學習裝置。通訊介面裝置包含擷取單元。擷取單元擷取受控裝置之操作畫面。於受控裝置發生異常時由操作畫面提取異常錯 誤資訊。學習裝置包含至少一除錯子集。至少一除錯子集中任一者分別包含錯誤模型與對應錯誤模型的自動除錯步驟或除錯說明。學習裝置通過通訊介面裝置接收異常錯誤資訊,且於比對異常錯誤資訊相符於至少一除錯子集各自的錯誤模型時,學習裝置輸出對應的自動除錯步驟或除錯說明至受控裝置。
本揭示內容的另一態樣係關於一種預警系統,包含通訊介面裝置及學習裝置。通訊介面裝置連接至受控裝置。通訊介面裝置包含擷取單元。擷取單元擷取受控裝置之操作畫面。於受控裝置發生異常時由操作畫面提取異常錯誤資訊。學習裝置連接通訊介面裝置。學習裝置通過通訊介面裝置偵測異常錯誤資訊。學習裝置收集當異常錯誤資訊生成前的受控裝置的一或多個過往操作畫面或受控裝置所執行的一或多個過往操作指令。學習裝置根據收集到的一或多個過往操作畫面或一或多個過往操作指令產生至少一預警模型。學習裝置依據受控裝置的當前操作畫面及當前輸入指令判斷符合至少一預警模型時,學習裝置輸出警告通知。
100a、100b、100c:除錯系統
120:受控裝置
140:通訊介面裝置
142:擷取單元
150:遠端電腦
160:學習裝置
162:儲存單元
180:操控裝置
190:顯示裝置
200:除錯方法
S210、S220、S230、S240、S250、S260、S270、S280、 S290:操作
T1、T2、T3:提示視窗
B1、B2、B3、B4、B5:按鈕
V1、V2:視窗
M1、M2:範圍
MR:影像
500:預警方法
600:預警模型建立方法
S510、S520、S610、S620、S630:操作
第1A圖係根據本揭示內容之部分實施例繪示一種除錯系統的示意圖。
第1B圖係根據本揭示內容之部分實施例繪示另一種除錯系統的示意圖。
第1C圖係根據本揭示內容之其他部分實施例繪示另一種除錯系統的示意圖。
第2圖係根據本揭示內容之部分實施例繪示一種除錯方法的流程圖。
第3圖係根據本揭示內容之部分實施例繪示一種操作畫面示意圖。
第4圖係根據本揭示內容之部分實施例繪示另一種操作畫面示意圖。
第5圖係根據本揭示內容之部分實施例繪示一種預警方法的流程圖。
第6圖係根據本揭示內容之部分實施例繪示一種預警模型建立方法的流程圖。
下文係舉實施例配合所附圖式作詳細說明,以更好地理解本案的態樣,但所提供之實施例並非用以限制本揭露所涵蓋的範圍,而結構操作之描述非用以限制其執行之順序,任何由元件重新組合之結構,所產生具有均等功效的裝置,皆為本揭露所涵蓋的範圍。此外,根據業界的標準及慣常做法,圖式僅以輔助說明為目的,並未依照原尺寸作圖,實際上各種特徵的尺寸可任意地增加或減少以便於說明。下述說明中相同元件將以相同之符號標示來進行說明以便於理解。
在全篇說明書與申請專利範圍所使用之用詞(terms),除有特別註明外,通常具有每個用詞使用在此領 域中、在此揭露之內容中與特殊內容中的平常意義。某些用以描述本揭露之用詞將於下或在此說明書的別處討論,以提供本領域技術人員在有關本揭露之描述上額外的引導。
此外,在本文中所使用的用詞『包含』、『包括』、『具有』、『含有』等等,均為開放性的用語,即意指『包含但不限於』。此外,本文中所使用之『及/或』,包含相關列舉項目中一或多個項目的任意一個以及其所有組合。
於本文中,當一元件被稱為『連接』或『耦接』時,可指『電性連接』或『電性耦接』。『連接』或『耦接』亦可用以表示二或多個元件間相互搭配操作或互動。
此外,雖然本文中使用『第一』、『第二』、…等用語描述不同元件,該用語僅是用以區別以相同技術用語描述的元件或操作。除非上下文清楚指明,否則該用語並非特別指稱或暗示次序或順位,亦非用以限定本發明。
第1A圖係根據本揭示內容之部分實施例繪示一種除錯系統100a的示意圖。如第1A圖所示,除錯系統100a包含受控裝置120、通訊介面裝置140、學習裝置160和操控裝置180。通訊介面裝置140連接受控裝置120、學習裝置160和操控裝置180。通訊介面裝置140包含擷取單元142。學習裝置160包含儲存單元162。於一實施例中,學習裝置160可以是與受控裝置120設置在不同位置(例如不同機房或同一機房的不同區塊)的遠端電腦。
具體而言,通訊介面裝置140可為KVM切換器或iKVM切換器(網路型切換器)。擷取單元142可由通訊介面 裝置140中的處理器,或者能夠用以擷取受控裝置120之操作畫面的硬體或軟體所實現。
受控裝置120可為機台、電腦、生產線上的機具等等,透過VGA端子(Video Graphics Array connector)及/或通用序列匯流排(Universal Serial Bus,USB)連接通訊介面裝置140。其中,受控裝置120也可為各類電子裝置之連接後組合而成,以進一步藉由VGA端子、USB連接至通訊介面裝置140。
操控裝置180可為鍵盤、滑鼠、觸控板、觸控螢幕、機台按鈕等等輸入裝置,透過序列埠(Serial port)及/或通用序列匯流排連接通訊介面裝置140。
學習裝置160可為電腦、平板、手機等等,透過VGA端子、DVI、HDMI、DP(Display Port)等連接介面及/或通用序列匯流排連接通訊介面裝置140。在部分實施例中,學習裝置160透過區域網路(Local Area Network,LAN)或網際網路(Internet)連接通訊介面裝置140。此外,學習裝置160可以位於相當於受控裝置120的近端或遠端,本發明並非為限制。
儲存單元162可包含一或多個記憶體。記憶體可由唯讀記憶體(read only memory,ROM)、快閃記憶體、軟碟、硬碟、光碟、快閃碟、隨身碟、磁帶、可從網路讀取的資料庫,或任何本揭示內容所屬技術領域中具有通常知識者所能想到具相同功能的記錄媒體所實現。
第1B圖係根據本揭示內容之部分實施例繪示另 一種除錯系統100b的示意圖。於第1B圖所示實施例中,與第1A圖的實施例中相似的元件係以相同的元件符號表示,其內容已於先前段落說明者,於此不再贅述。和第1A圖所示實施例相比,在本實施例中,除錯系統100b更包含遠端電腦150。操控裝置180連接遠端電腦150,遠端電腦150連接通訊介面裝置140。具體而言,操控裝置180可透過各種序列埠及/或通用序列匯流排連接遠端電腦150。遠端電腦150可透過區域網路或網際網路連接通訊介面裝置140。
值得注意的是,上述硬體裝置或連線方式僅為方便說明舉例,但本揭示不以此為限。此外,雖然第1B圖中繪示一個受控裝置120、一個遠端電腦150、一個學習裝置160、一個通訊介面裝置140以及一個操控裝置180,但其數量僅為方便說明起見之示例,並非用以限制本揭示內容。也就是說,在其他部分實施例中,除錯系統中通訊介面裝置可連接複數個受控裝置及/或複數個學習裝置。
第1C圖係根據本揭示內容之部分實施例繪示另一種除錯系統100c的示意圖。於第1C圖所示實施例中,與第1A圖的實施例中相似的元件係以相同的元件符號表示,其內容已於先前段落說明者,於此不再贅述。和第1A圖所示實施例相比,在本實施例中,除錯系統100c所包含的操控裝置180連接學習裝置160。具體而言,操控裝置180可透過各種序列埠及/或通用序列匯流排連接學習裝置160。於此實施例中,學習裝置160可以是與受控裝置120設置在不同位置(例如不同機房或同一機房的不同區塊)的遠端電腦。
值得注意的是,上述硬體裝置或連線方式僅為方便說明舉例,但本揭示不以此為限。此外,雖然第1A圖和第1C圖中繪示一個受控裝置120、一個學習裝置160一個通訊介面裝置140以及一個操控裝置180,但其數量僅為方便說明起見之示例,並非用以限制本揭示內容。也就是說,在其他部分實施例中,除錯系統中通訊介面裝置可連接複數個受控裝置及/或複數個學習裝置。
第2圖係根據本揭示內容之部分實施例繪示一種除錯方法200的流程圖。為便於說明起見,除錯系統100a、100b或100c當中各個元件的具體操作將搭配第1A圖、第1B圖或第1C圖所示實施例進行說明,但不以此為限,任何熟習此技藝者,在不脫離本案之精神和範圍內,當可對作各種更動與潤飾。
下列段落將先說明,第2圖應用在第1A圖所示之除錯系統100a的應用範例。首先,於一實施例中,通訊介面裝置140偵測受控裝置120是否發生異常(如操作S210所示)。若受控裝置120沒有發生異常時,則通訊介面裝置140持續偵測受控裝置120是否有發生異常(即重複進行操作S210)。具體而言,當受控裝置120出現錯誤訊息、跳出錯誤視窗或發出警示音等情形時,通訊介面裝置140則判定受控裝置120有發生異常。
當受控裝置120發生異常時,擷取單元142擷取受控裝置120之操作畫面(如操作S220所示)。接著,擷取單元142由操作畫面提取異常錯誤資訊(如操作S230所示)。具體而言,擷取單元142可用以提取操作畫面中的文字及/或圖像作 為異常錯誤資訊。
接著,學習裝置160通過通訊介面裝置140接收異常錯誤資訊(如操作S240所示)。
接著,學習裝置160比對異常錯誤資訊是否相符於至少一除錯子集中各自的錯誤模型(如操作S250所示)。具體而言,學習裝置160包含至少一除錯子集,且除錯子集中任一者分別包含錯誤模型與對應該錯誤模型的自動除錯步驟或除錯說明。於一實施例中,各除錯子集是儲存於儲存單元162中。
於此,當異常錯誤資訊相符於錯誤模型時,學習裝置160輸出對應的自動除錯步驟或除錯說明至受控裝置120(如操作S260所示)。具體而言,在部分實施例中,當異常錯誤資訊相符於錯誤模型時,學習裝置160將直接輸出對應的自動除錯步驟至受控裝置120進行除錯,其中自動除錯步驟可包含一或多個自動除錯指令。自動除錯指令可為一或多個鍵盤按鍵輸入或滑鼠點擊按鈕的順序。如此一來,當除錯系統100a偵測到受控裝置120發生異常時,便能根據異常錯誤資訊和錯誤模型的比對結果,輸出對應的自動除錯指令至受控裝置120,以進行自動障礙排除。
在其他部分實施例中,當異常錯誤資訊相符於錯誤模型時,學習裝置160輸出除錯說明至受控裝置120,其中除錯說明可為包含文字或圖像的提示視窗。進一步詳細而言,當學習裝置160輸出除錯說明至受控裝置120之後,學習裝置160將等待自操控裝置180接收到對應於除錯說明的確認指 令,根據確認指令輸出對應除錯說明的一或多個自動除錯指令至受控裝置120。例如,除錯說明包含自動除錯說明(如第3圖中提示視窗T1所示),自動除錯說明對應一或多個自動除錯指令。當學習裝置160自操控裝置180接收到確認指令(如,點擊第3圖中按鈕B1的操作)時,學習裝置160輸出對應此確認指令的所有自動除錯指令至受控裝置120進行除錯。
又例如,除錯說明包含逐步除錯說明,逐步除錯說明包含複數個除錯提示(如第4圖中提示視窗T2、T3所示)。除錯提示每一者分別對應一或多個自動除錯指令中之一者。而確認指令包含複數個逐步確認指令(如,依序點擊第4圖中按鈕B2、B5的操作)。當學習裝置160自操控裝置180接收到逐步確認指令中之一者時,學習裝置160輸出對應此逐步確認指令的自動除錯指令。
在部分實施例中,除錯提示可包含引導指標(如第4圖所示提示視窗T2、T3)、引導點擊範圍(如第4圖所示範圍M1或M2)、或記憶回放影片(如第4圖所示影像MR)。引導指標、引導點擊範圍或記憶回放影片以子母畫面或以疊加方式顯示於操控裝置180對應的顯示裝置上。例如,在第4圖中所示之視窗V1內播放過往操作畫面,而在視窗V2內顯示當前操作畫面並設置對應當前操作畫面的一些指令執行按鈕B2~B5。
值得注意的是,第3圖和第4圖中所繪示的操作畫面可透過顯示裝置190顯示,並給使用者觀看。其中,顯示裝置190可為各種顯示器、電腦螢幕、平板、手機等等,本發明 並不以此為限。此外,顯示裝置190可根據使用者進行操作的位置不同,或對應於操控裝置180的連接關係,而連接於受控裝置120、通訊介面裝置140,或者學習裝置160。
如此一來,當除錯系統100a偵測到受控裝置120發生異常時,便能根據異常錯誤資訊和錯誤模型的比對結果,輸出對應的自動除錯說明或逐步除錯說明,讓使用者可以透過確認指令選擇除錯系統100a給予的所有自動除錯指令以進行自動障礙排除,或者透過逐步確認指令根據除錯提示決定是否選擇當前除錯系統100a給予的下一步自動除錯指令。換言之,使用者也可以拒絕除錯系統100a給予的自動除錯指令,改為自行透過操控裝置180進行手動障礙排除(具體內容請參考下述操作S270~S290的說明)。
當使用者拒絕除錯系統100a給予的自動除錯指令,或者當異常錯誤資訊不相符於錯誤模型時,使用者得透過操作操控裝置180產生排除異常錯誤資訊之除錯操控輸入訊號,以進一步傳送至受控裝置120(如操作S270所示)。換言之,使用者可透過操作操控裝置180來針對受控裝置120進行手動除錯。
接著,學習裝置160透過通訊介面裝置140接收操控裝置180產生的除錯操控輸入訊號(如操作S280所示)。在部分實施例中,操作S280和操作S270可同時進行。具體而言,使用者透過操控裝置180產生除錯操控輸入訊號,通訊介面裝置140接收這些除錯操控輸入訊號並傳送至受控裝置120和學習裝置160。
接著,學習裝置160根據除錯操控輸入訊號以及異常錯誤資訊自至少一除錯子集中更新或建立新增除錯子集(如操作S290所示)。具體而言,在受控裝置120發生異常之後,通訊介面裝置140開始擷錄排除錯誤過程中操作畫面的影片以及自操控裝置180產生的除錯操控輸入訊號,例如鍵盤輸入數據、滑鼠點擊座標等資料。此外,通訊介面裝置140也記錄了對應於操作畫面影片的這些除錯操控輸入訊號之產生的時間。接著,學習裝置160透過場景轉換演算法(Scene change detection)分析介面轉換並作為分割點,並將每個分割點之間的影像和輸入資料作為一筆訓練資料進行訓練(training),以更新或建立新增除錯子集(即,新的錯誤模型,以及相對於此錯誤模型的自動除錯步驟或除錯說明)。舉例來說,分割點可為操作畫面影片中視窗的切換,或者可為預設的鍵盤快速鍵輸入、滑鼠點擊特定按鈕。
如此一來,當使用者拒絕除錯系統100a給予的自動除錯指令,或者當異常錯誤資訊不相符於錯誤模型時,使用者可透過操控裝置180進行手動障礙排除,且通訊介面裝置140會將此過程中的操作畫面影片和除錯操控輸入訊號記錄並進行訓練,使得學習裝置160能夠進行機器學習,以更新或建立新的錯誤模型及其對應的自動除錯指令。
下列段落將接著說明第2圖應用在第1B圖所示之除錯系統100b的應用範例。當第2圖應用在第1B圖所示之除錯系統100b時,在操作S270中,操控裝置180產生排除異常錯誤資訊之除錯操控輸入訊號,以進一步透過遠端電腦150和通訊 介面裝置140傳送至受控裝置120。換言之,使用者可透過連接於遠端電腦150上的操控裝置180在遠端針對受控裝置120進行手動除錯。於此實施例中,遠端電腦150是經由通訊介面裝置140取得受控裝置120的畫面,因此使用者得以於遠端以操控裝置180對受控裝置120進行操控。
當第2圖應用在第1B圖所示之除錯系統100b時,在操作S280b中,學習裝置160分析操控裝置180產生的除錯操控輸入訊號。如此一來,當使用者拒絕除錯系統100b給予的自動除錯指令,或者當異常錯誤資訊不相符於錯誤模型時,使用者可透過連接於遠端電腦150的操控裝置180進行手動障礙排除,並透過通訊介面裝置140將除錯操控輸入訊號傳送置受控裝置120進行除錯。而學習裝置160能夠透過通訊介面裝置140記錄除錯操控輸入訊號並進行訓練進行機器學習,以更新或建立新的錯誤模型及其對應的自動除錯指令。
下列段落將接著說明第2圖應用在第1C圖所示之除錯系統100c的應用範例。當第2圖應用在第1C圖所示之除錯系統100c時,在操作S270中,操控裝置180產生排除異常錯誤資訊之除錯操控輸入訊號並透過學習裝置160和通訊介面裝置140傳送至受控裝置120。換言之,使用者可透過連接於學習裝置160上的操控裝置180在遠端針對受控裝置120進行手動除錯。
當第2圖應用在第1B圖所示之除錯系統100c時,在操作S280中,學習裝置160分析操控裝置180產生的除錯操控輸入訊號。如此一來,當使用者拒絕除錯系統100c給予的自 動除錯指令,或者當異常錯誤資訊不相符於錯誤模型時,使用者可透過連接於學習裝置160的操控裝置180進行手動障礙排除,使得學習裝置160能夠記錄除錯操控輸入訊號並進行訓練進行機器學習,以更新或建立新的錯誤模型及其對應的自動除錯指令,並透過通訊介面裝置140將除錯操控輸入訊號傳送置受控裝置120進行除錯。
請參考第5圖。第5圖係根據本揭示內容之部分實施例繪示一種預警方法500的流程圖。如第5圖所示,預警方法500包含操作S510以及S520。
首先,在操作S510中,學習裝置160依據受控裝置120的當前操作畫面及當前輸入指令判斷是否符合至少一預警模型。當不符合時,繼續進行操作S510。當符合時,進行操作S520,學習裝置160輸出警告通知。具體而言,警告通知可為包含文字或圖像的警告視窗、機台上閃爍的警示燈,或者發出警示音。
請參考第6圖。第6圖係根據本揭示內容之部分實施例繪示一種預警模型建立方法600的流程圖。如第6圖所示,預警模型建立方法600包含操作S610、S620以及S630。
首先,在操作S610中,擷取單元142擷取受控裝置120之過往操作畫面或過往操作指令。接著,在操作S620中,偵測受控裝置120是否發生異常。操作S620相似於操作S210,在此不再贅述。當受控裝置120沒有發生異常時,繼續進行操作S610與操作S620。當受控裝置120發生異常時,即經操作S620判斷受控裝置120有異常時,進行操作S630,學 習裝置160根據收集到的一或多個過往操作畫面或一或多個過往操作指令產生至少一預警模型。
具體而言,通訊介面裝置140的擷取單元142隨時在記錄受控裝置120的操作畫面及操控裝置180產生的操作指令。當受控裝置120發生異常時,學習裝置160透過透過通訊介面裝置140接收在受控裝置120發生異常前一段期間內的過往操作畫面,及/或此期間內操控裝置180產生的過往操作指令,例如鍵盤輸入數據、滑鼠點擊座標等資料。此外,通訊介面裝置140也記錄了相對於操作畫面這些操作指令所產生的時間。接著,學習裝置160透過場景轉換演算法分析介面轉換並作為分割點,並將每個分割點之間的影像和操作指令作為一筆訓練資料進行訓練,以建立預警模型。舉例來說,分割點可為操作畫面影片中視窗的切換,或者可為預設的鍵盤快速鍵輸入、滑鼠點擊特定按鈕。
在部分實施例中,學習裝置160所包含的儲存單元162用以暫存受控裝置120運行時之操作畫面。當學習裝置160通過通訊介面裝置140偵測異常錯誤資訊時,學習裝置160由儲存單元162所暫存的操作畫面提取異常錯誤資訊生成前的受控裝置120的一或多個過往操作畫面或一或多個過往操作指令。
此外,學習裝置160更用以分析異常錯誤資訊生成前的一或多個過往操作畫面以得到過往錯誤畫面特徵,並在學習裝置160輸出之警告通知時,在警告通知內包含此過往錯誤畫面特徵的提示。又,學習裝置160更用以分析異常錯誤資 訊生成前的一或多個過往操作指令以得到過往錯誤操作指令,並在學習裝置160輸出之警告通知時,在警告通知內包含此過往錯誤操作指令的提示。
如此一來,藉由針對過往出現的異常錯誤訊息前的操作畫面及操作指令進行機器學習,並透過判斷受控裝置120的當前操作畫面及當前輸入指令是否符合預警模型,便能在可能出現異常錯誤資訊之前發出警告通知,以避免反覆產生同樣的異常錯誤資訊。
雖然本文將所公開的方法示出和描述為一系列的步驟或事件,但是應當理解,所示出的這些步驟或事件的順序不應解釋為限制意義。例如,部分步驟可以以不同順序發生和/或與除了本文所示和/或所描述之步驟或事件以外的其他步驟或事件同時發生。另外,實施本文所描述的一個或多個態樣或實施例時,並非所有於此示出的步驟皆為必需。此外,本文中的一個或多個步驟亦可能在一個或多個分離的步驟和/或階段中執行。
需要說明的是,在不衝突的情況下,在本揭示內容各個圖式、實施例及實施例中的特徵與電路可以相互組合。圖式中所繪示的電路僅為示例之用,係簡化以使說明簡潔並便於理解,並非用以限制本案。此外,上述各實施例中的各個裝置、單元及元件可以由各種類型的數位或類比電路實現,亦可分別由不同的積體電路晶片實現,或整合至單一晶片。上述僅為例示,本揭示內容並不以此為限。
綜上所述,本案透過應用上述各個實施例中,藉 由學習裝置160根據通訊介面裝置140所記錄的操作畫面及除錯操控輸入訊號,進行分割、訓練後產生除錯子集,便能透過比對當前的異常錯誤資訊與錯誤模型來輸出相應的自動除錯步驟或除錯說明,達到結合自動和手動障礙排除,並同時進行機器學習。
雖然本揭示內容已以實施方式揭露如上,然其並非用以限定本揭示內容,所屬技術領域具有通常知識者在不脫離本揭示內容之精神和範圍內,當可作各種更動與潤飾,因此本揭示內容之保護範圍當視後附之申請專利範圍所界定者為準。
200:除錯方法
S210、S220、S230、S240、S250、S260、S270、S280、S290:操作

Claims (15)

  1. 一種除錯系統,包含:
    一通訊介面裝置,通訊連接一受控裝置,該通訊介面裝置包含一擷取單元,該擷取單元擷取該受控裝置之一操作畫面,於該受控裝置發生異常時由該操作畫面提取一異常錯誤資訊;以及
    一學習裝置,連接該通訊介面裝置,該學習裝置包含至少一除錯子集,該至少一除錯子集中任一者分別包含一錯誤模型與對應該錯誤模型的一自動除錯步驟或一除錯說明,該學習裝置通過該通訊介面裝置接收該異常錯誤資訊,且於比對該異常錯誤資訊相符於該至少一除錯子集各自的該錯誤模型任一者,該學習裝置輸出相符於該至少一除錯子集所對應的該自動除錯步驟或該除錯說明至該受控裝置。
  2. 如請求項1所述之除錯系統,更包含:
    一操控裝置,連接該通訊介面裝置,該操控裝置產生一操控輸入訊號,該通訊介面裝置傳送該操控輸入訊號至該受控裝置;
    其中,於該異常錯誤資訊與該至少一除錯子集的該錯誤模型不相符時,該操控裝置產生排除該異常錯誤資訊之一除錯操控輸入訊號並傳送至該受控裝置。
  3. 如請求項2所述之除錯系統,其中於該異常錯誤資訊與該至少一除錯子集的該錯誤模型不相符時,該學習裝置透過該通訊介面裝置接收該操控裝置產生的該除錯操 控輸入訊號,該學習裝置透過該通訊介面裝置接收該受控裝置之該異常錯誤資訊,該學習裝置根據該除錯操控輸入訊號以及該異常錯誤資訊自該至少一除錯子集中建立一新增除錯子集。
  4. 如請求項1所述之除錯系統,更包含:
    一操控裝置,連接該學習裝置,該操控裝置產生一操控輸入訊號,並輸出至該學習裝置;
    其中,於該異常錯誤資訊與該至少一除錯子集的該錯誤模型不相符時,該操控裝置產生排除該異常錯誤資訊之一除錯操控輸入訊號並透過該通訊介面裝置傳送至該受控裝置。
  5. 如請求項4所述之除錯系統,其中於該異常錯誤資訊與該至少一除錯子集的該錯誤模型不相符時,該學習裝置分析該操控裝置產生的該除錯操控輸入訊號,並依據該受控裝置之該異常錯誤資訊建立一新增除錯子集。
  6. 如請求項1所述之除錯系統,更包含:
    一遠端電腦,連接該通訊介面裝置;
    一操控裝置,連接該遠端電腦,該操控裝置產生一操控輸入訊號,並經由該遠端電腦輸出至該學習裝置;
    其中,於該異常錯誤資訊與該至少一除錯子集的該錯誤模型不相符時,該操控裝置產生排除該異常錯誤資訊之一除錯操控輸入訊號並透過該通訊介面裝置傳送至該受控裝置。
  7. 如請求項1所述之除錯系統,更包含:
    一操控裝置,與該通訊介面裝置或該學習裝置連接;
    其中,當該學習裝置輸出該除錯說明至該受控裝置,且該學習裝置自該操控裝置接收對應於該除錯說明的一確認指令時,該學習裝置根據該確認指令輸出對應該除錯說明的一或多個自動除錯指令至該受控裝置。
  8. 如請求項7所述之除錯系統,其中該除錯說明包含一自動除錯說明,該自動除錯說明對應該一或多個自動除錯指令,當收到該確認指令時,該學習裝置輸出該一或多個自動除錯指令每一者。
  9. 如請求項7所述之除錯系統,其中該除錯說明包含一逐步除錯說明,該逐步除錯說明包含複數個除錯提示,該些除錯提示每一者分別對應該一或多個自動除錯指令其中一者,該確認指令包含複數個逐步確認指令,當該學習裝置收到該些逐步確認指令其中一者時,該學習裝置輸出對應於收到的該逐步確認指令的該一或多個自動除錯指令其中一者。
  10. 如請求項9所述之除錯系統,其中該些除錯提示包含一引導指標、一引導點擊範圍、或一記憶回放影片,其中該引導指標、該引導點擊範圍或該記憶回放影片以子母畫面或以疊加方式顯示於該操控裝置對應的一顯示裝置上。
  11. 一種預警系統,包含:
    一通訊介面裝置,連接至一受控裝置,該通訊介面裝置包含一擷取單元,該擷取單元擷取該受控裝置之一操作畫面,於該受控裝置發生異常時由該操作畫面提取一異常錯誤資訊;以及
    一學習裝置,連接該通訊介面裝置,該學習裝置通過該通訊介面裝置偵測該異常錯誤資訊,該學習裝置收集當該異常錯誤資訊生成前的該受控裝置的一或多個過往操作畫面或該受控裝置所執行的一或多個過往操作指令;以及
    其中,該學習裝置根據收集到的該一或多個過往操作畫面或該一或多個過往操作指令產生至少一預警模型;
    其中,該學習裝置依據該受控裝置的一當前操作畫面及一當前輸入指令判斷符合該至少一預警模型時,該學習裝置輸出一警告通知。
  12. 如請求項11所述之預警系統,其中該學習裝置包含一儲存單元,該儲存單元暫存該受控裝置運行時之該操作畫面,
    其中當該學習裝置通過該通訊介面裝置偵測該異常錯誤資訊時,該學習裝置由該儲存單元所暫存的該操作畫面提取該異常錯誤資訊生成前的該受控裝置的該一或多個過往操作畫面或該一或多個過往操作指令。
  13. 如請求項11所述之預警系統,其中該學習 裝置分析該異常錯誤資訊生成前的該一或多個過往操作畫面得到一過往錯誤畫面特徵,該學習裝置輸出之該警告通知提示該過往錯誤畫面特徵。
  14. 如請求項11所述之預警系統,其中該學習裝置分析該異常錯誤資訊生成前的該一或多個過往操作指令得到一過往錯誤操作指令,該學習裝置輸出之該警告通知提示該過往錯誤操作指令。
  15. 如請求項11所述之預警系統,其中該學習裝置更包含至少一除錯子集,該至少一除錯子集中任一者分別包含一錯誤模型與對應該錯誤模型的一自動除錯步驟或一除錯說明,該學習裝置通過該通訊介面裝置接收該異常錯誤資訊,且於比對該異常錯誤資訊相符於該至少一除錯子集各自的該錯誤模型時,該學習裝置輸出對應的該自動除錯步驟或該除錯說明至該受控裝置。
TW109102620A 2020-01-22 2020-01-22 除錯系統及預警系統 TWI741488B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW109102620A TWI741488B (zh) 2020-01-22 2020-01-22 除錯系統及預警系統
CN202010498637.3A CN113157471B (zh) 2020-01-22 2020-06-04 除错系统及预警系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW109102620A TWI741488B (zh) 2020-01-22 2020-01-22 除錯系統及預警系統

Publications (2)

Publication Number Publication Date
TW202129495A TW202129495A (zh) 2021-08-01
TWI741488B true TWI741488B (zh) 2021-10-01

Family

ID=76882232

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109102620A TWI741488B (zh) 2020-01-22 2020-01-22 除錯系統及預警系統

Country Status (2)

Country Link
CN (1) CN113157471B (zh)
TW (1) TWI741488B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140003249A1 (en) * 2012-06-30 2014-01-02 Huawei Technologies Co., Ltd. Virtual port monitoring method and apparatus
US20140269347A1 (en) * 2013-03-15 2014-09-18 Ixia Methods, systems, and computer readable media for assisting with the debugging of conditions associated with the processing of test packets by a device under test
US20140321278A1 (en) * 2013-03-15 2014-10-30 Gigamon Inc. Systems and methods for sampling packets in a network flow
US20180293517A1 (en) * 2016-01-27 2018-10-11 Bonsai Al, Inc. Artificial intelligence engine for mixing and enhancing features from one or more trained pre-existing machine-learning models

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW563017B (en) * 2002-06-25 2003-11-21 Mitac Int Corp Device and method for executing single-step interrupt debugging in first stage of computer booting through PCMCIA interface
US7113950B2 (en) * 2002-06-27 2006-09-26 Microsoft Corporation Automated error checking system and method
CN100377097C (zh) * 2002-08-26 2008-03-26 联发科技股份有限公司 除错装置
CN100407163C (zh) * 2004-12-06 2008-07-30 明基电通股份有限公司 具有除错功能的电子器具及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140003249A1 (en) * 2012-06-30 2014-01-02 Huawei Technologies Co., Ltd. Virtual port monitoring method and apparatus
US20140269347A1 (en) * 2013-03-15 2014-09-18 Ixia Methods, systems, and computer readable media for assisting with the debugging of conditions associated with the processing of test packets by a device under test
US20140321278A1 (en) * 2013-03-15 2014-10-30 Gigamon Inc. Systems and methods for sampling packets in a network flow
US20180293517A1 (en) * 2016-01-27 2018-10-11 Bonsai Al, Inc. Artificial intelligence engine for mixing and enhancing features from one or more trained pre-existing machine-learning models

Also Published As

Publication number Publication date
CN113157471B (zh) 2024-05-24
CN113157471A (zh) 2021-07-23
TW202129495A (zh) 2021-08-01

Similar Documents

Publication Publication Date Title
US9161238B2 (en) Mobile device monitoring and testing
CN104081784B (zh) 信息处理装置、信息处理方法和程序
US20120112995A1 (en) Information Processing Apparatus, Information Processing Method, and Computer-Readable Storage Medium
EP3493064A1 (en) A method and system for automated testing of a graphical user interface for customer devices
CN109669831A (zh) 一种测试方法及电子设备
CN107211112A (zh) 图像处理设备、图像处理系统、图像处理方法和程序
US20210375231A1 (en) System including a plurality of display apparatus and control method thereof
TW201228288A (en) Remote management system, kvm switch, and remote managing method
TWI741488B (zh) 除錯系統及預警系統
JP2009116535A (ja) 自動テストシステム及び自動テスト方法並びにプログラム
CN115599375B (zh) 一种基于rpa系统的数据处理方法及设备
CN110058695A (zh) 绘本互动内容生成方法、编辑器、电子设备及存储介质
CN110297992A (zh) 一种单词展示方法、装置、移动终端及存储介质
CN212752277U (zh) 一种智能通信设备检验、检测与培训终端及系统
CN212012863U (zh) 一种多级存储式录像机
CN113316011B (zh) 电子白板系统的控制方法、系统、设备及存储介质
CN112906358B (zh) 信息处理装置、信息处理方法以及记录介质
JP2015179355A (ja) 重畳表示支援装置及び重畳表示支援プログラム
KR102485368B1 (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
US10979777B2 (en) Processing system for performing reverse video content output generation
WO2021154510A1 (en) Annotated decode of oscilloscope signals
US20140049649A1 (en) Portable device and signal converting method thereof
JP2021037117A (ja) 処理システム及びプログラム
CN114945104B (zh) 电视软件概率问题复现方法、装置及电视
US20230136853A1 (en) Method for maintaining equipment by remote operation and assistance and electronic device