TWI734142B - 用於智慧型工業輔助的方法、系統、及電腦程式產品 - Google Patents

用於智慧型工業輔助的方法、系統、及電腦程式產品 Download PDF

Info

Publication number
TWI734142B
TWI734142B TW108125255A TW108125255A TWI734142B TW I734142 B TWI734142 B TW I734142B TW 108125255 A TW108125255 A TW 108125255A TW 108125255 A TW108125255 A TW 108125255A TW I734142 B TWI734142 B TW I734142B
Authority
TW
Taiwan
Prior art keywords
industrial
machine
user
data
dialog
Prior art date
Application number
TW108125255A
Other languages
English (en)
Other versions
TW202006511A (zh
Inventor
羅納德D 巴格利二世
托馬斯約翰 庫奈爾
凱爾大衛 施泰因福特
Original Assignee
美商艾提史畢克斯有限責任公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商艾提史畢克斯有限責任公司 filed Critical 美商艾提史畢克斯有限責任公司
Publication of TW202006511A publication Critical patent/TW202006511A/zh
Application granted granted Critical
Publication of TWI734142B publication Critical patent/TWI734142B/zh

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/04Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • G05B19/0423Input/output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/23Pc programming
    • G05B2219/23386Voice, vocal command or message
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/80Management or planning

Abstract

本案提供一種使用智慧型工業輔助的方法。該方法可以包括以下步驟:接收包含至少一個對話模板的封包資料。可以從使用者接收自然語言輸入。可以將自然語言輸入的至少一部分映射到至少一個對話模板的第一對話模板。可以依據第一對話模板來確定至少一個命令。可以傳送與至少一個命令相關聯的命令資料。亦揭示一種系統及電腦程式產品。

Description

用於智慧型工業輔助的方法、系統、及電腦程式產品
本申請案主張於2018年7月17日提交的美國臨時專利申請案第62/699,336號與2019年2月8日提交的美國臨時專利申請案第62/803,018號的優先權權益,其揭示內容藉由引用整體併入本文。
所揭示之標的一般係關於用於智慧型輔助的方法、系統、及產品,而在一些特定實施例中,係關於用於智慧型工業輔助的方法、系統、及電腦程式產品。
某些機器的使用者(例如,工業機器及/或類似者的操作者)可以經訓練以使用這種機器。舉例而言,每一機器可以經由與機器整合的物理介面(例如,鍵盤、鍵板、及/或類似者)而可以使用(例如,可控制及/或類似者)。這樣的介面可以依據機器的類型(例如,依據與這種機器相關聯的製造商、第三方控制器/介面提供商、型號、及/或類似者)而變化。
然而,使用這種介面的訓練可能很耗時。此外,可能需要手動嘗試(例如,多次擊鍵、點擊、及/或類似者)、時間、及/或類似者而經由這樣的介面來使用(例如,控制及/或類似者)這樣的機器。此外,若並未在其他機器(例如,廠區的單獨的工業機器、新取得的工業機器、經升級的工業機器、及/或類似者)的介面上進行單獨學習(例如,進行訓練及/或類似者),則使用者(例如,機器操作者及/或類似者)可能無法控制這些其他機器。即使使用者確實知道如何使用多台機器,亦可能需要在機器之間移動的手動嘗試與時間,及/或這樣的使用者可能無法同時監測多個單獨的機器。此外,若使用者的手被佔用(例如,攜帶物品、書寫筆記、在廠區內輔助另一人、及/或類似者),則這樣的使用者可能無法適當地操縱機器的介面。此外,若這樣的介面僅包括狀態或其他資訊的視覺指示(例如,顯示螢幕,指示燈、及/或類似者),則使用者在看向其他地方時(例如,查看廠區內的任何其他地方的任何其他東西)可能無法充分地接收這種狀態或其他資訊的指示。
因此,本揭示的標的之目的係為提供用於智慧型工業輔助的方法、系統、及電腦程式產品。
根據非限制性實施例,提供一種使用智慧型工業輔助的方法。在一些非限制性實施例中,使用智慧型工業輔助的方法可以包括藉由智慧型工業輔助接收封包資料的步驟。封包資料可以包括至少一個對話模板。智慧型工業輔助可以從使用者接收自然語言輸入。智慧型工業輔助可以將自然語言輸入的至少一部分映射到對話模板的第一對話模板。智慧型工業輔助可以依據第一對話模板來確定至少一個命令。智慧型工業輔助可以傳送與命令相關聯的命令資料。
在一些非限制性實施例中,智慧型工業輔助可以回應於命令資料而接收回應資料。附加或可替代地,智慧型工業輔助可以依據回應資料而向使用者傳送回應。在一些非限制性實施例中,使用者裝置可以顯示對話視窗。附加或可替代地,對話視窗可以包括自然語言輸入的文本與回應的文本。
在一些非限制性實施例中,封包資料可以包括至少一個工業機器介面,至少一個工業機器介面包括用於第一工業機器的第一工業機器介面。附加或可替代地,第一對話模板可以與至少一個可執行的工業機器操作相關聯。附加或可替代地,命令資料可以與至少一個可執行的工業機器操作相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助經由第一工業機器介面將命令資料發送到第一工業機器。
在一些非限制性實施例中,封包資料可以包括至少一個資料庫介面,至少一個資料庫介面包括用於第一資料庫的第一資料庫介面。附加或可替代地,第一對話模板可以與可檢索資料相關聯。附加或可替代地,命令資料可以與可檢索資料相關聯。附加或可替代地,傳送命令資料可以包括藉由智慧型工業輔助經由第一資料庫介面將命令資料發送到第一資料庫。
在一些非限制性實施例中,至少一個對話模板可以包括複數個對話模板。附加或可替代地,智慧型工業輔助可以依據第一自然語言輸入從複數個對話模板中選擇第一對話模板。
在一些非限制性實施例中,智慧型工業輔助可以確定自然語言輸入不足以映射到第一對話模板的一部分。附加或可替代地,智慧型工業輔助可以向使用者傳送請求附加輸入的提示。附加或可替代地,智慧型工業輔助可以從使用者接收第二自然語言輸入。附加或可替代地,智慧型工業輔助可以將第二自然語言輸入的至少一部分映射到第一對話模板的該部分。
在一些非限制性實施例中,智慧型工業輔助可以依據第一對話模板向使用者傳送請求確認至少一個命令的提示。附加或可替代地,智慧型工業輔助可以從使用者接收第二自然語言輸入。附加或可替代地,智慧型工業輔助可以依據第二自然語言輸入來確定使用者已經確認至少一個命令。
在一些非限制性實施例中,封包資料可以包括媒體項目、表格清單、報告模板、機器介面、資料庫介面、其組合、及/或類似者中之至少一者。在一些非限制性實施例中,媒體項目可以包括使用者手冊、視訊記錄、音訊記錄、其組合、及/或類似者中之至少一者。在一些非限制性實施例中,使用者手冊可以包括複數個媒體標記。附加或可替代地,第一對話模板可以與複數個媒體標記中之至少一個媒體標記相關聯。附加或可替代地,命令資料可以與複數個媒體標記中之至少一個媒體標記相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助將命令資料發送到使用者裝置,以顯示使用者手冊的至少一個媒體標記。
在一些非限制性實施例中,封包資料可以包括表格清單。附加或可替代地,第一對話模板可以與表格清單的至少一個欄位相關聯。附加或可替代地,命令資料可以與表格清單的至少一個欄位相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助將命令資料發送到使用者裝置,以顯示表格清單的至少一個欄位。
在一些非限制性實施例中,封包資料可以包括第一工業機器的第一工業機器介面。附加或可替代地,第一工業機器介面可以包括與第一機器的動態連結函式庫(DLL)相關聯的應用程式編程介面(API)。
在一些非限制性實施例中,封包資料可以包括第一報告模板。附加或可替代地,第一報告模板可以包括歷史欄位、過濾欄位、統計欄位、計算欄位、警告欄位、警報欄位、機器狀態欄位、其組合、及/或類似者中之至少一者。
根據非限制性實施例,提供一種使用智慧型工業輔助的系統。在一些非限制性實施例中,使用智慧型工業輔助的系統可以包括至少一個處理器與至少一個非暫態電腦可讀取媒體,至少一個非暫態電腦可讀取媒體可以包括用於經由智慧型工業輔助的決策引擎使至少一個處理器接收包括至少一個對話模板的封包資料的指令。智慧型工業輔助的對話管理器可以從使用者接收自然語言輸入。智慧型工業輔助的決策引擎可以將自然語言輸入的至少一部分映射到對話模板的第一對話模板。智慧型工業輔助的決策引擎可以依據第一對話模板來確定至少一個命令。智慧型工業輔助的決策引擎可以傳送與至少一個命令相關聯的命令資料。
在一些非限制性實施例中,智慧型工業輔助(例如,其決策引擎)可以回應於命令資料而接收回應資料。附加或可替代地,智慧型工業輔助(例如,其對話管理器、其決策引擎、及/或類似者)可以依據回應資料而向使用者傳送回應。在一些非限制性實施例中,使用者裝置可以顯示對話視窗。附加或可替代地,對話視窗可以包括自然語言輸入的文本與回應的文本。
在一些非限制性實施例中,封包資料可以包括至少一個工業機器介面,至少一個工業機器介面包括用於第一工業機器的第一工業機器介面。附加或可替代地,第一對話模板可以與至少一個可執行的工業機器操作相關聯。附加或可替代地,命令資料可以與至少一個可執行的工業機器操作相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助(例如,其決策引擎)經由第一工業機器介面將命令資料發送到第一工業機器。
在一些非限制性實施例中,封包資料可以包括至少一個資料庫介面,至少一個資料庫介面包括用於第一資料庫的第一資料庫介面。附加或可替代地,第一對話模板可以與可檢索資料相關聯。附加或可替代地,命令資料可以與可檢索資料相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助(例如,其決策引擎)經由第一資料庫介面將命令資料發送到第一資料庫。
在一些非限制性實施例中,至少一個對話模板可以包括複數個對話模板。附加或可替代地,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以依據第一自然語言輸入從複數個對話模板中選擇第一對話模板。
在一些非限制性實施例中,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以確定自然語言輸入不足以映射到第一對話模板的一部分。附加或可替代地,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以向使用者傳送請求附加輸入的提示。附加或可替代地,智慧型工業輔助(例如,其對話管理器)可以從使用者接收第二自然語言輸入。附加或可替代地,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以將第二自然語言輸入的至少一部分映射到第一對話模板的該部分。
在一些非限制性實施例中,智慧型工業輔助(例如,其對話管理器)可以依據第一對話模板向使用者傳送請求確認至少一個命令的提示。附加或可替代地,智慧型工業輔助(例如,其對話管理器)可以從使用者接收第二自然語言輸入。附加或可替代地,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以依據第二自然語言輸入來確定使用者已經確認至少一個命令。
在一些非限制性實施例中,封包資料可以包括媒體項目、表格清單、報告模板、機器介面、資料庫介面、其組合、及/或類似者中之至少一者。在一些非限制性實施例中,媒體項目可以包括使用者手冊、視訊記錄、音訊記錄、其組合、及/或類似者中之至少一者。在一些非限制性實施例中,使用者手冊可以包括複數個媒體標記。附加或可替代地,第一對話模板可以與複數個媒體標記中之至少一個媒體標記相關聯。附加或可替代地,命令資料可以與複數個媒體標記中之至少一個媒體標記相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助(例如,其決策引擎)將命令資料發送到使用者裝置,以顯示使用者手冊的至少一個媒體標記。
在一些非限制性實施例中,封包資料可以包括表格清單。附加或可替代地,第一對話模板可以與表格清單的至少一個欄位相關聯。附加或可替代地,命令資料可以與表格清單的至少一個欄位相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助(例如,其決策引擎)將命令資料發送到使用者裝置,以顯示表格清單的至少一個欄位。
在一些非限制性實施例中,封包資料可以包括第一工業機器的第一工業機器介面。附加或可替代地,第一工業機器介面可以包括與第一機器的動態連結函式庫(DLL)相關聯的應用程式編程介面(API)。
在一些非限制性實施例中,封包資料可以包括第一報告模板。附加或可替代地,第一報告模板可以包括歷史欄位、過濾欄位、統計欄位、計算欄位、警告欄位、警報欄位、機器狀態欄位、其組合、及/或類似者中之至少一者。
根據非限制性實施例,提供一種使用智慧型工業輔助的電腦程式產品。電腦程式產品可以包括至少一個非暫態電腦可讀取媒體,至少一個非暫態電腦可讀取媒體包括一或更多個指令,在藉由至少一個處理器執行時,一或更多個指令使至少一個處理器以經由智慧型工業輔助的決策引擎接收可以包括至少一個對話模板的封包資料。智慧型工業輔助的對話管理器可以從使用者接收自然語言輸入。智慧型工業輔助的決策引擎可以將自然語言輸入的至少一部分映射到對話模板的第一對話模板。智慧型工業輔助的決策引擎可以依據第一對話模板來確定至少一個命令。智慧型工業輔助的決策引擎可以傳送與至少一個命令相關聯的命令資料。
在一些非限制性實施例中,智慧型工業輔助(例如,其決策引擎)可以回應於命令資料而接收回應資料。附加或可替代地,智慧型工業輔助(例如,其對話管理器、其決策引擎、及/或類似者)可以依據回應資料而向使用者傳送回應。在一些非限制性實施例中,使用者裝置可以顯示對話視窗。附加或可替代地,對話視窗可以包括自然語言輸入的文本與回應的文本。
在一些非限制性實施例中,封包資料可以包括至少一個工業機器介面,至少一個工業機器介面包括用於第一工業機器的第一工業機器介面。附加或可替代地,第一對話模板可以與至少一個可執行的工業機器操作相關聯。附加或可替代地,命令資料可以與至少一個可執行的工業機器操作相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助(例如,其決策引擎)經由第一工業機器介面將命令資料發送到第一工業機器。
在一些非限制性實施例中,封包資料可以包括至少一個資料庫介面,至少一個資料庫介面包括用於第一資料庫的第一資料庫介面。附加或可替代地,第一對話模板可以與可檢索資料相關聯。附加或可替代地,命令資料可以與可檢索資料相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助(例如,其決策引擎)經由第一資料庫介面將命令資料發送到第一資料庫。
在一些非限制性實施例中,至少一個對話模板可以包括複數個對話模板。附加或可替代地,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以依據第一自然語言輸入從複數個對話模板中選擇第一對話模板。
在一些非限制性實施例中,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以確定自然語言輸入不足以映射到第一對話模板的一部分。附加或可替代地,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以向使用者傳送請求附加輸入的提示。附加或可替代地,智慧型工業輔助(例如,其對話管理器)可以從使用者接收第二自然語言輸入。附加或可替代地,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以將第二自然語言輸入的至少一部分映射到第一對話模板的該部分。
在一些非限制性實施例中,智慧型工業輔助(例如,其對話管理器)可以依據第一對話模板向使用者傳送請求確認至少一個命令的提示。附加或可替代地,智慧型工業輔助(例如,其對話管理器)可以從使用者接收第二自然語言輸入。附加或可替代地,智慧型工業輔助(例如,其決策引擎、其對話管理器、及/或類似者)可以依據第二自然語言輸入來確定使用者已經確認至少一個命令。
在一些非限制性實施例中,封包資料可以包括媒體項目、表格清單、報告模板、機器介面、資料庫介面、其組合、及/或類似者中之至少一者。在一些非限制性實施例中,媒體項目可以包括使用者手冊、視訊記錄、音訊記錄、其組合、及/或類似者中之至少一者。在一些非限制性實施例中,使用者手冊可以包括複數個媒體標記。附加或可替代地,第一對話模板可以與複數個媒體標記中之至少一個媒體標記相關聯。附加或可替代地,命令資料可以與複數個媒體標記中之至少一個媒體標記相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助(例如,其決策引擎)將命令資料發送到使用者裝置,以顯示使用者手冊的至少一個媒體標記。
在一些非限制性實施例中,封包資料可以包括表格清單。附加或可替代地,第一對話模板可以與表格清單的至少一個欄位相關聯。附加或可替代地,命令資料可以與表格清單的至少一個欄位相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:藉由智慧型工業輔助(例如,其決策引擎)將命令資料發送到使用者裝置,以顯示表格清單的至少一個欄位。
在一些非限制性實施例中,封包資料可以包括第一工業機器的第一工業機器介面。附加或可替代地,第一工業機器介面可以包括與第一機器的動態連結函式庫(DLL)相關聯的應用程式編程介面(API)。
在一些非限制性實施例中,封包資料可以包括第一報告模板。附加或可替代地,第一報告模板可以包括歷史欄位、過濾欄位、統計欄位、計算欄位、警告欄位、警報欄位、機器狀態欄位、其組合、及/或類似者中之至少一者。
在下列經編號的條款中闡述進一步的實施例或態樣:
條款1:一種使用智慧型工業輔助的方法,包含以下步驟:藉由智慧型工業輔助接收包含至少一個對話模板的封包資料;藉由智慧型工業輔助從使用者接收自然語言輸入;藉由智慧型工業輔助將自然語言輸入的至少一部分映射到至少一個對話模板的第一對話模板;藉由智慧型工業輔助依據第一對話模板來確定至少一個命令;以及藉由智慧型工業輔助傳送與至少一個命令相關聯的命令資料。
條款2:如條款1所述的方法,進一步包含以下步驟:藉由智慧型工業輔助回應於命令資料而接收回應資料;以及藉由智慧型工業輔助依據回應資料來向使用者傳送回應。
條款3:如前述任一條款所述的方法,進一步包含以下步驟:藉由使用者裝置來顯示對話視窗,對話視窗包含自然語言輸入的文本以及回應的文本。
條款4:如前述任一條款所述的方法,其中封包資料進一步包含至少一個工業機器介面,至少一個工業機器介面包括用於第一工業機器的第一工業機器介面,其中第一對話模板係與至少一個可執行的工業機器操作相關聯,其中命令資料係與至少一個可執行的工業機器操作相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助經由第一工業機器介面將命令資料發送到第一工業機器。
條款5:如前述任一條款所述的方法,其中封包資料進一步包含至少一個資料庫介面,至少一個資料庫介面包括用於第一資料庫的第一資料庫介面,其中第一對話模板係與可檢索資料相關聯,其中命令資料係與可檢索資料相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助經由第一資料庫介面將命令資料發送到第一資料庫。
條款6:如前述任一條款所述的方法,其中至少一個對話模板包含複數個對話模板,該方法進一步包含以下步驟:藉由智慧型工業輔助依據第一自然語言輸入從複數個對話模板中選擇第一對話模板。
條款7:如前述任一條款所述的方法,進一步包含以下步驟:藉由智慧型工業輔助確定自然語言輸入不足以映射到第一對話模板的一部分;藉由智慧型工業輔助向使用者傳送請求附加輸入的提示;藉由智慧型工業輔助從使用者接收第二自然語言輸入;以及藉由智慧型工業輔助將第二自然語言輸入的至少一部分映射到第一對話模板的該部分。
條款8:如前述任一條款所述的方法,進一步包含以下步驟:藉由智慧型工業輔助依據第一對話模板向使用者傳送請求確認至少一個命令的提示;藉由智慧型工業輔助從使用者接收第二自然語言輸入;以及藉由智慧型工業輔助依據第二自然語言輸入來確定使用者已經確認至少一個命令。
條款9:如前述任一條款所述的方法,其中封包資料進一步包含媒體項目、表格清單、報告模板、機器介面、資料庫介面、或其組合中之至少一者。
條款10:如前述任一條款所述的方法,其中媒體項目包含使用者手冊、視訊記錄、音訊記錄、或其組合中之至少一者。
條款11:如前述任一條款所述的方法,其中使用者手冊包含複數個媒體標記,其中第一對話模板係與複數個媒體標記中的至少一個媒體標記相關聯,其中命令資料係與複數個媒體標記中的至少一個媒體標記相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助將命令資料發送到使用者裝置,以顯示使用者手冊的至少一個媒體標記。
條款12:如前述任一條款所述的方法,其中封包資料包含表格清單,其中第一對話模板係與表格清單的至少一個欄位相關聯,其中命令資料係與表格清單的至少一個欄位相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助將命令資料發送到使用者裝置,以顯示表格清單的至少一個欄位。
條款13:如前述任一條款所述的方法,其中封包資料包含第一工業機器的第一工業機器介面,其中第一工業機器介面包含與第一機器的動態連結函式庫(DLL)相關聯的應用程式編程介面(API)。
條款14:如前述任一條款所述的方法,其中封包資料包含第一報告模板,以及其中第一報告模板包含歷史欄位、過濾欄位、統計欄位、計算欄位、警告欄位、警報欄位、機器狀態欄位、或其組合中之至少一者。
條款15:一種使用智慧型工業輔助的系統,包含至少一個處理器;以及包含指令的至少一個非暫態電腦可讀取媒體,該等指令係用於使至少一個處理器進行以下步驟:經由智慧型工業輔助的決策引擎接收包含至少一個對話模板的封包資料;經由智慧型工業輔助的對話管理器從使用者接收自然語言輸入;藉由智慧型工業輔助的決策引擎將自然語言輸入的至少一部分映射到至少一個對話模板的第一對話模板;藉由智慧型工業輔助的決策引擎依據第一對話模板來確定至少一個命令;以及藉由智慧型工業輔助的決策引擎傳送與至少一個命令相關聯的命令資料。
條款16:如條款15所述的系統,其中該等指令進一步使至少一個處理器進行以下步驟:藉由智慧型工業輔助回應於命令資料而接收回應資料;以及藉由智慧型工業輔助依據回應資料來向使用者傳送回應。
條款17:如條款15或16所述的系統,進一步包含使用者裝置,其中使用者裝置經配置以顯示對話視窗,對話視窗包含自然語言輸入的文本以及回應的文本。
條款18:如條款15至17中之任一者所述的系統,其中封包資料進一步包含至少一個工業機器介面,至少一個工業機器介面包括用於第一工業機器的第一工業機器介面,其中第一對話模板係與至少一個可執行的工業機器操作相關聯,其中命令資料係與至少一個可執行的工業機器操作相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助經由第一工業機器介面將命令資料發送到第一工業機器。
條款19:如條款15至18中之任一者所述的系統,其中封包資料進一步包含至少一個資料庫介面,至少一個資料庫介面包括用於第一資料庫的第一資料庫介面,其中第一對話模板係與可檢索資料相關聯,其中命令資料係與可檢索資料相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助經由第一資料庫介面將命令資料發送到第一資料庫。
條款20:如條款15至19中之任一者所述的系統,其中至少一個對話模板包含複數個對話模板,以及其中該等指令進一步使至少一個處理器進行以下步驟:藉由智慧型工業輔助依據第一自然語言輸入從複數個對話模板中選擇第一對話模板。
條款21:如條款15至20中之任一者所述的系統,其中該等指令進一步使至少一個處理器進行以下步驟:藉由智慧型工業輔助確定自然語言輸入不足以映射到第一對話模板的一部分;藉由智慧型工業輔助向使用者傳送請求附加輸入的提示;藉由智慧型工業輔助從使用者接收第二自然語言輸入;以及藉由智慧型工業輔助將第二自然語言輸入的至少一部分映射到第一對話模板的該部分。
條款22:如條款15至21中之任一者所述的系統,其中該等指令進一步使至少一個處理器進行以下步驟:藉由智慧型工業輔助依據第一對話模板向使用者傳送請求確認至少一個命令的提示;藉由智慧型工業輔助從使用者接收第二自然語言輸入;以及藉由智慧型工業輔助依據第二自然語言輸入來確定使用者已經確認至少一個命令。
條款23:如條款15至22中之任一者所述的系統,其中封包資料進一步包含媒體項目、表格清單、報告模板、機器介面、資料庫介面、或其組合中之至少一者。
條款24:如條款15至23中之任一者所述的系統,其中媒體項目包含使用者手冊、視訊記錄、音訊記錄、或其組合中之至少一者。
條款25:如條款15至24中之任一者所述的系統,其中使用者手冊包含複數個媒體標記,其中第一對話模板係與複數個媒體標記中的至少一個媒體標記相關聯,其中命令資料係與複數個媒體標記中的至少一個媒體標記相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助將命令資料發送到使用者裝置,以顯示使用者手冊的至少一個媒體標記。
條款26:如條款15至25中之任一者所述的系統,其中封包資料包含表格清單,其中第一對話模板係與表格清單的至少一個欄位相關聯,其中命令資料係與表格清單的至少一個欄位相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助將命令資料發送到使用者裝置,以顯示表格清單的至少一個欄位。
條款27:如條款15至26中之任一者所述的系統,其中封包資料包含第一工業機器的第一工業機器介面,其中第一工業機器介面包含與第一機器的動態連結函式庫(DLL)相關聯的應用程式編程介面(API)。
條款28:如條款15至27中之任一者所述的系統,其中封包資料包含第一報告模板,以及其中第一報告模板包含歷史欄位、過濾欄位、統計欄位、計算欄位、警告欄位、警報欄位、機器狀態欄位、或其組合中之至少一者。
條款29:一種使用智慧型工業輔助的電腦程式產品,電腦程式產品包含至少一個非暫態電腦可讀取媒體,非暫態電腦可讀取媒體包括一或更多個指令,在藉由至少一個處理器執行時,一或更多個指令使至少一個處理器進行以下步驟:經由智慧型工業輔助的決策引擎接收包含至少一個對話模板的封包資料;經由智慧型工業輔助的對話管理器從使用者接收自然語言輸入;藉由智慧型工業輔助的決策引擎將自然語言輸入的至少一部分映射到至少一個對話模板的第一對話模板;藉由智慧型工業輔助的決策引擎依據第一對話模板來確定至少一個命令;以及藉由智慧型工業輔助的決策引擎傳送與至少一個命令相關聯的命令資料。
條款30:如條款29所述的電腦程式產品,其中該等指令進一步使至少一個處理器進行以下步驟:藉由智慧型工業輔助回應於命令資料而接收回應資料;以及藉由智慧型工業輔助依據回應資料來向使用者傳送回應。
條款31:如條款29或30所述的電腦程式產品,進一步包含使用者裝置,其中使用者裝置經配置以顯示對話視窗,對話視窗包含自然語言輸入的文本以及回應的文本。
條款32:如條款29至31中之任一者所述的電腦程式產品,其中封包資料進一步包含至少一個工業機器介面,至少一個工業機器介面包括用於第一工業機器的第一工業機器介面,其中第一對話模板係與至少一個可執行的工業機器操作相關聯,其中命令資料係與至少一個可執行的工業機器操作相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助經由第一工業機器介面將命令資料發送到第一工業機器。
條款33:如條款29至32中之任一者所述的電腦程式產品,其中封包資料進一步包含至少一個資料庫介面,至少一個資料庫介面包括用於第一資料庫的第一資料庫介面,其中第一對話模板係與可檢索資料相關聯,其中命令資料係與可檢索資料相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助經由第一資料庫介面將命令資料發送到第一資料庫。
條款34:如條款29至33中之任一者所述的電腦程式產品,其中至少一個對話模板包含複數個對話模板,以及其中該等指令進一步使至少一個處理器進行以下步驟:藉由智慧型工業輔助依據第一自然語言輸入從複數個對話模板中選擇第一對話模板。
條款35:如條款29至34中之任一者所述的電腦程式產品,其中該等指令進一步使至少一個處理器進行以下步驟:藉由智慧型工業輔助確定自然語言輸入不足以映射到第一對話模板的一部分;藉由智慧型工業輔助向使用者傳送請求附加輸入的提示;藉由智慧型工業輔助從使用者接收第二自然語言輸入;以及藉由智慧型工業輔助將第二自然語言輸入的至少一部分映射到第一對話模板的該部分。
條款36:如條款29至35中之任一者所述的電腦程式產品,其中該等指令進一步使至少一個處理器進行以下步驟:藉由智慧型工業輔助依據第一對話模板向使用者傳送請求確認至少一個命令的提示;藉由智慧型工業輔助從使用者接收第二自然語言輸入;以及藉由智慧型工業輔助依據第二自然語言輸入來確定使用者已經確認至少一個命令。
條款37:如條款29至36中之任一者所述的電腦程式產品,其中封包資料進一步包含媒體項目、表格清單、報告模板、機器介面、資料庫介面、或其組合中之至少一者。
條款38:如條款29至37中之任一者所述的電腦程式產品,其中媒體項目包含使用者手冊、視訊記錄、音訊記錄、或其組合中之至少一者。
條款39:如條款29至38中之任一者所述的電腦程式產品,其中使用者手冊包含複數個媒體標記,其中第一對話模板係與複數個媒體標記中的至少一個媒體標記相關聯,其中命令資料係與複數個媒體標記中的至少一個媒體標記相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助將命令資料發送到使用者裝置,以顯示使用者手冊的至少一個媒體標記。
條款40:如條款29至39中之任一者所述的電腦程式產品,其中封包資料包含表格清單,其中第一對話模板係與表格清單的至少一個欄位相關聯,其中命令資料係與表格清單的至少一個欄位相關聯,以及其中傳送命令資料之步驟包含以下步驟:藉由智慧型工業輔助將命令資料發送到使用者裝置,以顯示表格清單的至少一個欄位。
條款41:如條款29至40中之任一者所述的電腦程式產品,其中封包資料包含第一工業機器的第一工業機器介面,其中第一工業機器介面包含與第一機器的動態連結函式庫(DLL)相關聯的應用程式編程介面(API)。
條款42:如條款29至41中之任一者所述的電腦程式產品,其中封包資料包含第一報告模板,以及其中第一報告模板包含歷史欄位、過濾欄位、統計欄位、計算欄位、警告欄位、警報欄位、機器狀態欄位、或其組合中之至少一者。
在參照隨附圖式與附件而考慮下列描述及隨附專利請求範圍之後,本揭示標的之這些及其他特徵與特性以及結構的相關元件的操作及功能的方法與部件的組合及製造經濟性將更加顯而易見,所有者都形成本說明書的一部分,其中類似的元件符號係表示各圖式中的對應部件。然而,應清楚理解,圖式僅用於說明及描述之目的,並未意欲作為所揭示標的之限制的定義。說明書及申請專利範圍中所使用的單數形式「一」、「一個」、及「該」包括複數指示物,除非上下文另有明確說明。
針對以下描述之目的,術語「端部」、「上」、「下」、「右」、「左」、「垂直」、「水平」、「頂部」、「底部」、「橫向」、「縱向」、及其衍生詞應與所揭示之標的在圖式中的定向有關。然而,應理解,除非明確反向指出,否則所揭示之標的可以採用各種替代變型及步驟順序。亦應理解,隨附圖式所圖示以及以下說明書所描述的特定裝置及處理僅為所揭示標的之示例性實施例或態樣。因此,除非另有說明,否則與本文所揭示的實施例或態樣有關的具體尺寸與其他物理特性不應視為限制。
除非明確如此描述,否則本文使用的態樣、部件、元件、結構、動作、步驟、功能、指令、及/或類似者不應解釋為關鍵或必要的。此外,本文所使用的的冠詞「一」意欲包括一或更多個項目,並且可以與「一或更多個」與「至少一個」互換使用。此外,本文所使用的術語「組」意欲包括一或更多個項目(例如,相關項目、不相關項目、相關項目與不相關項目的組合、及/或類似者),並且可以與「一或更多個」或「至少一個」互換使用。在意指僅有一個項目的情況下,使用術語「一個」或類似語言。此外,本文所使用的術語「具有」或類似者意指開放式術語。此外,除非另有明確說明,短語「依據」意欲表示「至少部分依據」。
術語「數位輔助」、「虛擬輔助」、「智慧型自動輔助」、或「自動數位輔助」可以指稱以語音及/或文本形式解釋自然語言輸入以推斷使用者意圖並依據所推斷的使用者意圖來執行動作的任何資訊處理系統。術語「智慧型工業輔助」可以指稱專門設計、構造、及/或實現來解釋來自工業機器(例如,製造機器及/或類似者),相關資料庫、及/或類似者的自然語言輸入及/或輸入並依據在這種工業機器的背景下或與之相關的所推斷的意圖來執行動作的資訊處理系統。舉例而言,為了針對所推斷的意圖採取動作,智慧型工業輔助可以執行下列中之一或更多者:識別在至少一個工業機器的背景下或與之相關的任務流程,其中步驟與參數係設計成實現所推斷的意圖; 將來自所推斷的意圖的特定要求輸入到任務流程;藉由調用在至少一個工業機器的背景下或與之相關的程式、方法、服務、API、或類似者來執行任務流程(例如,報告、控制、指導、計算、計劃、維護、修復、教導、預測、記錄、及/或類似者);以及利用適當的媒體及/或模式產生針對使用者的輸出回應(例如,聽覺(例如,語音、音調、及/或類似者)、文本(例如,文本訊息、電子郵件、文件、HTML、及/或類似者)、其他視覺形式(例如,圖形、視訊、及/或類似者)、其任何組合、及/或類似者)。
所揭示標的之非限制性實施例或態樣係關於用於智慧型工業輔助的方法、系統、及電腦程式產品。舉例而言,所揭示之標的之非限制性實施例提供使用依據將自然語言輸入映射到封包資料中所包括的至少一個對話模板的智慧型工業輔助來確定及傳送基於其上的命令資料。這樣的實施例提供讓使用者(例如,工業機器的操作者及/或類似者)能夠使用自然語言輸入(例如,語音請求及/或類似者)的技術及系統,而可以減少及/或消除針對使用單獨的機器(例如,工業機器)的訓練。附加或可替代地,這樣的實施例提供減少及/或消除這種使用者控制機器(例如,工業機器及/或類似者)的手動嘗試(例如,導航選單、多個擊鍵、點擊、及/或類似者)、時間、及/或類似者的技術及系統。附加或可替代地,這樣的實施例提供允許這樣的使用者透過單一智慧型工業輔助針對多台機器同時(例如,同步、同時間、及/或類似者) 進行控制、監測、及/或類似者的技術及系統。附加或可替代地,這樣的實施例提供讓使用者(例如,工業機器的操作者及/或類似者)能夠在使用者不需使用手的情況(例如,當使用者的手被佔用時(例如,當攜帶物體、書寫筆記、幫助廠區內的另一者、及/或類似者時))下針對機器進行控制、監測、及/或類似者的技術及系統。附加或可替代地,這樣的實施例提供讓這樣的使用者能夠以各種格式(包括非視覺格式(例如,聽覺及/或類似者))接收狀態或其他資訊的指示的技術及系統,而藉此減少及/或消除這樣的使用者在操作這種機器時實際靠近及/或看著機器的需要。
附加或可替代地,所揭示之標的之非限制性實施例或態樣提供具有互操作性(例如,確定使用哪種通訊媒體及/或模式(例如,聽覺、文本、HTML、視覺、其任何組合、及/或類似者)來從智慧型工業輔助輸出到使用者)的技術及系統。在一些非限制性實施例或態樣中,這種確定可以依據可以特定於工業機器的使用者(例如,操作者)及/或與此有關的人誌學關係、人誌學映射、及/或類似者。附加或可替代地,所揭示之標的之非限制性實施例提供具有普遍性(例如,允許單一使用者(例如,機器操作者及/或類似者)透過智慧型工業輔助的單一介面來操作許多不同裝置(例如,工業機器、相關資料庫、及/或類似者))的技術及系統。出於說明之目的,工業機器類型(例如,機器工具、增加式製造裝置、減少式製造 裝置、放電加工(EDM)裝置、銑削裝置、切削裝置、磨削裝置、鑽孔裝置、微加工裝置、部件生產裝置、及/或類似者)領域中具有通常知識者可能能夠從不同的製造商/來源操作該類型的許多不同裝置,而不需要針對每一這樣的機器學習單獨的介面/控制系統。附加或可替代地,所揭示之標的之非限制性實施例或態樣提供用於讓使用者(例如,操作者、工人、及/或類似者)能夠透過智慧型工業輔助來例如理解及操作工業機器、相關資料庫、及/或類似者的技術及系統。出於說明之目的,智慧型工業輔助可以讓使用者(例如,操作者、工人、及/或類似者)針對工業機器、相關資料庫、及/或類似者而能夠例如理解、受到提示、或受到指導/教導如何控制各種類型的機器;理解或受到提示關於即將到來的步驟、處理、及/或類似者;理解或受到提示關於所需要者(例如,參數、要求、材料、工具、及/或類似者);理解或受到告知資料庫中的相關資訊(例如,不需要熟悉特定資料庫或不需要知道如何執行搜尋、查詢、及/或類似者);及/或類似者。
出於說明之目的,在以下描述中,儘管針對智慧型工業輔助的方法、系統、及電腦程式產品描述當前揭示之標的,但是該領域具有通常知識者將理解所揭示之標的並未受限於說明性實施例。舉例而言,本文所描述的方法、系統、及電腦程式產品可以用於各種設定(例如,適合智慧型輔助的任何設定)。
現在參照第1A圖至第1E圖,第1A圖至第1E圖係為可以實現如本文所述的系統、產品、及/或方法的環境100的非限制性實施例的圖。如第1A圖至第1E圖所示,環境100可以包括介面裝置101、智慧型工業輔助102、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端系統106。
介面裝置101可以包括能夠從智慧型工業輔助102接收資訊及/或向智慧型工業輔助102傳送資訊的一或更多個裝置(例如,經由直接連接、有線及/或無線網路、及/或任何其他合適的通訊技術)。附加或可替代地,每一介面裝置101可以包括能夠從其他介面裝置101、使用者裝置105、及/或遠端系統106接收資訊及/或向其他介面裝置101、使用者裝置105、及/或遠端系統106傳送資訊的裝置(例如,經由有線或無線網路及/或任何其他合適的通訊技術)。在一些非限制性實施例中,如本文所述,介面裝置101可以包括一或更多個輸入部件101c、一或更多個輸出部件101a、一或更多個輸入/輸出部件101b(例如,同時作為輸入部件及輸出部件的部件(例如,觸控螢幕顯示器、具有麥克風及喇叭/耳機的頭戴式耳機組、及/或類似者))、及/或一或更多個通訊介面。在一些非限制性實施例中,介面裝置101可以或可能無法能夠經由短程無線通訊連接(例如,NFC通訊連接、REID通訊連接、藍牙®通訊連接、Zigbee®通訊連接、及/或類似者)接收資訊(例如,從智慧型工業輔 助102及/或從另一介面裝置101),及/或經由短程無線通訊連接傳送資訊(例如,向智慧型工業輔助102、另一介面裝置101、使用者裝置105、遠端系統106、及/或類似者)。在一些非限制性實施例中,介面裝置101可以包括輸入部件101c(例如,麥克風)、輸出部件101a(例如,喇叭、耳機、及/或類似者)、輸入/輸出部件101b(例如,觸控螢幕、頭戴式耳機組、及/或類似者)、及/或類似者。在一些非限制性實施例中,介面裝置101可以包括多個裝置。舉例而言,介面裝置101可以包括頭戴式耳機組,頭戴式耳機組包括輸出部件101a(例如,喇叭(例如,耳機))及/或輸入部件101c(例如,麥克風)。附加或可替代地,介面裝置101可以包括具有輸入及/或輸出部件(例如,輸入/輸出部件101b(例如,觸控螢幕);輸入部件101c(例如,鍵盤、滑鼠、及/或類似者);輸出部件101a(例如,喇叭及/或類似者);及/或類似者)的可攜式及/或手持式裝置(例如,電腦、膝上型電腦、個人數位輔助(PDA)、智慧型手機、平板電腦、及/或類似者)。
智慧型工業輔助102可以包括能夠從介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端系統106接收資訊及/或向介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端系統106傳送資訊的一或更多個裝置。在一些非限制性實施例中,智慧型工業 輔助102可以與介面裝置101(例如,完全、部分、及/或類似者)整合,及/或直接連接到介面裝置101。在一些非限制性實施例中,智慧型工業輔助102可以包括計算裝置(例如,可攜式及/或手持式裝置(例如,電腦、膝上型電腦、個人數位輔助(PDA)、智慧型電話、平板電腦、及/或類似者)、桌上型電腦、伺服器、伺服器群組、及/或其他類似裝置)。在一些非限制性實施例中,智慧型工業輔助102可以與服務提供商相關聯(例如,與介面裝置101的使用者分開的第三方、資料庫103a的維護者、外部資料庫103b的維護者、工業機器104的操作者/所有者/提供者/製造商、遠端系統106的提供者、及/或使用者裝置105的使用者)。在一些非限制性實施例中,智慧型工業輔助102可以與資料儲存裝置通訊,資料儲存裝置可以在智慧型工業輔助102的本地端或遠端。在一些非限制性實施例中,智慧型工業輔助102能夠從資料儲存裝置中接收資訊,將資訊儲存在資料儲存裝置中,向資料儲存裝置傳送資訊,或者搜尋儲存在資料儲存裝置中的資訊。
在一些非限制性實施例中,智慧型工業輔助102可以具有各種硬體及/或軟體模組,及/或可以儲存與智慧型工業輔助102的操作及使用相關的資訊及/或軟體。舉例而言,智慧型工業輔助102可以包括對話管理器102aa、決策引擎102ac、自動語音識別(ASR)/語音到文本(STT)模組102a、自然語言理解(NLU)模組 102b、應用程式管理器102c、資料庫輔助介面102d、機器閘道102e、自然語言產生器(NLG)模組102f、文本到語音(TTS)模組102g、及/或類似者。附加或可替代地,資料庫介面102d可以包括硬體及/或軟體介面(例如,應用程式編程介面及/或類似者),以實現智慧型工業輔助102、資料庫103a、及/或外部資料庫103b之間的通訊。在一些非限制性實施例中,應用程式管理器102c可以包括對話管理器102aa、決策引擎102ac、其任一組合、及/或類似者中之至少一者。附加或可替代地,對話管理器102aa可以包括ASR/STT模組102a、NLU模組102b、NLG模組102f、TTS模組102g、其他語音處理、及/或類似者中之至少一者。在一些非限制性實施例中,ASR/STT模組102a、NLU模組102b、其他語音到文本處理、及/或類似者可以是單一模組(例如,STT模組102a)。附加或可替代地,NLG模組102f、TTS模組102g、其他文本到語音處理、及/或類似者可以是單一模組(例如,TTS模組102g)。在一些非限制性實施例中,ASR/STT模組102a、NLU模組102b、其他語音到文本處理、NLG模組102f、TTS模組102g、其他文本到語音處理、及/或類似者可以是單一模組(例如,對話管理器102aa)。在一些非限制性實施例中,ASR/STT模組102a、NLU模組102b、NLG模組102f、TTS模組102g、對話管理器102aa、其組合、及/或類似者中之至少一者可以與智慧型工業輔助102分開及/或通訊。在 一些非限制性實施例中,智慧型工業輔助102及/或機器閘道102e可以包括至少一個機器介面(例如,硬體及/或軟體介面(例如,應用程式編程介面、動態連結函式庫、及/或類似者)),以實現智慧型工業輔助102(例如,應用程式管理器102c)與工業機器104(例如,工業機器104的機器控制器104a)之間的通訊。附加或可替代地,在一些非限制性實施例中,智慧型工業輔助102、機器閘道102e、及/或工業機器104(例如,工業機器104的機器控制器104a)可以包括機器專用軟體102ee(例如,動態連結函式庫(DLL)),以實現智慧型工業輔助102(例如,應用程式管理器102c)與工業機器104(例如,工業機器104的機器控制器104a)之間的通訊。舉例而言,機器專用軟體102ee(例如,DLL)可以包括可以藉由智慧型工業輔助102(例如,應用程式管理器102c)進行存取、使用、及/或類似者的工業機器104(例如,工業機器104的機器控制器104a)的功能、命令、變量、欄位、輸入、輸出、其任一組合、及/或類似者中之至少一者的函式庫。在一些非限制性實施例中,機器閘道102e可以與智慧型工業輔助102分開及/或通訊。舉例而言,可以利用工業機器104(例如,工業機器104的機器控制器104a)實現(例如,完全、部分、及/或類似者)機器閘道。在一些非限制性實施例中,智慧型工業輔助102可以包括至少一個輸出介面(例如,音訊卡、視訊卡、渲染器、編碼器、解碼器、編碼解碼器(編解碼器)通訊 介面、及/或類似者),以實現智慧型工業輔助102(例如,應用程式管理器102c)與輸出部件102a、輸入/輸出部件102b、及/或類似者中之至少一者之間的通訊。
在一些非限制性實施例中,應用程式管理器102c可以是工業處理應用程式管理器。附加或可替代地,應用程式管理器102c可以包括決策結束102ac。在一些非限制性實施例中,應用程式管理器102c(例如,其決策引擎102ac及/或類似者)可以包括、接收、及/或配置封包102cc。在一些非限制性實施例中,封包102cc可以包括至少一個模組(例如,軟體模組、韌體模組、及/或類似者)及/或封包資料,封包資料可以包括智慧型工業輔助102(例如,應用程式管理器102c、其決策引擎102ac、及/或類似者)的對話模板、機器/群組識別資料、特徵、序列、動作、功能、命令、變量、欄位、輸入、輸出、參數、類別、介面(例如,機器閘道102e的機器介面、資料庫介面102d、輸出介面102h、及/或類似者)、其任一組合、及/或類似者中之至少一者。在一些非限制性實施例中,應用程式管理器102c(例如,其決策引擎102ac及/或類似者)及/或封包102cc可以包括及/或配置成確定人誌學關係(例如,智慧型工業輔助102可執行的功能之間的映射及/或互相關聯(例如,報告、控制、指導、計算、計劃、維護、修復、教導、預測、記錄、及/或類似者))以及序列/任務群組(例如,特定於這種使用者(例如,機器操作者及/或類似者)的角色 的使用者任務流程)。附加或可替代地,應用程式管理器102c(例如,其決策引擎102ac及/或類似者)及/或封包102cc可以包括及/或配置成可以依據(例如,完全、部分、及/或類似者)一或更多個預定的人誌學關係來確定針對工業機器104及/或資料庫(例如,資料庫103a及/或外部資料庫103b)的映射。
在一些非限制性實施例中,應用程式管理器102c(例如,其對話管理器102aa、其決策引擎102ac、及/或類似者)及/或封包102cc可以包括及/或配置成實現互操作性(例如,確定使用哪種通訊媒體及/或模式(例如,聽覺、文本、HTML、視覺、觸覺、其任一組合、及/或類似者)從使用者輸入或者從智慧型工業輔助102輸出到使用者)。在一些非限制性實施例中,這種確定可以依據一或更多個預定的人誌學關係、對話模板、及/或類似者。附加或可替代地,這種確定可以依據選擇通訊的媒體及/或模式來減少(例如,最小化及/或類似者)使用者使用智慧型工業輔助102的步驟數量(例如,輸入及/或輸出的連續迭代)。附加或可替代地,這種確定可以依據提供完成任務的方式(例如,至少一個動作及/或類似者)來提高效率、有效性、及/或類似者。附加或可替代地,這種確定可以依據選擇通訊媒體及/或模式來減少(例如,消除、降低、及/或類似者)使用者需要使用手的輸入(例如,啟用聲音/語音輸入及/或聲音/語音輸出,以允許使用者在無法使用手的情況下操作機器),而藉此讓 使用者能夠在使用者的手被佔用時與智慧型工業輔助102互動。在一些非限制性實施例中,若內容(例如,回應、提示、及/或類似者)是短的(例如,簡潔、小於閾值數量的字符、小於閾值數量的單詞(例如,10個單詞)、小於閾值數量的句子、小於閾值數量的語音秒數(例如,5秒)、及/或類似者),則這種內容可以藉由智慧型工業輔助102以聽覺輸出(例如,語音單詞)、以文本輸出(例如,在顯示螢幕的對話視窗中、作為HTML頁面的一部分、及/或類似者)、及/或類似者。在一些非限制性實施例中,使用者(例如,機器操作者及/或類似者)可能無法(例如,防止及/或類似者)提供輸入(例如,自然語言輸入),直到完成聽覺輸出(例如,回應的語音單詞)為止,因此可能並不期望導致時間延遲及/或類似者的長(例如,大於上述閾值及/或類似者)的內容。在一些非限制性實施例中,當內容包括至少一個計算的結果時,這種內容可以利用表格格式(例如,表格清單)、報告模板、及/或類似者列出。附加或可替代地,這種輸出(例如,表格清單、報告模板、及/或類似者)可以顯示在單獨的視窗中(例如,在顯示螢幕上),並藉由單獨的頻道(例如,電子郵件、文本(例如,SMS)訊息、多媒體(例如,MMS)訊息、及/或類似者)傳送。附加或可替代地,並非提供隨後的自然語言輸入或者除了提供隨後的自然語言輸入之外(例如,聲音/語音輸入、打字輸入、及/或類似者)(例如,當針對項目的語音或打字可能很麻煩 時(例如,大於閾值長度的單詞、大於閾值數量的單詞的單詞串列、具有大於閾值數量的位數的多個位數的數字、及/或類似者)),使用者可以任擇地能夠選擇(例如,在觸控螢幕上觸控、利用指向裝置(例如,滑鼠)點擊、及/或類似者)這種清單中的項目。在一些非限制性實施例中,若內容包括識別資訊(例如,聯絡資訊、電子郵件地址、電話號碼、及/或類似者),則可以顯示這種內容(例如,在對話視窗中、在顯示螢幕的單獨視窗中、及/或類似者)。在一些非限制性實施例中,在小數點之後具有多個位數的數字值可以在輸出(例如,作為聽覺語音、對話視窗中的文本、HTML頁面上的文本、及/或類似者)之前四捨五入到小數點之後的所選擇(例如,預定、可選擇、及/或類似者)位數的數字。在一些非限制性實施例中,當內容包括至少一個媒體項目時,可以在單獨的視窗中(例如,在顯示螢幕及/或類似者上)顯示這種媒體項目。附加或可替代地,可以將大的媒體項目(例如,大於閾值數量的頁面(例如,針對文件)、秒(例如,針對音訊、視覺、或視聽檔案)、及/或類似者)分成(例如,分段及/或類似者)較小的媒體項目,而可以減少加載時間。附加或可替代地,可以串列、同時、及/或類似地顯示這種較小的媒體項目。在一些非限制性實施例中,當內容包括警告(例如,警報、警示、及/或類似者)時,這種內容可以包括聽覺輸出(例如,語音單詞、大聲及/或重複噪音、音調、及/或類似者)、視覺輸出(例如,在 對話視窗中顯示、在單獨的視窗中顯示、及/或類似者)、藉由至少一個其他頻道傳送(例如,電子郵件、文本(例如,SMS)訊息、多媒體(例如,MMS)訊息、及/或類似者)、其任一組合、及/或類似者中之至少一者。在一些非限制性實施例中,輸出(例如,內容、媒體項目、警告、及/或類似者)可以包括觸覺輸出(例如,觸感、振動、及/或類似輸出)。在一些非限制性實施例中,輸出(例如,內容、媒體項目、警告、及/或類似者)可以包括通訊模式的組合(例如,觸覺及視覺(例如,經由觸控螢幕)、視覺及聽覺(例如,在伴隨聽覺語音、視聽媒體內容、及/或類似者的對話視窗中顯示資訊)、及/或類似者。在一些非限制性實施例中,智慧型工業輔助102可以包括圖像捕捉裝置(例如,相機、條碼掃描器、及/或作為輸入部件101c、輸入/輸出部件101b、及/或類似者中之至少一者的類似者),而可以用於輸入資料(例如,條碼、快速回應(QR)代碼、字母數字資訊、光學字符辨識、及/或類似者),及/或智慧型工業輔助102可以顯示(例如,經由作為輸出部件101a、輸入/輸出部件101b、及/或類似者的顯示螢幕)這種資料(例如,條碼、快速回應(QR)代碼、字母數字資訊、及/或類似者)來作為輸出。在一些非限制性實施例中,輸出可以包括各種格式的狀態或其他資訊的指示,並包括非視覺格式(例如,聽覺及/或類似者),而藉此減少及/或消除這樣的使用者在操作這種機器時實際靠近及/或看著機器的需要。
在一些非限制性實施例中,每一對話模板(例如,封包102cc及/或類似者的)可以包括功能資料、群組資料、特徵資料、序列資料、參數資料、預期對話資料、動作資料、其任一組合、及/或類似者中之至少一者。舉例而言,功能資料可以與智慧型工業輔助102的至少一個功能(例如,報告、控制、指導、計算、計劃、維護、修理、教導、預期、記錄、及/或類似者)相關聯(例如,識別及/或類似者),其中針對對話模板進行歸類(例如,分類及/或類似者)。附加或可替代地,群組資料可以與一組特徵(例如,與工業機器104、資料庫(例如,資料庫103a及/或外部資料庫103b)、及/或類似者相關聯的一組特徵)相關聯(例如,識別及/或類似者)。舉例而言,群組可以包括與特定工業機器104相關聯的所有特徵(例如,功能、命令、變量、欄位、輸入、輸出、其任一組合、及/或類似者)。附加或可替代地,每一工業機器104(或工業機器104的品牌/型號)可以具有與其相關聯的至少一個群組。在一些非限制性實施例中,群組資料可以包括字母數字串列(例如,四位數數字、四個字符串列、及/或類似者)。附加或可替代地,特徵資料可以與特徵群組的特徵(例如,第一特徵)相關聯(例如,識別及/或類似者)。在一些非限制性實施例中,特徵可以與使用者(例如,機器操作者及/或類似者)的至少一個操作相關聯,以與智慧型工業輔助102互動。舉例而言,特徵可以包括方向(例如,智慧型工業輔助102執行動作的 請求(例如,命令、詢問、及/或類似者))。附加或可替代地,特徵可以包括確認(例如,確認智慧型工業輔助102應該執行動作(例如,「是」、「否」、「取消」、及/或類似者)的智慧型工業輔助102的輸入(例如,語音/言語輸入、點擊、擊鍵、及/或類似者))。附加或可替代地,特徵可以是複雜特徵(例如,使用者(例如,機器操作者及/或類似者)以至少一個指定序列向智慧型工業輔助102提供多個輸入(例如,方向、確認、及/或類似者)的一系列決策步驟)。附加或可替代地,特徵可以包括複合特徵(例如,可以並行、串行、其任一組合、及/或類似者來執行的一批動作)。在一些非限制性實施例中,序列資料可以與使用者(例如,機器操作者及/或類似者)、智慧型工業輔助102、及/或類似者的預期對話序列相關聯(例如,識別、包括、及/或類似者)。舉例而言,序列資料可以與預期對話資料的至少一個項目相關聯(例如,識別、包括、及/或類似者)。附加或可替代地,預期對話資料可以與序列的預期對話的至少一個項目相關聯(例如,識別、包括、及/或類似者)。舉例而言,預期對話的每一項目可以包括來自使用者(例如,機器操作者)的預期自然語言輸入,智慧型工業輔助102針對使用者的回應、及/或類似者中之至少一者。在一些非限制性實施例中,預期對話資料可以包括與一個對話模板相關聯的預期對話的複數個可替代項目。舉例而言,預期對話的複數個可替代項目可以包括表達使用者執行與相同的 對話模板相關聯的活動(例如,至少一個動作、任務、及/或類似者)的相同意圖的同義詞、替代詞語、及/或類似者(例如,「Start warm upcycle」、「Warm up the machine」、及/或類似者可以是預期對話的可替代項目,以啟動工業機器104的預熱處理;「Run process 1234」、「Start m-code 1234」、及/或類似者可以是預期對話的可替代項目,以啟動與所述代碼相關聯的處理;「Report current tool」、「Inform about current tool」、及/或類似者可以是預期對話的可替代項目,以請求當前工具的資訊;「Turn on the lights」、「Lights on」、及/或類似者可以是預期對話的可替代項目,以請求打開燈;及/或類似者)。在一些非限制性實施例中,預期對話資料可以包括啟動與至少一個自然語言輸入(例如,短語及/或類似者)相關聯的對話資料,以啟動與預期對話資料相關聯的序列。在一些非限制性實施例中,參數資料可以與相關聯於預期對話的至少一個項目的至少一個參數(例如,值、種類、單詞、及/或類似者)相關聯(例如,識別、包括、及/或類似者)。舉例而言,參數資料可以與部件號碼、部件識別、機器號碼(例如,特定工業機器104、工業機器104的型號、及/或類似者的)、機器識別符、號碼、種類(例如,低、中、高、慢、快、開、關、及/或類似者)、單詞(例如,部件名稱、機器、資料庫、媒體項目、及/或類似者)、字母數字串列、及/或類似者相關聯。在一些非限制性實施例中,參 數資料的至少一個項目可以與從使用者到智慧型工業輔助102的輸入相關聯。附加或可替代地,參數資料的至少一個項目可以與來自智慧型工業輔助102的輸出(例如,回應及/或類似者)相關聯。在一些非限制性實施例中,動作資料可以與智慧型工業輔助102可執行的至少一個動作、與智慧型工業輔助102分開(可以至少部分藉由智慧型工業輔助102控制)的另一裝置(例如,工業機器104、資料庫103a、外部資料庫103b、及/或類似者)可執行的至少一個動作、及/或類似者相關聯(例如,識別及/或類似者)。在一些非限制性實施例中,對話模板(例如,其動作資料及/或類似者)可以與媒體項目、表格清單、報告模板、機器介面、資料庫介面、(例如,使用者、使用者的組織、及/或類似者的)客製化內容(可以藉由如本文所述的任何合適的通訊模式或媒體輸出(例如,電子郵件、文本、視覺顯示、聽覺輸出、及/或類似者))、軟體項目(例如,可執行檔案、處理、模組、例式、子例式、功能、及/或類似者)、搜尋(例如,針對文件、可檢索資料項目、及/或類似者)、其組合、及/或類似者中之至少一者相關聯(例如,識別、包括、及/或類似者)。
在一些非限制性實施例中,某些動作可以具有先決條件。舉例而言,序列資料、動作資料、及/或類似者中之至少一者可以包括與至少一個先決條件(例如,先決條件動作、先決條件事件、先決條件狀況、及/或類似 者)相關聯(例如,識別、包括、及/或類似者)的先決條件資料。舉例而言,使機器(例如,工業機器104)預熱可能是利用這種機器執行某些操作的先決條件,以及與這些操作相關聯的序列資料、動作資料、及/或類似者可以包括識別與加熱機器相關聯的序列資料、動作資料、及/或類似者的先決條件資料。舉例而言,沒有警告(例如,警報、警示、及/或類似者)可能是利用機器(例如,工業機器104)執行某些操作的先決條件,以及與這些操作相關聯的序列資料、動作資料、及/或類似者可以包括識別與這些警告相關聯的序列資料、動作資料、及/或類似者的先決條件資料。在一些非限制性實施例中,若未滿足先決條件,則智慧型工業輔助102可以防止執行動作。附加或可替代地,智慧型工業輔助102可以向使用者提供指示無法執行這種動作及/或識別先決條件的回應。在一些非限制性實施例中,智慧型工業輔助102可以向使用者傳送請求與先決條件相關聯的附加輸入、與先決條件相關聯的確認、及/或類似者的提示。附加或可替代地,若使用者並未提供針對提示的答覆(例如,因為使用者不知道),則智慧型工業輔助102可以推薦答覆(例如,可以依據對話模板、其預期對話資料、及/或類似者的回應於提示的預期對話的至少一個項目)。在一些非限制性實施例中,機器(例如,工業機器104、其機器介面102e、工業機器104的機器專用軟體102ee、及/或類似者)可以包括用於執行某些動作的代碼(例如,軟體、韌體、協定、可 執行指令、參數、及/或類似者),以及這樣的代碼可以包括識別至少一些動作的先決條件的先決條件資料(例如,依賴性及/或類似者)。
在一些非限制性實施例中,ASR模組102a、NLU模組102b、NLG模組102f、TTS模組102g、應用程式管理器102c(例如,其對話管理器102aa、其決策引擎102ac、以及類似者)、及/或封包102cc中之至少一者(例如,每一者)可以包括及/或配置成實現詞彙集(例如,客製化詞典及/或類似者)。在一些非限制性實施例中,詞彙集的至少一部分可以特定於環境(例如,在一般製造的背景下或與其有關;在一或更多種特定類型的製造的背景下或與其有關;在一般工業機器的背景下或與其有關;在一或更多種特定類型的工業機器的背景下或與其有關;在一般工業處理的背景下或與其有關;在一或更多種特定工業處理的背景下或與其有關;在與製造、工業機器、及/或工業處理有關的資料庫的背景下或與其有關;在與製造、工業機器、及/或工業處理有關的標準工作及/或任務流程的背景下或與其有關;及/或在類似者的背景下或與其有關)。附加或可替代地,詞彙集的至少一部分可以特定於個體的一或更多個角色(例如,在製造的背景下或與其有關;在工業機器的背景下或與其有關;在工業處理的背景下或與其有關;在與製造、工業機器、及/或工業處理有關的資料庫的背景下或與其有關;在與製造、工業機器、及/或工業處理相關的標準工作及/或任務 流程的背景下或與其有關;及/或在類似者的背景下或與其有關)。舉例而言,這樣的角色可以包括一般的工業機器的操作者(例如,機器操作者)、一或更多個特定類型的工業機器的操作者、廠區工作人員、指導者、管理者(例如,操作管理者、生產管理者、及/或類似者)、工程師(例如,製造工程師、現場服務工程師、及/或類似者)、維護工人、推銷員、檢查者、分析者、及/或類似者。附加或可替代地,詞彙集的至少一部分可以特定於技術上相似的含義(例如,同義詞、轉喻詞、等同詞、相關聯詞、替代詞、及/或類似者)。舉例而言,至少一些這樣的技術上相似的含義可以依據預定的人誌學關係。
資料庫103a可以包括能夠從智慧型工業輔助102接收資訊及/或向智慧型工業輔助102傳送資訊的一或更多個裝置。附加或可替代地,資料庫103a可以包括可以在智慧型工業輔助102的本地端或遠端的資料儲存裝置。在一些非限制性實施例中,資料庫103a可以與智慧型工業輔助102(例如,完全、部分、及/或類似者)整合,及/或直接連接到智慧型工業輔助102。附加或可替代地,資料庫103a可以與智慧型工業輔助102(例如,完全、部分、及/或類似者)分開實施。舉例而言,資料庫103a可以是與智慧型工業輔助102分開的裝置及/或系統。在一些非限制性實施例中,可以藉由相同實體維護資料庫103a與智慧型工業輔助102。在一些非限制性實施例中,資料庫103a可以包括計算裝置(例如,伺服器、 伺服器群組、及/或其他類似裝置)。在一些非限制性實施例中,資料庫103a能夠從資料儲存裝置中檢索資訊,將資訊儲存在資料儲存裝置中,向資料儲存裝置傳送資訊,或者搜尋儲存在資料儲存裝置中的資訊。
外部資料庫103b可以包括能夠從智慧型工業輔助102接收資訊及/或向智慧型工業輔助102傳送資訊的一或更多個裝置。附加或可替代地,外部資料庫103b可以包括可以在智慧型工業輔助102的本地端或遠端的資料儲存裝置。在一些非限制性實施例中,外部資料庫103b可以與第三方(例如,與介面裝置101的使用者、智慧型工業輔助102、及/或工業機器104的操作者/所有者/提供者/製造商分開)相關聯。在一些非限制性實施例中,可以藉由相同實體(例如,相同方內的不同群組)維護外部資料庫103b與智慧型工業輔助102。在一些非限制性實施例中,外部資料庫103b可以包括計算裝置(例如,伺服器、伺服器群組、及/或其他類似裝置)。在一些非限制性實施例中,外部資料庫103b能夠從資料儲存裝置中檢索資訊,將資訊儲存在資料儲存裝置中,向資料儲存裝置傳送資訊,或者搜尋儲存在資料儲存裝置中的資訊。
工業機器104可以包括能夠從智慧型工業輔助102接收資訊及/或向智慧型工業輔助102傳送資訊的一或更多個裝置。附加或可替代地,工業機器104可以包括能夠執行工業、製造、加工、及/或物理任務的一或更 多個裝置。舉例而言,工業機器104可以包括機器工具、增加式製造裝置、減少式製造裝置、放電加工(EDM)裝置、銑削裝置、切削裝置、磨削裝置、鑽孔裝置、微加工裝置、部件生產裝置、及/或類似者中之至少一者。在一些非限制性實施例中,工業機器104可以包括機器控制器104a(例如,與智慧型工業輔助102分開),而可以與工業機器104以本地端或遠端(例如,完全、部分、及/或類似者)整合。在一些非限制性實施例中,智慧型工業輔助102可以與工業機器104及/或機器控制器104a(例如,完全、部分、及/或類似者)整合,及/或直接連接到工業機器104及/或機器控制器104a。
使用者裝置105可以包括能夠從智慧型工業輔助102及/或遠端系統106接收資訊及/或向智慧型工業輔助102及/或遠端系統106傳送資訊的一或更多個裝置(例如,經由直接連接、有線及/或無線網路、及/或任何其他合適的通訊技術)。舉例而言,使用者裝置105可以包括計算裝置(例如,可攜式及/或手持式裝置(例如,電腦、膝上型電腦、個人數位輔助(PDA)、智慧型電話、平板電腦、及/或類似者)、桌上型電腦、伺服器、伺服器群組、及/或其他類似裝置)。在一些非限制性實施例中,使用者裝置105可以包括用於開發、修改、產生、傳送、及/或接收封包資料(例如,如本文描述的對話模板及/或類似者)(例如,針對封包102cc)的開發套件、工具套件、及/或類似者。在一些非限制性實施例中,使 用者裝置105可以將封包資料傳送到遠端系統106、智慧型工業輔助102、及/或類似者。在一些非限制性實施例中,使用者裝置105可以與介面裝置101、智慧型工業輔助102、及/或遠端系統106整合,及/或直接連接到介面裝置101、智慧型工業輔助102、及/或遠端系統106。
遠端系統106可以包括能夠從智慧型工業輔助102及/或使用者裝置105接收資訊及/或向智慧型工業輔助102及/或使用者裝置105傳送資訊的一或更多個裝置(例如,經由直接連接、有線及/或無線網路、及/或任何其他合適的通訊技術)。舉例而言,遠端系統106可以包括計算裝置(例如,可攜式及/或手持式裝置(例如,電腦、膝上型電腦、個人數位輔助(PDA)、智慧型電話、平板電腦、及/或類似者)、桌上型電腦、伺服器、伺服器群組、及/或其他類似裝置)。在一些非限制性實施例中,遠端系統106可以從使用者裝置105接收封包資料(例如,如本文所述的對話模板及/或類似者),及/或將封包資料傳送到使用者裝置105。附加或可替代地,遠端系統106可以將封包資料(例如,如本文所述的封包102cc及/或類似者)傳送到智慧型工業輔助102c,及/或從智慧型工業輔助102c接收封包資料。在一些非限制性實施例中,遠端系統106可以與使用者裝置105整合,及/或直接連接到使用者裝置105。
在一些非限制性實施例中,智慧型工業輔助102可以藉由一或更多個網路連接到介面裝置101、資料 庫103a、外部資料庫103b、工業機器104、使用者裝置105、遠端系統106、及/或其任一組合。網路可以包括一或更多個有線及/或無線網路。舉例而言,網路可以包括蜂窩式網路(例如,長期演進技術(LTE)網路、第三代(3G)網路、第四代(4G)網路、分碼多重存取(CDMA))網路、及/或類似者)、公眾行動電話網路(PLMN)、區域網路(LAN)、廣域網路(WAN)、都會網路(MAN)、電話網路(例如,公用交換電話網路(PSTN))、私人網路、虛擬私人網路(VPN)、本地網路、點對點網路、內部網路、網際網路、光纖式網路、雲計算網路、及/或類似者、及/或這些或其他類型的網路的組合。在一些非限制性實施例中,智慧型工業輔助102能夠(例如,經配置以)通過這種網路傳送(例如,發出、發送、接收、及/或類似者)訊息(例如,電子郵件、文本(例如,SMS)訊息、多媒體(例如,MMS)訊息)及/或類似者。附加或可替代地,智慧型工業輔助102能夠(例如,經配置以)透過這樣的網路存取可使用的媒體項目(例如,文件及/或類似者)。
提供第1A圖至第1E圖所示的系統、裝置、及/或網路的數量及佈置作為實例。相較於第1A圖至第1E圖所示者,可能存在附加系統、裝置、及/或網路;更少的系統、裝置、及/或網路;不同的系統、裝置、及/或網路;及/或不同佈置的系統、裝置、及/或網路。此外,第1A圖至第1E圖所示的二或更多個系統或裝置可以實現 在單一系統或裝置中,或者第1A圖至第1E圖所示的單一系統或裝置可以實現為多個分佈式系統或裝置。附加或可替代地,環境100的一組系統(例如,一或更多個系統)或一組裝置(例如,一或更多個裝置)可以執行描述為環境100的另一組系統或另一組裝置所執行的一或更多個功能。
現在參照第2圖,第2圖係為裝置200的示例性部件的圖。裝置200可以對應於介面裝置101的一或更多個裝置、智慧型工業輔助102的一或更多個裝置、資料庫103a的一或更多個裝置、外部資料庫103b、工業機器104的一或更多個裝置、使用者裝置105、及/或遠端系統106的一或更多個裝置。在一些非限制性實施例中,介面裝置101、智慧型工業輔助102、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端系統106可以包括至少一個裝置200及/或裝置200的至少一個部件。如第2圖所示,裝置200可以包括匯流排202、處理器204、記憶體206、儲存部件208、輸入部件210、輸出部件212、及通訊介面214。
匯流排202可以包括允許在裝置200的部件之間進行通訊的部件。在一些非限制性實施例中,可以利用硬體、韌體、或硬體與軟體的組合來實現處理器204。舉例而言,處理器204可以包括處理器(例如,中央處理單元(CPU)、圖形處理單元(GPU)、加速處理單元(APU)、及/或類似者)、微處理器、數位訊號處理器 (DSP)、及/或任何處理部件(例如,現場可程式邏輯閘陣列(FPGA)、專用積體電路(ASIC)、及/或類似者)、及/或可以程式化以執行功能的類似者。記憶體206可以包括隨機存取記憶體(RAM)、唯讀記憶體(ROM)、及/或儲存資訊及/或處理器204所使用的指令的其他類型的動態或靜態儲存裝置(例如,快閃記憶體、磁記憶體、光記憶體、及/或類似者)。
儲存部件208可以儲存與裝置200的操作及使用有關的資訊及/或軟體。舉例而言,儲存部件208可以包括硬碟(例如,磁碟、光碟、磁光碟、固態碟、及/或類似者)、光碟(CD)、數位多功能光碟(DVD)、軟碟、卡匣、磁帶、及/或其他類型的電腦可讀取媒體,以及相應的驅動器。
輸入部件210可以包括允許裝置200接收資訊的部件(例如,經由使用者輸入(例如,觸控螢幕顯示器、鍵盤、鍵板、滑鼠、按鈕、開關、麥克風、相機、及/或類似者))。附加或可替代地,輸入部件210可以包括用於感測資訊的感測器(例如,全球定位系統(GPS)部件、加速度計、陀螺儀、致動器、及/或類似者)。輸出部件212可以包括提供來自裝置200的輸出資訊的部件(例如,顯示器、喇叭、一或更多個發光二極體(LED)、及/或類似者)。
通訊介面214可以包括讓裝置200能夠與其他裝置通訊(例如,經由有線連接、無線連接、或有線及 無線連接的組合)的類似收發器的部件(例如,收發器、分開的接收器及發送器、及/或類似者)。通訊介面214可以允許裝置200從另一裝置接收資訊及/或向另一裝置提供資訊。舉例而言,通訊介面214可以包括以太網介面、光學介面、同軸介面、紅外介面、射頻(RF)介面、通用串列匯流排(USB)介面、Wi-Fi®介面、藍牙®介面、Zigbee®介面、蜂窩式網路介面、及/或類似者。
裝置200可以執行本文所述的一或更多個處理。裝置200可以依據處理器204執行由電腦可讀取媒體(例如,記憶體206及/或儲存部件208)儲存的軟體指令來執行這些處理。電腦可讀取媒體(例如,非暫態電腦可讀取媒體)在本文中定義為非暫態記憶體裝置。非暫態記憶體裝置包括位於單一物理儲存裝置內部的記憶體空間或分佈在多個物理儲存裝置上的記憶體空間。
軟體指令可以經由通訊介面214從另一電腦可讀取媒體或者從另一裝置讀入記憶體206及/或儲存部件208。當執行時,儲存在記憶體206及/或儲存部件208中的軟體指令可以使處理器204執行本文所述的一或更多個處理。附加或可替代地,可以使用硬連線電路來代替軟體指令或與軟體指令組合,以執行本文所述的一或更多個處理。因此,本文所述的實施例並不限於硬體電路及軟體的任何特定組合。
提供第2圖所示的部件的數量及佈置作為實例。在一些非限制性實施例中,相較於第2圖,裝置200 可以包括附加部件、更少部件、不同部件、或不同佈置的部件。附加或可替代地,裝置200的一組部件(例如,一或更多個部件)可以執行描述為裝置200的另一組部件所執行的一或更多個功能。
現在參照第3圖,第3圖係為使用智慧型工業輔助的處理300的非限制性實施例的流程圖。在一些非限制性實施例中,可以藉由智慧型工業輔助102(例如,智慧型工業輔助102的一或更多個裝置)執行(例如,完全、部分、及/或類似者)處理300的步驟中之一或更多者。在一些非限制性實施例中,處理300的步驟中之一或更多者可以藉由與智慧型工業輔助102分開或包括智慧型工業輔助102的另一系統、另一裝置、另一系統群組、或另一裝置群組(例如,介面裝置101(例如,介面裝置101的一或更多個裝置)、資料庫103a(例如,資料庫103a的一或更多個裝置)、外部資料庫103b(例如,外部資料庫103b的一或更多個裝置)、工業機器104(例如,工業機器104的一或更多個裝置)、使用者裝置105、及/或遠端伺服器106(例如,遠端伺服器106的一或更多個裝置))執行(例如,完全、部分、及/或類似者)。
如第3圖所示,在步驟310處,處理300可以包括接收封包資料。舉例而言,智慧型工業輔助102可以從使用者裝置105、遠端系統106、使用者的安裝、及/或類似者來接收封包資料(例如,封包102cc及/或類似者)。在一些非限制性實施例中,封包資料(例如,封包 102cc及/或類似者)可以包括至少一個對話模板。舉例而言,封包資料(例如,封包102cc及/或類似者)可以包括複數個對話模板。
在一些非限制性實施例中,封包資料(例如,封包102cc及/或類似者)可以包括用於至少一個工業機器104(例如,第一工業機器104)的至少一個工業機器介面(例如,機器閘道102e的至少一個機器介面及/或類似者)。附加或可替代地,至少一個對話模板(例如,第一對話模板)可以與至少一個可執行的工業機器操作(例如,第一工業機器的)相關聯。
在一些非限制性實施例中,封包資料(例如,封包102cc及/或類似者)可以包括至少一個資料庫介面102d(例如,用於第一資料庫(例如,資料庫103a及/或外部資料庫103b)的第一資料庫介面102d)。附加或可替代地,至少一個對話模板(例如,第一對話模板)可以與可檢索資料(例如,來自第一資料庫)相關聯。
在一些非限制性實施例中,封包資料(例如,封包102cc及/或類似者)可以包括媒體項目(例如,使用者手冊、視訊記錄、音訊記錄、其組合、及/或類似者)、表格清單(例如,進階清單、資料庫清單、電子表格、及/或類似者)、報告模板、機器介面(例如,機器閘道102e的至少一個機器介面及/或類似者)、資料庫介面、其組合、及/或類似者中之至少一者。舉例而言,在一些非限制性實施例中,封包資料可以包括使用者手冊。附加或可 替代地,每一媒體項目(例如,使用者手冊及/或類似者)可以包括複數個媒體標記(例如,書籤、索引、視訊及/或音訊媒體的時間標記/偏移、列號、行號、頁碼、章節號、部碼、及/或類似者)。附加或可替代地,對話模板(例如,第一對話模板、所選對話模板、及/或類似者)可以與媒體項目(使用者手冊及/或類似者)的至少一個媒體標記(例如,書籤及/或類似者)相關聯。
在一些非限制性實施例中,封包資料(例如,封包102cc及/或類似者)可以包括表格清單。附加或可替代地,對話模板(例如,第一對話模板、所選對話模板、及/或類似者)可以與表格清單的至少一個欄位(例如,表格清單的欄位、參數、列、行、頁、章節、部、及/或類似者)相關聯。
在一些非限制性實施例中,封包資料(例如,封包102cc及/或類似者)可以包括機器104(例如,第一工業機器)的至少一個機器介面(例如,機器閘道102e的第一機器介面)。附加或可替代地,(第一)機器介面可以包括與(第一)機器104相關聯的應用程式編程介面(API)、動態連結函式庫(DLL)、其組合、及/或類似者中之至少一者。
在一些非限制性實施例中,封包資料(例如,封包102cc及/或類似者)可以包括報告模板(例如,第一報告模板)。附加或可替代地,(第一)報告模板可以包括歷史欄位、過濾欄位、統計欄位、計算欄位、警告欄 位、警報欄位、機器狀態欄位、其組合、及/或類似者中之至少一者。在一些非限制性實施例中,報告模板可以客製化,及/或基於機器104、資料庫(例如,資料庫103a、外部資料庫103b、及/或類似者)、及/或與報告模板相關聯的裝置(例如,介面裝置101、使用者裝置105、遠端系統106、及/或類似者)。
如第3圖所示,在步驟320處,處理300可以包括接收自然語言輸入。舉例而言,智慧型工業輔助102可以從介面裝置101、使用者裝置105、使用者、及/或類似者接收自然語言輸入。在一些非限制性實施例中,自然語言輸入可以是音訊輸入(例如,聲音記錄及/或類似者)、文本輸入(例如,文本訊息、電子郵件、聊天訊息、由STT/ASR/NLU、HTML、及/或類似者建立的文本)、及/或類似者。
如第3圖所示,在步驟330處,處理300可以包括將自然語言輸入的至少一部分映射到對話模板中之一或更多者的至少一部分。舉例而言,智慧型工業輔助102可以將自然語言輸入的至少一部分映射到對話模板(例如,第一對話模板及/或類似者)的至少一部分。
在一些非限制性實施例中,封包資料(例如,封包102cc及/或類似者)可以包括複數個對話模板。附加或可替代地,智慧型工業輔助102可以依據第一自然語言輸入(例如,依據映射到自然語言輸入的對話模板的部分,依據使用者的推斷意圖,及/或類似者)來選擇對話 模板中之一者(例如,第一對話模板)。在一些非限制性實施例中,智慧型工業輔助102可以確定自然語言輸入的至少一部分可以映射到與至少一個(例如,第一)對話模板的預期對話資料相關聯的預期對話的至少一部分。舉例而言,智慧型工業輔助102可以將自然語言輸入的至少一部分與至少一個(例如,第一)對話模板的預期對話資料相關聯的預期對話的至少一部分進行匹配。在一些非限制性實施例中,智慧型工業輔助102可以將自然語言輸入的至少一部分映射到與至少一個(例如,第一)對話模板的參數資料相關聯的至少一個參數。在一些非限制性實施例中,智慧型工業輔助102可以將自然語言輸入的至少一部分映射到與至少一個(例如,第一)對話模板的群組資料相關聯的至少一個群組。在一些非限制性實施例中,當自然語言輸入包括轉換成語音的聲音/語音(例如,如本文所述的語音到文本、自動語音辨識、及/或類似者)時,可以依據文本準確地反映所說出的單詞的概率來計算(第一)信任度分數(例如,針對每一單詞、針對每一單詞群組(例如,短語)、針對整個輸入、及/或類似者)。附加或可替代地,可以針對將自然語言輸入映射到與至少一個對話模板的預期對話資料相關聯的預期對話(例如,封包資料102c的所有對話模板、對話模板的子集(例如,具有與自然語言輸入匹配的至少一個單詞)、及/或類似者)來計算(第二)信任度分數。附加或可替代地,可以依據與每一對話模板(例如,對話模板的子集)相關聯的 (第二)信任度分數來將對話模板(例如,對話模板的子集)進行排名。附加或可替代地,可以選擇與最高(第二)信任度分數相關聯的對話模板,來作為自然語言輸入所映射的對話模板。附加或可替代地,若信任度分數(例如,第二信任度分數、第一與第二信任度分數的組合、及/或類似者)足夠高(例如,高於第一閾值),則智慧型工業輔助102可以繼續使用所選的對話模板。附加或可替代地,若信任度分數(例如,第二信任度分數、第一與第二信任度分數的組合、及/或類似者)低於第一閾值且高於第二閾值(可能小於第一閾值),則智慧型工業輔助102可以請求確認(例如,如本文所述傳送請求確認的提示)。附加或可替代地,若信任度分數(例如,第二信任度分數、第一與第二信任度分數的組合、及/或類似者)低於第二閾值,則智慧型工業輔助102可以拒絕輸入(例如,如本文所述,傳送指示沒有確定映射的警告,傳送請求附加自然語言輸入的提示,及/或類似者)。
在一些非限制性實施例中,智慧型工業輔助102可以確定自然語言輸入不足以映射到對話模板的一部分(例如,第一對話模板)。舉例而言,自然語言輸入可能缺少用於映射到對話模板的一或更多個參數/欄位的合適資訊/資料。在一些非限制性實施例中,智慧型工業輔助102可以將請求附加輸入的提示傳送給使用者(例如,介面裝置101、使用者裝置105、及/或類似者)。附加或可替代地,智慧型工業輔助102可以從使用者(例 如,介面裝置101、使用者裝置105、及/或類似者)接收第二自然語言輸入。在一些非限制性實施例中,智慧型工業輔助102可以將第二自然語言輸入的至少一部分映射到(第一)對話模板(例如,資訊/資料無法依據初始自然語言輸入進行映射的第一對話模板的參數/欄位)。
在一些非限制性實施例中,對話模板(例如,第一對話模板)可以包括與複數個參數相關聯的複數個提示。附加或可替代地,智慧型工業輔助102可以確定自然語言輸入的至少一部分映射到複數個參數中之至少一者。在一些非限制性實施例中,智慧型工業輔助102可以針對並未映射自然語言輸入的一部分的複數個參數中的各別參數將請求附加輸入的複數個提示中的至少一個提示傳送給使用者(例如,介面裝置101、使用者裝置105、及/或類似者)。附加或可替代地,智慧型工業輔助102可以從使用者(例如,介面裝置101、使用者裝置105、及/或類似者)接收進一步的自然語言輸入,及/或將另外的自然語言輸入的至少一部分映射到與各別參數相關聯的(第一)對話模板。在一些非限制性實施例中,智慧型工業輔助102可以針對並未映射自然語言輸入的一部分的每一參數重複傳送提示,並接收另外的自然語言輸入。
如第3圖所示,在步驟340處,處理300可以包括依據對話模板(例如,第一對話模板)確定至少一個命令。舉例而言,智慧型工業輔助102可以依據已經映射自然語言輸入(或其一部分)的對話模板(例如,第一對 話模板)來確定命令。在一些非限制性實施例中,命令可以基於與對話模板相關聯的至少一個動作。
在一些非限制性實施例中,智慧型工業輔助102可以依據與第一對話模板相關聯的動作資料、參數資料、群組資料、及/或類似者來確定命令。舉例而言,動作資料可以與至少一個命令相關聯(例如,識別、包括、及/或類似者)。附加或可替代地,命令可以包括基於映射到對話模板的參數資料的自然語言輸入的一部分的參數的值。附加或可替代地,命令可以依據映射到群組資料的自然語言輸入的該部分而與群組相關聯(例如,識別、定址、及/或類似者)。
在一些非限制性實施例中,智慧型工業輔助102可以依據第一對話模板傳送請求確認命令的提示(例如,傳送給介面裝置101、使用者裝置105、使用者、及/或類似者)。附加或可替代地,智慧型工業輔助102可以(例如,從介面裝置101、使用者裝置105、使用者、及/或類似者)接收第二自然語言輸入。附加或可替代地,智慧型工業輔助102可以依據第二自然語言輸入來確定使用者已經確認命令。
在一些非限制性實施例或態樣中,智慧型工業輔助102可以確定與工業機器104相關聯的第一命令。附加或可替代地,智慧型工業輔助102可以確定與資料庫(例如,資料庫103a及/或外部資料庫103b)相關聯的第二命令。
在一些非限制性實施例中,命令可以包括依據自然語言輸入的至少一部分來記錄筆記。
如第3圖所示,在步驟350處,處理300可以包括傳送與命令相關聯的命令資料。舉例而言,智慧型工業輔助102可以將與命令相關聯的命令資料傳送到介面裝置101、資料庫(例如,資料庫103a、外部資料庫103b、及/或經由資料庫介面102d的類似者)、工業機器104(例如,經由機器介面的機器控制器104a)、使用者裝置105、遠端系統106、及/或類似者中之至少一者。
在一些非限制性實施例中,命令資料可以與至少一個可執行的工業機器操作(例如,第一工業機器104的操作)相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:智慧型工業輔助102經由機器介面(例如,機器閘道102e的第一工業機器介面)將命令資料發送到第一工業機器104(例如,其第一機器控制器104a)。
在一些非限制性實施例中,命令資料可以與可檢索資料(例如,來自第一資料庫)相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:智慧型工業輔助102將命令資料(例如,經由資料庫介面102d)發送到第一資料庫(例如,資料庫103a及/或外部資料庫103b)。
在一些非限制性實施例中,依據映射到與(第一)對話模板的群組資料相關聯的群組的自然語言輸入的至少一部分,將命令(例如,藉由智慧型工業輔助102)傳送到至少一個實體(例如,工業機器104、資料庫103a、外部資料庫103b、及/或類似者)。
在一些非限制性實施例中,對話模板的至少一部分可以與工業機器及/或資料庫中之至少一者相關聯。舉例而言,智慧型工業輔助102(例如,應用程式管理器102c)可以確定對話模板的一或更多個部分映射到一或更多個資料庫(例如,資料庫103a及/或外部資料庫103b)及/或工業機器104。如下面參照第4圖進一步描述,在一些非限制性實施例中,映射可以基於至少一種人誌學關係。在一些非限制性實施例或態樣中,這種人誌學關係可以包括智慧型工業輔助102可執行的功能(例如,報告、控制、指導、計算、計劃、維護、修理、教導、預測、記錄、及/或類似者)與任務群組(例如,特定於這種使用者的角色(例如,機器操作者)的使用者的任務流程,及/或類似者)之間的映射及/或互相關聯。附加或可替代地,這種人誌學關係可以基於使用者的角色、一或更多個資料庫(例如,資料庫103a及/或外部資料庫103b)的內容、至少一個工業機器104可執行的功能、及/或類似者。
在一些非限制性實施例或態樣中,智慧型工業輔助102可以將與(第一)命令相關聯的(第一)命令資 料傳送到工業機器104。附加或可替代地,智慧型工業輔助102可以傳送與資料庫(例如,資料庫103a及/或外部資料庫103b)相關聯的(第二)命令資料。
在一些非限制性實施例或態樣中,智慧型工業輔助102可以根據來自複數個預定命令模板的命令模板來格式化命令。舉例而言,命令模板可以基於對話模板的該部分到工業機器104或資料庫(例如,資料庫103a及/或外部資料庫103b)的映射。在一些非限制性實施例或態樣中,命令模板的確定可以基於使用者的角色。附加或可替代地,命令模板的確定可以基於使用者的至少一個意圖。在一些非限制性實施例或態樣中,使用者的意圖可以基於使用者的角色。
在一些非限制性實施例中,命令資料可以與至少一個媒體標記(例如,複數個媒體標記中的)相關聯。舉例而言,每一媒體標記可以包括書籤、索引、視訊及/或音訊媒體的時間標記/偏移、列號、行號、頁碼、章節號、部碼、及/或類似者。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:(例如,藉由智慧型工業輔助102)發送命令資料(例如,發送到介面裝置101、使用者裝置105、及/或類似者),以顯示媒體項目的至少一個媒體標記(例如,使用者手冊(例如,顯示與媒體標記/書籤相關聯的使用者手冊的頁面、章節、及/或類似者))。
在一些非限制性實施例中,命令資料可以與表格清單的至少一個欄位(例如,表格清單的欄位、參數、列、行、頁、章節、部、及/或類似者)相關聯。附加或可替代地,傳送命令資料之步驟可以包括以下步驟:(例如,藉由智慧型工業輔助102)發送命令資料(例如,發送到介面裝置101、使用者裝置105、及/或類似者),以顯示表格清單的至少一個欄位。
在一些非限制性實施例中,工業機器104可以基於命令資料(例如,第一命令)執行功能(例如,處理及/或類似者)。附加或可替代地,工業機器104可以依據功能(例如,處理及/或類似者)(的執行、故障、及/或類似者)來確定(第一)回應資料。在一些非限制性實施例或態樣中,資料庫(例如,資料庫103a及/或外部資料庫103b)可以依據請求(例如,第二請求/查詢)來確定(第二)回應資料。
在一些非限制性實施例中,可以藉由智慧型工業輔助102將命令傳送到資料儲存裝置(例如,智慧型工業輔助、資料庫103a、及/或類似者的),以儲存依據自然語言輸入的至少一部分所記錄的筆記。
如第3圖所示,在步驟360處,處理300可以包括接收回應資料。舉例而言,智慧型工業輔助102可以回應於命令資料而接收回應資料(例如,從工業機器104、資料庫103a、外部資料庫103b、及/或類似者)。在一些非限制性實施例中,智慧型工業輔助102可以從工 業機器104接收(第一)回應資料。附加或可替代地,智慧型工業輔助102可以從資料庫(例如,資料庫103a及/或外部資料庫103b)接收(第二)回應資料。在一些非限制性實施例中,智慧型工業輔助102可以組合來自工業機器104的(第一)回應資料與來自資料庫(例如,資料庫103a及/或外部資料庫103b)的(第二)回應資料,以形成單一回應。
如第3圖所示,在步驟370處,處理300可以包括傳送回應。舉例而言,智慧型工業輔助102可以依據回應資料向使用者(例如,介面裝置101、使用者裝置105、遠端系統106、及/或類似者)傳送回應。
在一些非限制性實施例中,可以向使用者顯示對話視窗(例如,藉由介面裝置101、使用者裝置105、及/或類似者)。附加或可替代地,對話視窗可以包括自然語言輸入的文本(例如,來自使用者)與回應的文本(例如,來自智慧型工業輔助102)。
在一些非限制性實施例中,智慧型工業輔助102可以獨立於(例如,不接收,不回應,及/或類似者)任何自然語言輸入,而傳送某些資訊/資料(例如,傳送到介面裝置101、使用者裝置105、遠端系統106、及/或類似者)。舉例而言,智慧型工業輔助102可以(例如,從工業機器104、資料庫103a、外部資料庫103b、遠端系統106、及/或類似者)接收與事件(例如,第一事件)相關聯的事件資料(例如,第一事件資料)。在一些非限 制性實施例中,事件可以具有各種類型。舉例而言,類型可以是警告、警報、報告、排程事件及/或提醒、感測器讀取、及/或類似者。在一些非限制性實施例中,工業輔助102可以依據事件資料向使用者(例如,介面裝置101、使用者裝置105、遠端系統106、及/或類似者)傳送訊息、提示、及/或類似者。附加或可替代地,工業輔助102可以依據事件資料中斷回應資料的通訊、中斷/停止機器104的處理、及/或類似者(例如,當回應於事件資料而傳送訊息/提示時)。
在一些非限制性實施例中,智慧型工業輔助102可以接收附加的自然語言輸入。附加或可替代地,可以依據附加的自然語言輸入來重複處理300的至少一部分(例如,所有步驟、步驟的子集、任一步驟、及/或類似者)。
在一些非限制性實施例中,可以將附加的自然語言輸入映射到與智慧型工業輔助所重複的先前回應相關聯的對話模板。附加或可替代地,智慧型工業輔助102可以確定重複回應的命令,將命令傳送給自己,接收(例如,檢索)與先前回應相關聯的回應資料(例如,從智慧型工業輔助的資料儲存裝置、資料庫103a、及/或類似者),以及依據所檢索的回應資料來傳送回應(例如,先前回應的複製及/或重複)。
現在參照第4圖,第4圖係為可以與第3圖所示的處理300一起使用的用於建立人誌學關係的處理400 的非限制性實施例的流程圖。在一些非限制性實施例中,可以藉由智慧型工業輔助102(例如,智慧型工業輔助102的一或更多個裝置)執行(例如,完全、部分、及/或類似者)處理400的步驟中之一或更多者。在一些非限制性實施例中,處理400的步驟中之一或更多者可以藉由與智慧型工業輔助102分開或包括智慧型工業輔助102的另一系統、另一裝置、另一系統群組、或另一裝置群組(例如,介面裝置101(例如,介面裝置101的一或更多個裝置)、資料庫103a(例如,資料庫103a的一或更多個裝置)、外部資料庫103b(例如,外部資料庫103b的一或更多個裝置)、工業機器104(例如,工業機器104的一或更多個裝置)、使用者裝置105、及/或遠端伺服器106(例如,遠端伺服器106的一或更多個裝置))執行(例如,完全、部分、及/或類似者)。
在一些非限制性實施例中,人誌學可以包括研究(例如,觀察、接收相關活動資料、及/或類似者)群組(例如,具有相同或類似角色的使用者群組)中的至少一個成員。舉例而言,使用者群組可以包括具有作為(例如,特定類型的機器的、特定機器模型的、特定工廠中的一組機器的、及/或類似者的)機器操作者的角色的使用者群組、具有作為(例如,機器操作者的、工廠的、及/或類似者的)指導者的角色的使用者群組、具有作為製造工程師的角色的使用者群組、具有作為維護人員的角色的使用者群組、具有作為銷售人員的角色的使用者群組、具 有作為現場服務工程師的角色的使用者群組、及/或類似者。附加或可替代地,建立人誌學關係之步驟可以包括以下步驟:依據群組中的至少一個成員的至少一個活動來產生至少一個對話模板。
如第4圖所示,在步驟410處,處理400可以包括接收與至少一個使用者活動相關聯的使用者活動資料。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以從使用者(例如,工業機器的操作者及/或類似者)、從這樣的使用者的觀察者、及/或從類似者接收使用者活動資料。在一些非限制性實施例中,活動資料可以包括至少一種活動(例如,任務;動作;報告;其任一組合;任一序列、群組、流程、及/或其類似者;及/或類似者)。在一些非限制性實施例中,使用者的活動(或多個活動)可以特定於這樣的使用者(例如,機器操作者及/或類似者)的角色。
如第4圖所示,在步驟422處,處理400可以包括依據使用者活動資料來確定使用者任務。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以依據活 動資料來確定使用者任務。舉例而言,智慧型工業輔助102可以解析活動資料,以識別各個任務。
如第4圖所示,在步驟424處,處理400可以包括依據使用者任務來確定機器特徵。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以依據使用者任務來確定機器特徵(例如,功能、命令、變量、欄位、輸入、輸出、其任一組合、及/或類似者)。在一些非限制性實施例中,智慧型工業輔助102可以依據至少一個使用者任務與至少一個機器特徵之間的預定映射來確定機器特徵。附加或可替代地,智慧型工業輔助102可以從使用者(例如,機器操作者)、使用者的觀察者、及/或類似者接收輸入,以將至少一個使用者任務與至少一個機器特徵相關聯。
如第4圖所示,在步驟426處,處理400可以包括依據使用者任務及/或機器特徵來確定可能的機器警告。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以依據使用者任務及/或機器特徵來確定可能的機器警告(例如,警報、警示、及/或類似者)。在一些非限制 性實施例中,智慧型工業輔助102可以依據至少一個機器警告與至少一個機器特徵之間的預定映射來確定可能的機器警告。附加或可替代地,智慧型工業輔助102可以從使用者(例如,機器操作者)、使用者的觀察者、及/或類似者接收輸入,以將至少一個可能的機器警告與至少一個機器特徵相關聯。
如第4圖所示,在步驟428處,處理400可以包括確定可能的機器回應。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以依據使用者任務、機器特徵、可能的機器警告、其任一組合、及/或類似者中之至少一者來確定可能的機器回應(例如,輸出、回應訊息、報告、警告、及/或類似者)。在一些非限制性實施例中,智慧型工業輔助102可以依據至少一個可能的機器回應與至少一個機器特徵之間的預定映射來確定可能的機器回應。附加或可替代地,智慧型工業輔助102可以從使用者(例如,機器操作者)、使用者的觀察者、及/或類似者接收輸入,以將至少一個可能的機器回應與至少一個機器特徵相關聯。
如第4圖所示,在步驟430處,處理400可以包括確定對話序列。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助 102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以依據使用者任務、機器特徵、可能的機器警告、可能的機器回應、其任一組合、及/或類似者中之至少一者來確定至少一個對話序列。在一些非限制性實施例中,智慧型工業輔助102可以依據至少一個對話序列與使用者任務、機器特徵、可能的機器警告、可能的機器回應、其任一組合、及/或類似者中之至少一者之間的預定映射來確定對話序列。附加或可替代地,智慧型工業輔助102可以從使用者(例如,機器操作者)、使用者的觀察者、及/或類似者接收輸入,以將至少一個對話序列與使用者任務、機器特徵、可能的機器警告、可能的機器回應、其任一組合、及/或類似者中之至少一者相關聯。
如第4圖所示,在步驟440處,處理400可以包括確定智慧型工業輔助102的適用功能。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以依據使用者任務、機器特徵、可能的機器警告、可能的機器回應、對話序列、其任一組合、及/或類似者中之至少一者來確定智慧型工業輔助102的至少一個適用功能。在一些非限制性實施例中,智慧型工業輔助102可以依據工業輔助 102的至少一個功能與使用者任務、機器特徵、可能的機器警告、可能的機器回應、對話序列、其任一組合、及/或類似者中之至少一者之間的預定映射來確定智慧型工業輔助102的適用功能。附加或可替代地,智慧型工業輔助102可以從使用者(例如,機器操作者)、使用者的觀察者、及/或類似者接收輸入,以將工業輔助102的至少一個功能與使用者任務、機器特徵、可能的機器警告、可能的機器回應、對話序列、其任一組合、及/或類似者中之至少一者相關聯。
如第4圖所示,在步驟450處,處理400可以包括確定動作。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以依據智慧型工業輔助102的適用功能、使用者任務、機器特徵、可能的機器警告、可能的機器回應、對話序列、其任一組合、及/或類似者中之至少一者來確定至少一個動作。在一些非限制性實施例中,智慧型工業輔助102可以依據至少一個動作與智慧型工業輔助102的至少一個適用功能之間的預定映射來確定動作。附加或可替代地,智慧型工業輔助102可以從使用者(例如,機器操作者)、使用者的觀察者、及/或類似者接收輸入,以將至少一個動作與工業輔助102的適用功能、使用者任務、機器特徵、可能的機器警告、可能的機 器回應、對話序列、其任一組合、及/或類似者中之至少一者相關聯。
如第4圖所示,在步驟460處,處理400可以包括產生至少一個對話模板。舉例而言,智慧型工業輔助102(及/或與智慧型工業輔助102分開或包括智慧型工業輔助102的另一裝置(例如,介面裝置101、資料庫103a、外部資料庫103b、工業機器104、使用者裝置105、及/或遠端伺服器106))可以依據智慧型工業輔助102的適用功能、使用者任務、機器特徵、可能的機器警告、可能的機器回應、對話序列、動作、其任一組合、及/或類似者中之至少一者來產生對話模板。舉例而言,對話模板可以包括功能資料、群組資料、特徵資料、序列資料、參數資料、預期對話資料、動作資料、其任一組合、及/或類似者中之至少一者,其中每一者可以至少部分依據智慧型工業輔助102的適用功能、使用者任務、機器特徵、可能的機器警告、可能的機器回應、對話序列、動作、其任一組合、及/或類似者中之至少一者來確定。在一些非限制性實施例中,可以依據智慧型工業輔助102的適用功能、使用者任務、機器特徵、可能的機器警告、可能的機器回應、對話序列、動作、其任一組合、及/或類似者中之至少一者的至少一部分與功能資料、群組資料、特徵資料、序列資料、參數資料、預期對話資料、動作資料、其任一組合、及/或類似者中之至少一者之間的預定映射來產生對話模板。附加或可替代地,可以從使用者(例如, 機器操作者)、使用者的觀察者、及/或類似者接收輸入,以將智慧型工業輔助102的適用功能、使用者任務、機器特徵、可能的機器警告、可能的機器回應、對話序列、動作、其任一組合、及/或類似者中之至少一者的至少一部分與功能資料、群組資料、特徵資料、序列資料、參數資料、預期對話資料、動作資料、其任一組合、及/或類似者中之至少一者相關聯。
現在參照第5圖,第5圖係為根據第3圖所示的處理300的非限制性實施方案的示例性對話視窗的螢幕截圖。如第5圖所示,在一些非限制性實施例中,對話視窗可以包括未經請求的訊息502。舉例而言,未經請求的訊息可以是獨立於(例如,不接收、不回應、及/或類似者)任何自然語言輸入的某些資訊/資料。出於說明之目的,如第5圖所示,未經請求的訊息502可以與從智慧型工業輔助102到使用者的提示相關聯,以開啟(第一)自然語言輸入。
如第5圖所示,在一些非限制性實施例中,對話視窗可以包括第一自然語言輸入504。舉例而言,如本文所述,回應於智慧型工業輔助102接收第一自然語言輸入504,可以顯示第一自然語言輸入504。
如第5圖所示,在一些非限制性實施例中,如本文所述,對話視窗可以包括請求附加自然語言輸入的第一提示506。舉例而言,回應於智慧型工業輔助102確定 第一自然語言輸入504不足以(例如,缺少所需資訊)映射到至少一個對話模板,可以顯示第一提示506。
如第5圖所示,在一些非限制性實施例中,對話視窗可以包括第二自然語言輸入508。舉例而言,如本文所述,回應於智慧型工業輔助102接收第二自然語言輸入508,可以顯示第二自然語言輸入508。
如第5圖所示,在一些非限制性實施例中,如本文所述,對話視窗可以包括請求確認的第二提示510。舉例而言,如本文所述,回應於智慧型工業輔助102確定接收第二自然語言輸入508並將第一及第二自然語言輸入映射到至少一個對話模板,可以顯示第二提示506。
如第5圖所示,在一些非限制性實施例中,對話視窗可以包括第三自然語言輸入512。舉例而言,如本文所述,回應於智慧型工業輔助102接收第三自然語言輸入512,可以顯示第三自然語言輸入512。
如第5圖所示,在一些非限制性實施例中,如本文所述,對話視窗可以包括回應514。舉例而言,如本文所述,回應於智慧型工業輔助102傳送命令(例如,到工業機器104)及/或接收回應(例如,從工業機器104),可以顯示回應514。
出於說明之目的,表1包括智慧型工業輔助102的示例性功能的示例性描述:
Figure 108125255-A0305-02-0077-2
Figure 108125255-A0305-02-0078-4
出於說明之目的,表2包括用於智慧型工業輔助102的示例性對話模板的預期對話的實例:
Figure 108125255-A0305-02-0078-5
Figure 108125255-A0304-0002
儘管為了說明之目的已經依據當前視為最實用及較佳的實施例或態樣來詳細描述所揭示標的,但應理解,這樣的細節僅用於該目的,並且所揭示標的並不限於所揭示實施例或態樣,而相反地意欲覆蓋落在隨附申請專利範圍的精神及範圍內的修改及等同佈置。舉例而言,應理解,在可能的範圍內,所揭示之標的預期任何實施例的一或更多個特徵可以與任何其他實施例的一或更多個特徵組合。
100‧‧‧環境 101‧‧‧介面裝置 101a‧‧‧輸出部件 101b‧‧‧輸入/輸出部件 101c‧‧‧輸入部件 102‧‧‧智慧型工業輔助 102a‧‧‧自動語音識別(ASR)模組 102aa‧‧‧對話管理器 102ac‧‧‧決策引擎 102b‧‧‧自然語言理解(NLU)模組 102c‧‧‧應用程式管理器 102cc‧‧‧封包 102d‧‧‧資料庫輔助介面 102e‧‧‧機器閘道 102ee‧‧‧機器專用軟體 102f‧‧‧自然語言產生器(NLG)模組 102g‧‧‧文本到語音(TTS)模組 103a‧‧‧資料庫 103b‧‧‧外部資料庫 104‧‧‧工業機器 104a‧‧‧機器控制器 105‧‧‧使用者裝置 106‧‧‧遠端系統 200‧‧‧裝置 202‧‧‧匯流排 204‧‧‧處理器 206‧‧‧記憶體 208‧‧‧儲存部件 210‧‧‧輸入部件 212‧‧‧輸出部件 214‧‧‧通訊介面 300‧‧‧處理 310‧‧‧步驟 320‧‧‧步驟 330‧‧‧步驟 340‧‧‧步驟 350‧‧‧步驟 360‧‧‧步驟 370‧‧‧步驟 400‧‧‧處理 410‧‧‧步驟 422‧‧‧步驟 424‧‧‧步驟 426‧‧‧步驟 428‧‧‧步驟 430‧‧‧步驟 440‧‧‧步驟 450‧‧‧步驟 460‧‧‧步驟 502‧‧‧未經請求的訊息 504‧‧‧第一自然語言輸入 506‧‧‧第一提示 508‧‧‧第二自然語言輸入 510‧‧‧第二提示 512‧‧‧第三自然語言輸入 514‧‧‧回應
下面參照隨附圖式所圖示的示例性實施例更詳細地解釋所揭示之標的之附加優點及細節,其中:第1A圖至第1E圖係為可以根據本揭示標的之原理實現本文所述的方法、系統、及/或電腦程式產品的環境的非限制性實施例的圖;第2圖係為第1A圖至第1E圖的一或更多個裝置的部件的非限制性實施例的圖;第3圖係為根據本揭示標的之原理使用智慧型工業輔助的處理的非限制性實施例的流程圖;第4圖係為根據本揭示標的之原理建立人誌學關係的處理的非限制性實施例的流程圖;以及第5圖係為根據本揭示標的之原理的根據第3圖的處理的非限制實施方案的示例性對話視窗的螢幕截圖。
國內寄存資訊 (請依寄存機構、日期、號碼順序註記) 無
國外寄存資訊 (請依寄存國家、機構、日期、號碼順序註記) 無
300‧‧‧處理
310‧‧‧步驟
320‧‧‧步驟
330‧‧‧步驟
340‧‧‧步驟
350‧‧‧步驟
360‧‧‧步驟
370‧‧‧步驟

Claims (20)

  1. 一種使用智慧型工業輔助的方法,包含以下步驟:藉由至少一裝置接收活動資料,該活動資料依據對一使用者群組中的至少一使用者的人誌學研究,該使用者群組具有關聯於一工業機器的一角色;藉由該至少一裝置產生至少一個對話模板,各對話模板包含依據至少一人誌學關係中的一相應人誌學關係的一映射,該至少一人誌學關係將由一智慧型工業輔助能執行的至少一功能、以及依據該活動資料所確定的至少一任務相關聯,該活動資料來自對具有關聯於該工業機器之該角色的該使用者群組中之該至少一使用者的人誌學研究;藉由該智慧型工業輔助,從該至少一裝置接收包含該至少一個對話模板的封包資料;藉由該智慧型工業輔助,從具有該角色之該使用者群組中的一使用者接收一自然語言輸入;藉由該智慧型工業輔助,將該自然語言輸入的至少一部分映射到該至少一個對話模板的一第一對話模板,該第一對話模板包含:基於一第一人誌學關係的一第一映射,該第一人誌學關係將關聯於該使用者之該角色的該活動資料相關聯;基於該活動資料的至少一第 一任務;該工業機器或關聯於該至少一第一任務的一資料庫中之至少一者;依據該至少一第一任務和該工業機器或該資料庫中之該至少一者的一對話序列;依據該至少一第一任務、該工業機器或該資料庫中之該至少一者、及該對話序列,可由該智慧型工業輔助執行的至少一第一功能;及基於該至少一第一功能的至少一動作;藉由該智慧型工業輔助,依據該第一對話模板的該至少一動作來確定至少一個命令;以及藉由該智慧型工業輔助,向該工業機器或關聯於該第一對話模板的該資料庫中之該至少一者傳送與該至少一個命令相關聯的命令資料。
  2. 如請求項1所述之方法,進一步包含以下步驟:藉由該智慧型工業輔助,回應於該命令資料而接收回應資料;以及藉由該智慧型工業輔助,依據該回應資料而向該使用者傳送一回應。
  3. 如請求項2所述之方法,進一步包含以下步驟:藉由一使用者裝置來顯示一對話視窗,該對話視窗包含該自然語言輸入的文本以及該回應的文本。
  4. 如請求項1所述之方法,其中該封包資料進一步包含至少一個工業機器介面,該至少一個工業機器介面包括用於一第一工業機器的一第一工業機器介面,其中該第一對話模板係與至少一個可執行的工業機器操作相關聯,其中該命令資料係與該至少一個可執行的工業機器操作相關聯,以及其中傳送該命令資料之步驟包含以下步驟:藉由該智慧型工業輔助,經由該第一工業機器介面將該命令資料發送到該第一工業機器。
  5. 如請求項1所述之方法,其中該封包資料進一步包含至少一個資料庫介面,該至少一個資料庫介面包括用於一第一資料庫的一第一資料庫介面,其中該第一對話模板係與可檢索資料相關聯,其中該命令資料係與該可檢索資料相關聯,以及其中傳送該命令資料之步驟包含以下步驟:藉由該智慧型工業輔助,經由該第一資料庫介面將該命令資料發送到該第一資料庫。
  6. 如請求項1所述之方法,其中該至少一個對話模板包含複數個對話模板,該方法進一步包含以下步驟:藉由該智慧型工業輔助,依據該第一自然語言輸入從該等複數個對話模板中選擇該第一對話模板。
  7. 如請求項1所述之方法,進一步包含以下步驟:藉由該智慧型工業輔助,確定該自然語言輸入不足以映射到該第一對話模板的一部分;藉由該智慧型工業輔助,向該使用者傳送請求附加輸入的一提示;藉由該智慧型工業輔助,從該使用者接收一第二自然語言輸入;藉由該智慧型工業輔助,將該第二自然語言輸入的至少一部分映射到該第一對話模板的該部分。
  8. 如請求項1所述之方法,進一步包含以下步驟:藉由該智慧型工業輔助,依據該第一對話模板向該使用者傳送請求確認該至少一個命令的一提示;藉由該智慧型工業輔助,從該使用者接收一第二自然語言輸入;以及藉由該智慧型工業輔助,依據該第二自然語言輸入來確定該使用者已經確認該至少一個命令。
  9. 如請求項1所述之方法,其中該封包資料進一步包含一媒體項目、一表格清單、一報告模板、一機器介面、一資料庫介面、或其一組合中之至少一者。
  10. 如請求項9所述之方法,其中該媒體項目 包含一使用者手冊、一視訊記錄、一音訊記錄、或其一組合中之至少一者。
  11. 如請求項10所述之方法,其中該使用者手冊包含複數個媒體標記,其中該第一對話模板係與該等複數個媒體標記中的至少一個媒體標記相關聯,其中該命令資料係與該等複數個媒體標記中的該至少一個媒體標記相關聯,以及其中傳送該命令資料之步驟包含以下步驟:藉由該智慧型工業輔助,將該命令資料發送到一使用者裝置,以顯示該使用者手冊的該至少一個媒體標記。
  12. 如請求項9所述之方法,其中該封包資料包含一表格清單,其中該第一對話模板係與該表格清單的至少一個欄位相關聯,其中該命令資料係與該表格清單的該至少一個欄位相關聯,以及其中傳送該命令資料之步驟包含以下步驟:藉由該智慧型工業輔助,將該命令資料發送到一使用者裝置,以顯示該表格清單的該至少一個欄位。
  13. 如請求項9所述之方法,其中該封包資料包含一第一工業機器的一第一工業機器介面,其中該第一工業機器介面包含與該第一工業機器的一動態連結函式庫(DLL)相關聯的一應用程式編程介面(API)。
  14. 如請求項9所述之方法,其中該封包資料包含一第一報告模板,以及其中該第一報告模板包含一歷史欄位、一過濾欄位、一統計欄位、一計算欄位、一警告欄位、一警報欄位、一機器狀態欄位、或其一組合中之至少一者。
  15. 如請求項1所述之方法,其中該工業機器或該資料庫中之該至少一者包含一第一工業機器,該對話模板的該第一人誌學關係進一步將依據該至少一第一任務的該第一工業機器的至少一機器特徵、依據該至少一第一任務與該至少一機器特徵的至少一機器警告、與依據該至少一第一任務、該至少一機器特徵、與該至少一機器警告的該第一工業機器之至少一可能機器回應相關聯。
  16. 如請求項15所述之方法,其中該對話序列是依據該至少一第一任務、該至少一機器特徵、該至少一機器警告、及該至少一可能機器回應的。
  17. 如請求項16所述之方法,其中該智慧型工業輔助能執行的該至少一第一功能是依據該至少一第一任務、該至少一機器特徵、該至少一機器警告、該至少一可能機器回應、及該對話序列的。
  18. 如請求項1所述之方法,其中該至少一裝置包含該智慧型工業輔助。
  19. 一種使用智慧型工業輔助的系統,包含:至少一裝置,該至少一裝置經配置以:接收活動資料,該活動資料依據對一使用者群組中之至少一使用者的人誌學研究,該使用者群組具有與一工業機器相關聯的一角色;及產生至少一個對話模板,各對話模板包含依據至少一人誌學關係中的一相應人誌學關係的一映射,該至少一人誌學關係將由一智慧型工業輔助能執行的至少一功能、以及依據該活動資料所確定的至少一任務相關聯,該活動資料來自對具有關聯於該工業機器之該角色的該使用者群組中之該至少一使用者的人誌學研究;以及該智慧型工業輔助經配置以:經由該智慧型工業輔助的一決策引擎,從該至少一裝置接收包含該至少一個對話模板的封包資料;經由該智慧型工業輔助的一對話管理器,從具有該角色之該使用者群組中的一使用者接收一自然語言輸入;藉由該智慧型工業輔助的該決策引擎,將該自然語言輸入的至少一部分映射到該至少一個對話模板的一第一對話模板,該第一對話模板包含:基於 一第一人誌學關係的一第一映射,該第一人誌學關係將關聯於該使用者之該角色的該活動資料相關聯;基於該活動資料的至少一第一任務;該工業機器或關聯於該至少一第一任務的一資料庫中之至少一者;依據該至少一第一任務和該工業機器或該資料庫中之該至少一者的一對話序列;依據該至少一第一任務、該工業機器或該資料庫中之該至少一者、及該對話序列,可由該智慧型工業輔助執行的至少一第一功能;及基於該至少一第一功能的至少一動作;藉由該智慧型工業輔助的該決策引擎,依據該第一對話模板的該至少一動作來確定至少一個命令;以及藉由該智慧型工業輔助的該決策引擎,向該工業機器或關聯於該第一對話模板的該資料庫中之該至少一者傳送與該至少一個命令相關聯的命令資料。
  20. 一種使用智慧型工業輔助的電腦程式產品,該電腦程式產品包含至少一個非暫態電腦可讀取媒體,該至少一個非暫態電腦可讀取媒體包括一或更多個指令,在藉由至少一個處理器執行時,該一或更多個指令使該至少一個處理器以: 接收活動資料,該活動資料依據對一使用者群組中的至少一使用者的人誌學研究,該使用者群組具有關聯於一工業機器的一角色;產生至少一個對話模板,各對話模板包含依據至少一人誌學關係中的一相應人誌學關係的一映射,該至少一人誌學關係將由一智慧型工業輔助能執行的至少一功能、以及依據該活動資料所確定的至少一任務相關聯,該活動資料來自對具有關聯於該工業機器之該角色的該使用者群組中之該至少一使用者的人誌學研究;經由該智慧型工業輔助的一決策引擎,接收包含該至少一個對話模板的封包資料;經由該智慧型工業輔助的一對話管理器,從具有該角色之該使用者群組中的一使用者接收一自然語言輸入;藉由該智慧型工業輔助的該決策引擎,將該自然語言輸入的至少一部分映射到該至少一個對話模板的一第一對話模板,該第一對話模板包含:基於一第一人誌學關係的一第一映射,該第一人誌學關係將關聯於該使用者之該角色的該活動資料相關聯;基於該活動資料的至少一第一任務;該工業機器或關聯於該至少一第一任務的一資料庫中之至少一者;依據該至少一 第一任務和該工業機器或該資料庫中之該至少一者的一對話序列;依據該至少一第一任務、該工業機器或該資料庫中之該至少一者、及該對話序列,可由該智慧型工業輔助執行的至少一第一功能;及基於該至少一第一功能的至少一動作;藉由該智慧型工業輔助的該決策引擎,依據該第一對話模板的該至少一動作來確定至少一個命令;以及藉由該智慧型工業輔助的該決策引擎,向該工業機器或關聯於該第一對話模板的該資料庫中之該至少一者傳送與該至少一個命令相關聯的命令資料。
TW108125255A 2018-07-17 2019-07-17 用於智慧型工業輔助的方法、系統、及電腦程式產品 TWI734142B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201862699336P 2018-07-17 2018-07-17
US62/699,336 2018-07-17
US201962803018P 2019-02-08 2019-02-08
US62/803,018 2019-02-08

Publications (2)

Publication Number Publication Date
TW202006511A TW202006511A (zh) 2020-02-01
TWI734142B true TWI734142B (zh) 2021-07-21

Family

ID=67659945

Family Applications (2)

Application Number Title Priority Date Filing Date
TW108125255A TWI734142B (zh) 2018-07-17 2019-07-17 用於智慧型工業輔助的方法、系統、及電腦程式產品
TW110122009A TWI790648B (zh) 2018-07-17 2019-07-17 用於智慧型工業輔助的方法、系統、及電腦程式產品

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW110122009A TWI790648B (zh) 2018-07-17 2019-07-17 用於智慧型工業輔助的方法、系統、及電腦程式產品

Country Status (4)

Country Link
US (2) US11232262B2 (zh)
JP (1) JP2021530799A (zh)
TW (2) TWI734142B (zh)
WO (1) WO2020018525A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11144725B2 (en) * 2019-03-14 2021-10-12 International Business Machines Corporation Predictive natural language rule generation
JP2021071973A (ja) * 2019-10-31 2021-05-06 株式会社リコー 情報処理装置、情報処理システム、情報処理方法及びプログラム
US11756538B1 (en) * 2019-12-10 2023-09-12 Amazon Technologies, Inc. Lower latency speech processing
US11550605B2 (en) * 2020-06-30 2023-01-10 Kasisto, Inc. Building and managing cohesive interaction for virtual assistants
EP3979017A1 (en) * 2020-10-02 2022-04-06 ABB Schweiz AG Method for controlling a virtual assistant for an industrial plant
TWI817106B (zh) * 2021-04-14 2023-10-01 台達電子工業股份有限公司 查詢回饋裝置以及方法
TWI829084B (zh) * 2022-01-28 2024-01-11 致揚科技股份有限公司 監控系統

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5774841A (en) * 1995-09-20 1998-06-30 The United States Of America As Represented By The Adminstrator Of The National Aeronautics And Space Administration Real-time reconfigurable adaptive speech recognition command and control apparatus and method
US20130253929A1 (en) * 2005-08-29 2013-09-26 Voicebox Technologies, Inc. Mobile systems and methods of supporting natural language human-machine interactions
CN104636323A (zh) * 2013-11-07 2015-05-20 腾讯科技(深圳)有限公司 处理语音文本的方法及装置
TW201543240A (zh) * 2014-04-01 2015-11-16 Microsoft Technology Licensing Llc 針對自然語言輸入完成工作
US20170070783A1 (en) * 2015-07-31 2017-03-09 Promptu Systems Corporation Natural Language Navigation and Assisted Viewing of Indexed Audio Video Streams, Notably Sports Contests
US20180129181A1 (en) * 2016-08-17 2018-05-10 BioHiTech America, LLC Chatbot Systems and Methods for Industrial Machinery

Family Cites Families (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4462080A (en) 1981-11-27 1984-07-24 Kearney & Trecker Corporation Voice actuated machine control
US5369575A (en) * 1992-05-15 1994-11-29 International Business Machines Corporation Constrained natural language interface for a computer system
US5675752A (en) * 1994-09-15 1997-10-07 Sony Corporation Interactive applications generator for an interactive presentation environment
US20050005266A1 (en) * 1997-05-01 2005-01-06 Datig William E. Method of and apparatus for realizing synthetic knowledge processes in devices for useful applications
JP2000099306A (ja) * 1998-05-28 2000-04-07 Canon Inc 制御装置およびその制御方法およびその動作処理を実行するプログラムを記憶した記憶媒体
WO2001009724A1 (en) 1999-07-28 2001-02-08 American Management Systems, Incorporated Mobile maintenance assistant
US20100131078A1 (en) 1999-10-27 2010-05-27 Brown David W Event driven motion systems
DE10051450A1 (de) 2000-01-27 2001-08-16 Siemens Ag System und Verfahren zur Sprachverarbeitung
WO2001057711A1 (en) * 2000-02-02 2001-08-09 Searchlogic.Com Corporation Combinatorial query generating system and method
US6895380B2 (en) 2000-03-02 2005-05-17 Electro Standards Laboratories Voice actuation with contextual learning for intelligent machine control
US6757362B1 (en) 2000-03-06 2004-06-29 Avaya Technology Corp. Personal virtual assistant
JP2002007299A (ja) 2000-06-21 2002-01-11 Mitsubishi Electric Corp デバイス制御プログラム開発手段及び実行手段
US6928336B2 (en) 2001-02-12 2005-08-09 The Stanley Works System and architecture for providing a modular intelligent assist system
US6907317B2 (en) 2001-02-12 2005-06-14 The Stanley Works Hub for a modular intelligent assist system
US7653873B2 (en) * 2001-08-31 2010-01-26 Siemens Medical Solutions Health Services Corporation System and user interface supporting task schedule configuration
US7100123B1 (en) * 2002-01-25 2006-08-29 Microsoft Corporation Electronic content search and delivery based on cursor location
US20040034532A1 (en) 2002-08-16 2004-02-19 Sugata Mukhopadhyay Filter architecture for rapid enablement of voice access to data repositories
JP3990262B2 (ja) 2002-12-02 2007-10-10 ファナック株式会社 産業用ロボット
JP2004199478A (ja) * 2002-12-19 2004-07-15 Fuji Xerox Co Ltd 自然語入力装置及び自然語入力プログラム
US20040215706A1 (en) * 2003-03-31 2004-10-28 Lavender Scott D. System and method for updating software and version control in a production printer
KR20060077385A (ko) 2004-12-30 2006-07-05 두산인프라코어 주식회사 수치제어장치의 음성처리 시스템 및 방법
WO2007052285A2 (en) 2005-07-22 2007-05-10 Yogesh Chunilal Rathod Universal knowledge management and desktop search system
US20070049363A1 (en) 2005-08-23 2007-03-01 Green Howard D System and method for remotely controlling a device or system with voice commands
US7590541B2 (en) * 2005-09-30 2009-09-15 Rockwell Automation Technologies, Inc. HMI presentation layer configuration system
US9318108B2 (en) * 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US20080163054A1 (en) * 2006-12-30 2008-07-03 Pieper Christopher M Tools for product development comprising collections of avatars and virtual reality business models for avatar use
US20080183852A1 (en) 2007-01-26 2008-07-31 Pramer David M Virtual information technology assistant
US8838755B2 (en) 2007-03-23 2014-09-16 Microsoft Corporation Unified service management
US8196155B2 (en) 2008-10-08 2012-06-05 Oracle International Corporation XML-based event driven interface for OPC data access
US8504374B2 (en) 2009-02-02 2013-08-06 Jerry Lee Potter Method for recognizing and interpreting patterns in noisy data sequences
US10241752B2 (en) * 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9858925B2 (en) * 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US8386929B2 (en) 2010-06-22 2013-02-26 Microsoft Corporation Personal assistant for task utilization
US9064538B2 (en) * 2011-04-07 2015-06-23 Infosys Technologies, Ltd. Method and system for generating at least one of: comic strips and storyboards from videos
US9111477B2 (en) * 2011-07-29 2015-08-18 Xerox Corporation Language-based color calibration of displays
WO2013037033A1 (en) * 2011-09-12 2013-03-21 Research In Motion Limited Locale centric search optimization in response to user opt-in
JP5994150B2 (ja) * 2012-02-17 2016-09-21 株式会社アソシエ 文書作成方法、文書作成装置及び文書作成プログラム
WO2014172369A2 (en) 2013-04-15 2014-10-23 Flextronics Ap, Llc Intelligent vehicle for assisting vehicle occupants and incorporating vehicle crate for blade processors
US8823990B2 (en) * 2012-12-31 2014-09-02 International Business Machines Corporation Print job distribution within a printing system
US9244453B2 (en) 2013-06-05 2016-01-26 General Electric Company Dynamic wizard execution
US10055681B2 (en) 2013-10-31 2018-08-21 Verint Americas Inc. Mapping actions and objects to tasks
US9823811B2 (en) 2013-12-31 2017-11-21 Next It Corporation Virtual assistant team identification
US20150242182A1 (en) 2014-02-24 2015-08-27 Honeywell International Inc. Voice augmentation for industrial operator consoles
US20160125895A1 (en) 2014-02-24 2016-05-05 Honeywell International Inc. Voice interactive system for industrial field instruments and field operators
US20150242391A1 (en) * 2014-02-25 2015-08-27 Adobe Systems Incorporated Contextualization and enhancement of textual content
US9286892B2 (en) * 2014-04-01 2016-03-15 Google Inc. Language modeling in speech recognition
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US9643314B2 (en) * 2015-03-04 2017-05-09 The Johns Hopkins University Robot control, training and collaboration in an immersive virtual reality environment
US10264081B2 (en) * 2015-04-28 2019-04-16 Microsoft Technology Licensing, Llc Contextual people recommendations
US10042961B2 (en) * 2015-04-28 2018-08-07 Microsoft Technology Licensing, Llc Relevance group suggestions
DE112016002381T5 (de) * 2015-05-27 2018-03-22 Google LLC (n.d.Ges.d. Staates Delaware) Verbessern von Funktionalitäten von virtuellen Assistenten und Dialogsystemen über einen Plug-In-Marktplatz
JP6516585B2 (ja) * 2015-06-24 2019-05-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 制御装置、その方法及びプログラム
US10412160B2 (en) * 2015-08-05 2019-09-10 Facebook, Inc. Controlling a device cloud
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10191766B2 (en) * 2015-10-13 2019-01-29 Microsoft Technology Licensing, Llc Authoring and running task-based flows within a computing system
EP3173983A1 (en) 2015-11-26 2017-05-31 Siemens Aktiengesellschaft A method and apparatus for providing automatically recommendations concerning an industrial system
US10884503B2 (en) * 2015-12-07 2021-01-05 Sri International VPA with integrated object recognition and facial expression recognition
CN108604186B (zh) * 2015-12-21 2021-11-16 西安姆贝拉有限公司 用于创建和管理基于控制器的远程解决方案的方法和装置
EP3185094B1 (en) 2015-12-22 2020-02-26 Elco (Tianjin) Electronics Co., Ltd. Process control system and development system for human machine interface
US9826599B2 (en) 2015-12-28 2017-11-21 Amazon Technologies, Inc. Voice-controlled light switches
US10242316B2 (en) 2016-03-28 2019-03-26 Christoph Adam Kohlhepp Robotic capability model for artificial intelligence assisted manufacturing supply chain planning
US20170329466A1 (en) 2016-05-13 2017-11-16 Sap Se User interface application and digital assistant
CN106293727B (zh) * 2016-08-04 2020-10-27 深圳市微我科技有限公司 一种基于数据表的共享智慧的方法
US10798780B2 (en) * 2016-08-22 2020-10-06 Ciambella Ltd. Method and apparatus for creating and managing controller based remote solutions
US10430860B2 (en) * 2016-09-23 2019-10-01 Conduent Business Services, Llc Systems and methods for enhancing shopping experience in physical stores
US10491588B2 (en) * 2017-03-23 2019-11-26 Baldev Krishan Local and remote access apparatus and system for password storage and management
US20190034542A1 (en) * 2017-07-26 2019-01-31 Scripps Networks Interactive, Inc. Intelligent agent system and method of accessing and delivering digital files
US10614805B2 (en) * 2018-03-09 2020-04-07 Midea Group Co., Ltd. Voice-assisted restocking method and system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5774841A (en) * 1995-09-20 1998-06-30 The United States Of America As Represented By The Adminstrator Of The National Aeronautics And Space Administration Real-time reconfigurable adaptive speech recognition command and control apparatus and method
US20130253929A1 (en) * 2005-08-29 2013-09-26 Voicebox Technologies, Inc. Mobile systems and methods of supporting natural language human-machine interactions
CN104636323A (zh) * 2013-11-07 2015-05-20 腾讯科技(深圳)有限公司 处理语音文本的方法及装置
TW201543240A (zh) * 2014-04-01 2015-11-16 Microsoft Technology Licensing Llc 針對自然語言輸入完成工作
US20170070783A1 (en) * 2015-07-31 2017-03-09 Promptu Systems Corporation Natural Language Navigation and Assisted Viewing of Indexed Audio Video Streams, Notably Sports Contests
US20180129181A1 (en) * 2016-08-17 2018-05-10 BioHiTech America, LLC Chatbot Systems and Methods for Industrial Machinery

Also Published As

Publication number Publication date
WO2020018525A1 (en) 2020-01-23
US11232262B2 (en) 2022-01-25
TW202138964A (zh) 2021-10-16
TW202006511A (zh) 2020-02-01
US20220108077A1 (en) 2022-04-07
JP2021530799A (ja) 2021-11-11
TWI790648B (zh) 2023-01-21
US20200026757A1 (en) 2020-01-23

Similar Documents

Publication Publication Date Title
TWI734142B (zh) 用於智慧型工業輔助的方法、系統、及電腦程式產品
US10847139B1 (en) Crowd sourced based training for natural language interface systems
US11036774B2 (en) Knowledge-based question answering system for the DIY domain
JP6960914B2 (ja) ダイアログ・システムにおけるパラメータ収集および自動ダイアログ生成
US11651034B2 (en) Method, system, and computer program product for communication with an intelligent industrial assistant and industrial machine
JP2019503526A5 (zh)
US20150242182A1 (en) Voice augmentation for industrial operator consoles
TWI801630B (zh) 以具有一組預定命令的智慧型工業輔助來協調工業機器的方法、系統及電腦程式產品
TWI731374B (zh) 用於智慧型工業輔助的基於角色及技能的權限的方法、系統、及電腦程式產品
US11803592B2 (en) Method, system, and computer program product for developing dialogue templates for an intelligent industrial assistant
US20230360648A1 (en) Electronic device and method for controlling electronic device
Shoeb et al. Implementation of Artificial Intelligence Based Sustainable Smart Voice Assistance
CN117972107A (zh) 一种知识内容生成方法及电子设备
JP2006018344A (ja) 部品管理システム