TWM611888U - 人工智慧輔助實境系統 - Google Patents
人工智慧輔助實境系統 Download PDFInfo
- Publication number
- TWM611888U TWM611888U TW110200811U TW110200811U TWM611888U TW M611888 U TWM611888 U TW M611888U TW 110200811 U TW110200811 U TW 110200811U TW 110200811 U TW110200811 U TW 110200811U TW M611888 U TWM611888 U TW M611888U
- Authority
- TW
- Taiwan
- Prior art keywords
- module
- model
- control module
- navigation
- control
- Prior art date
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
一種人工智慧輔助實境系統,包含一控制裝置,及一可視化虛擬裝置,該控制裝置包括一控制模組、一資料儲存模組及一智慧分析模組,該資料儲存模組儲存一廠區模型、至少一機台模型、一導覽流程,及一技術資料,該控制模組依據該廠區模型及該機台模型產生一可視化導覽模型,該可視化導覽模型為廠區機台的導覽服務,且該控制模組可接收至少一提問資料並檢索出對應的技術資料,該智慧分析模組用以分析常常出現的提問資料並將對應的技術資料更新於該導覽流程中,該可視化虛擬裝置可以虛擬實境的方式輸出該可視化導覽模型。
Description
本新型是有關於一種虛擬導覽服務,尤其是一種以虛擬實境提供廠區及機台之導覽服務的人工智慧輔助實境系統。
隨著科技產業的進步,許多產品的生產必須仰賴機台的加工,機台通常會放置於廠區中,且機台的設置位置會以產品的生產動線為基礎,以最佳的產品生產效率來設置機台的位置,所以一般廠區並不適合對外開放。
但是產品的生產業者又必須讓廠商或客戶瞭解設置於廠區的設置條件及機台的生產能力,以獲取更多的訂單。早期業者會以具有文字、圖片,及影片的簡報,來提供廠商或客戶認識廠區的設置並介紹設置的機台,以提供廠商或客戶評估是否可以進行產品的下單,但是一般的簡報無法提供更多的機台技術,如廠商或客戶要求進入廠區以瞭解產品的生產能力,就可能會對產品的生產造成影響,甚至在廠區中發生危險。
請參閱圖1,為中華民國專利I691926,說明一種結合擴增實境與虛擬實境的導覽裝置及導覽方法,一導覽裝置1包含一處理模組11、一影像擷取模組12、一儲存模組13、及一顯示單元14,該儲存模組13具有一擴充實境資料區131,及一虛擬實境資料區132,該處理模組11執行一導覽程式APP並載入一擴增實境導覽資訊,及一模式切換物件並輸出至該顯示單元14,當該導覽裝置1產生的一控制指令觸發該模式切換物件後,該導覽程式APP可使該導覽裝置1讀取一虛擬實境場景,並提供使用者沉浸式的導覽體驗。
雖然習知技術揭露了一種虛擬的導覽技術,但是實際運用於廠區或機台的導覽服務時,仍具有下列缺點:
一、無法互動:
習知技術雖然揭露了以虛擬實境的方式進行導覽服務,但是虛擬導覽的動畫為固定撥放,可提供的導覽資訊有限,且無法與導覽畫面進行互動。
二、無法語音提問:
習知的導覽程式並未建立機台的技術資料,無法回答使用者的任何問題,因此一般的導覽程式並不提供使用者以語音或其他方式提問問題。
三、無法主動告知:
由於一般的導覽服務可提供的技術有限,且於無法取得使用者的問題及解決問題之技術的條件下,無法主動於虛擬實境主動提醒使用者應該瞭解的技術。
因此,如何提供可以互動的虛擬實境導覽系統,並可獲取使用者的提問問題並立即回復正確的技術,更可將重要的技術資訊主動新增在虛擬實境的導覽服務中,是相關技術人員亟需努力的目標。
有鑑於此,本新型之目的是在提供一種一控制裝置,及一可視化虛擬裝置。
該控制裝置包括一控制模組、一與該控制模組連接之資料儲存模組,及一與該控制模組電連接之智慧分析模組,該資料儲存模組儲存一廠區模型、至少一機台模型、一導覽流程,及一技術資料,該控制模組依據該廠區模型,及該機台模型產生一可視化導覽模型,並依據該導覽流程更新該可視化導覽模型,該可視化導覽模型為廠區機台導覽服務,且該控制模組可接收至少一提問資料並至該資料儲存模組檢索出對應的技術資料,該智慧分析模組用以分析常常出現的提問資料並將對應的技術資料更新於該導覽流程中。
該可視化虛擬裝置與該控制裝置電連接,該可視化虛擬裝置輸出該可視化導覽模型。
本新型的又一技術手段,是在於上述之人工智慧輔助實境系統更包含一互動操作裝置,該互動操作裝置與該控制裝置電連接,該互動操作裝置可接收控制該控制模組的操作資訊並藉以更新該可視化導覽模型。
本新型的另一技術手段,是在於上述之互動操作裝置為一種手持式遙控器,該手持式遙控器可偵測雙手的動作並將偵測資訊傳輸至該控制模組。
本新型的再一技術手段,是在於上述之可視化虛擬裝置包括一聲音輸入模組,該控制模組可藉由該聲音輸入模組取得聲音。
本新型的又一技術手段,是在於上述之控制裝置更包括一與該控制模組電連接之問題分析模組,該問題分析模組提供該控制模組對該聲音輸入模組取得的聲音進行分析以解析出該提問資料。
本新型的另一技術手段,是在於上述之可視化虛擬裝置包括一聲音輸出模組,該控制模組可依據該導覽流程控制該聲音輸出模組發出對應該可視化導覽模型的聲音。
本新型的再一技術手段,是在於上述之資料儲存模組更儲存至少一對應該機台模型之運作態樣的機台運作流程,該控制模組可依據該機台運作流程來更新該可視化導覽模型。
本新型的又一技術手段,是在於上述之控制裝置更包括一與該控制模組電連接之操控模組,該操控模組可操控該控制模組以控制該可視化虛擬裝置的輸出資訊。
本新型的另一技術手段,是在於上述之操控模組選自於一滑鼠、一鍵盤、一麥克風、一顯示螢幕,及其組合。
本新型的再一技術手段,是在於上述之可視化虛擬裝置包括一影像輸出模組,該影像輸出模組可輸出虛擬實境(Virtual Reality;VR)或擴增實境(Augmented Reality;AR)。
本新型之有益功效在於,該控制模組可以虛擬實境的方式導覽使用者瞭解廠區的環境,及設置於廠區中之機台的設置態樣,且使用者可利用該聲音輸入模組以語音輸入提問資料,該控制模組進行分析以提供使用者相關技術,該智慧分析模組可統計常常出現的提問資料並將對應的技術資料新增在導覽流程中,可使之後的使用者在觀看廠區或機台的導覽時,使用者不需要再提問問題該控制模組就可以自動輸出技術資料。
有關本新型之相關申請專利特色與技術內容,在以下配合參考圖式之一個較佳實施例的詳細說明中,將可清楚地呈現。
參閱圖2,及圖3,為本新型一種人工智慧輔助實境系統之一較佳實施例,該人工智慧輔助實境系統包含一控制裝置3、一可視化虛擬裝置4,及一互動操作裝置5。
該控制裝置3是一種電腦裝置,可選自於個人電腦、筆記型電腦、觸控式平板電腦、觸控式智慧型通訊裝置,或其他的電腦裝置。該控制裝置3包括一控制模組31、一與該控制模組31連接之資料儲存模組32,及一與該控制模組31電連接之智慧分析模組33,其中,該控制模組31是一種具有控制晶片的電子電路,該資料儲存模組32為可儲存數位資料的記憶體或硬碟,該智慧分析模組33為執行程式的控制晶片。
該資料儲存模組32儲存一廠區模型、至少一機台模型、一導覽流程、一技術資料,及至少一機台運作流程。其中,該廠區模型是以廠區的實際尺寸等比例所建構之3D立體圖檔,而該機台模型也是以設置於廠區中之機台的實際尺寸等比例所建構之3D立體圖檔,該導覽流程是自動控制該廠區模型及該機台模型的可視角度,並以導覽的方式所建構的資料,其中,該導覽流程中也具有語音導覽的資料,該技術資料為該廠區模型及該機台模型之相關技術資料,該機台運作流程是模擬出該機台模型的運作或生產3D動畫資料。
該控制模組31依據該廠區模型,及該機台模型產生一可視化導覽模型,該可視化導覽模型是一種虛擬實境,並於該控制模組執行該導覽流程時可自動更新該可視化導覽模型的可視角度,以使該可視化導覽模型成為一種廠區及機台的導覽服務。
該可視化虛擬裝置4與該控制裝置3電連接,該控制模組31可驅動該可視化虛擬裝置4輸出該可視化導覽模型,以對一使用者A提供該廠區模型及該機台模型的自動導覽服務,令該使用者A不需要再進入實際生產運作的廠區中,就可以瞭解該廠區的設置態樣,及設置於廠區中之機台的工作能力,不僅不會影響現場的產品生產,更可以避免不熟悉機台運作的人員進入廠區而發生的工安事件。
該互動操作裝置5與該控制裝置3電連接,該互動操作裝置5可接收控制該控制模組31的操作資訊並藉以更新該可視化導覽模型。較佳地,該互動操作裝置5為一種手持式遙控器,該手持式遙控器可偵測該使用者A雙手的動作並將偵測資訊傳輸至該控制模組31,藉以控制該可視化導覽模型,並達成該使用者A與其互動的效果。
以該較佳實施例來說,該控制模組31可提供使用者A選擇自動導覽及互動導覽的兩種導覽模式,當執行自動導覽模式時,該控制模組31會執行該導覽流程,以使該可視化導覽模型自動進行該廠區模型及該機台模型的導覽服務,當執行互動導覽模式時,該控制模組31則以該互動操作裝置5的偵測資訊作為操作指令來更新該可視化導覽模型,提供使用者A自行調整該可視化導覽模型中之該廠區模型及該機台模型的觀看角度,也可以點選虛擬場景中所設定的技術指標或導引指標,該控制模組31執行相對應的技術資料或導引資料並由該可視化虛擬裝置4輸出,以達到導覽服務與使用者A互動的效果,由於可互動之虛擬場景為已知技術,詳細的互動技術於此不再詳述。
另外,該機台運作流程是依據該機台模型實際運作之影像所製作的虛擬3D影像資料,該控制模組31可依據該機台運作流程來更新該可視化導覽模型,舉例來說,該廠區模型中設置複數用以生產薄膜電晶體面板(TFT-LCD)之機台模型,該複數機台模型分別為第一清洗機、光阻塗佈機、曝光機、蝕刻機、去光阻機、第二清洗機及設置於機台之間的輸送帶。當該控制模組31執行該機台運作流程時,可於該可視化導覽模型中顯示出薄膜電晶體面板的生產動畫,讓使用者A可以瞭解薄膜電晶體面板的生產態樣,而且使用者A可控制該互動操作裝置5,以對其中一個機台模型的視角進行放大,以仔細觀看該機台模型的運作態樣,更可以點選想要瞭解的機台技術或機台規格,以使該控制模組31於該可視化導覽模型中進行技術影音介紹,讓廠商或客戶可以更加瞭解機台的生產能力,藉此讓廠商及客戶信任機台的產品製造能力以取得更多的產品訂單。
該控制裝置3更包括一與該控制模組31電連接之操控模組35,該操控模組35可提供一導覽人員(圖式未示出)進行操控,較佳地,該導覽人員可以選擇以自動導覽模式,或是互動導覽模式進行導覽服務,或是在導覽該廠區模型及該機台模型時指定相關的技術進行影音的撥放,或是直接於該可視化導覽模型輸出該導覽人員的聲音以進行技術講解,其中,該操控模組35選自於一滑鼠351、一鍵盤352、一麥克風353、一顯示螢幕354,及其組合,以使該導覽人員可以操控該控制模組31。
該可視化虛擬裝置4包括一影像輸出模組41、一聲音輸入模組42,及一聲音輸出模組43,該影像輸出模組41是一種可輸出虛擬實境(Virtual Reality;VR)或擴增實境(Augmented Reality;AR)的設備,可對該使用者A輸出虛擬實境,該控制模組31可藉由該聲音輸入模組42取得該使用者A的聲音,該控制模組31可控制該聲音輸出模組43對該使用者A輸出聲音,且該導覽流程中的影音資訊可分別由該影像輸出模組41及該聲音輸出模組43進行輸出,藉以對該使用者A提供該廠區模型及該機台模型之虛擬實境的導覽服務。
該控制裝置3更包括一與該控制模組31電連接之問題分析模組34,該問題分析模組34可提供該控制模組31對該聲音輸入模組42取得的聲音進行分析以解析出一提問資料,該控制模組31可依據該提問資料檢索相關的技術資料,並將該技術資料更新於該可視化導覽模型中,讓使用者A提出該提問資料後可立即取得相關的技術,舉例來說,該使用者A使用該聲音輸入模組42以語音提問該機台模型的型號問題,該控制模組31解析語音並取得提問資料,再立即檢索相關技術並更新於該可視化導覽模型中,以使該使用者A提問後可以立即取得該機台模型的型號資料。
較佳地,該問題分析模組34可提供該控制模組31分析出各國的語言並解析出該提問資料,當解析的提問資料未檢索出對應的技術資料時,該控制模組31通知導覽人員或相關技術人員,以於該資料儲存模組32中新增相關的技術資料,以使該控制模組31再遇到相同的提問資料時,可以於該可視化導覽模型回覆相對應的技術資料。
除此之外,該控制模組31也會記錄使用者A的提問資料,以及對應的技術資料,供該智慧分析模組33分析出常常出現的提問資料,並將對應的技術資料更新於該導覽流程中,當該控制模組31導覽到相關的廠區模型或機台模型時,自動輸出該廠區模型或該機台模型的技術資料,使用者A不需要再提出問題即可獲取技術。
配合參閱圖4,舉例來說,該影像輸出模組41輸出的可視化導覽模型可以虛擬出一廠房61,該廠房61具有一第一場區611及一第二廠區612,該第一場區611中設置用以生產產品的三組第一機台621,該第二廠區612中設置用以測試產品的三組第二機台622。
當該導覽人員藉由該控制模組31設定自動導覽模式時,該控制模組31執行該導覽流程,以自動改變該可視化導覽模型的方式提供導覽服務。當導覽人員藉由該控制模組31設定互動導覽模式時,可提供使用者A操作該互動操作裝置5以自行控制該可視化導覽模型的視角及距離,並自行選擇相關的技術資料以進行導覽服務。實際實施時,該廠區模型及該機台模型應以實際廠區的設置態樣進行設計,不應以本較佳實施例的舉例為限。
由上述說明可知,本新型一種人工智慧輔助實境系統確實具有下列功效:
一、互動導覽:
該使用者A可以操作該互動操作裝置5,以改變該可視化導覽模型的觀看角度及距離,並可針對有興趣的機台模型進行互動式操控,以互動的方式進行導覽服務。
二、分析語音解析問題:
當使用者A使用該可視化導覽模型來瞭解該廠區模型及該機台模型時可以使用語音提出問題,該控制模組31接收聲音資訊後可藉由該問題分析模組34解析出該提問資料,再至該資料儲存模組32中檢索出相關的技術資料並對該可視化導覽模型進行更新,以立即提供使用者A取得該提問資料的相關技術資料。
三、主動提供技術:
該智慧分析模組33可以分析出使用者A常常提問的問題,以統計出使用者A最想瞭解的技術,並將對應的技術資料新增於該導覽流程中,以使該控制模組31執行該導覽流程時主動告知使用者A技術資料,而不需要使用者A提出問題。
綜上所述,本新型所提供的虛擬導覽服務可讓使用者A不需要實際進入的廠區中就可以認識廠區及機台,而配戴該可視化虛擬裝置4及操作該互動操作裝置5的使用者A也可以利用互動的方式進行導覽服務,且使用者A更可以直接利用語音提問問題,該控制裝置3立即檢索相關的技術以回覆該使用者A,另外,該智慧分析模組33可以分析出使用者A最想瞭解的技術,並於導覽服務時主動將技術告知使用者A,故確實可以達成本新型之目的。
惟以上所述者,僅為本新型之一個較佳實施例而已,當不能以此限定本新型實施之範圍,即大凡依本新型申請專利範圍及新型說明內容所作之簡單的等效變化與修飾,皆仍屬本新型專利涵蓋之範圍內。
A:使用者
APP:導覽程式
1:導覽裝置
11:處理模組
12:影像擷取模組
13:儲存模組
131:擴充實境資料區
132:虛擬實境資料區
14:顯示單元
3:控制裝置
31:控制模組
32:資料儲存模組
33:智慧分析模組
34:問題分析模組
35:操控模組
351:滑鼠
352:鍵盤
353:麥克風
354:顯示螢幕
4:可視化虛擬裝置
41:影像輸出模組
42:聲音輸入模組
43:聲音輸出模組
5:互動操作裝置
61:廠房
611:第一場區
612:第二廠區
621:第一機台
622:第二機台
圖1是一架構示意圖,說明中華民國專利I691926,一種結合擴增實境與虛擬實境的導覽裝置及導覽方法的裝置架構;
圖2是一架構示意圖,為本新型一種人工智慧輔助實境系統之一較佳實施例,說明一控制裝置、一可視化虛擬裝置,及一互動操作裝置的設置架構;
圖3是一側視示意圖,說明於該較佳實施例中,一使用者配戴該可視化虛擬裝置的側視態樣;及
圖4是一示意圖,說明於該較佳實施例中,該可視化虛擬裝置輸出的虛擬實境畫面。
3:控制裝置
31:控制模組
32:資料儲存模組
33:智慧分析模組
34:問題分析模組
35:操控模組
351:滑鼠
352:鍵盤
353:麥可風
354:顯示螢幕
4:可視化虛擬裝置
5:互動操作裝置
Claims (10)
- 一種人工智慧輔助實境系統,包含: 一控制裝置,包括一控制模組、一與該控制模組連接之資料儲存模組,及一與該控制模組電連接之智慧分析模組,該資料儲存模組儲存一廠區模型、至少一機台模型、一導覽流程,及一技術資料,該控制模組依據該廠區模型,及該機台模型產生一可視化導覽模型,並依據該導覽流程更新該可視化導覽模型,該可視化導覽模型為廠區機台導覽服務,且該控制模組可接收至少一提問資料並至該資料儲存模組檢索出對應的技術資料,該智慧分析模組用以分析常常出現的提問資料並將對應的技術資料更新於該導覽流程中;及 一可視化虛擬裝置,與該控制裝置電連接,該可視化虛擬裝置輸出該可視化導覽模型。
- 如請求項1所述之人工智慧輔助實境系統,更包含一互動操作裝置,該互動操作裝置與該控制裝置電連接,該互動操作裝置可接收控制該控制模組的操作資訊並藉以更新該可視化導覽模型。
- 如請求項2所述之人工智慧輔助實境系統,其中,該互動操作裝置為一種手持式遙控器,該手持式遙控器可偵測雙手的動作並將偵測資訊傳輸至該控制模組。
- 如請求項2所述之人工智慧輔助實境系統,其中,該可視化虛擬裝置包括一聲音輸入模組,該控制模組可藉由該聲音輸入模組取得聲音。
- 如請求項4所述之人工智慧輔助實境系統,其中,該控制裝置更包括一與該控制模組電連接之問題分析模組,該問題分析模組提供該控制模組對該聲音輸入模組取得的聲音進行分析以解析出該提問資料。
- 如請求項1所述之人工智慧輔助實境系統,其中,該可視化虛擬裝置包括一聲音輸出模組,該控制模組可依據該導覽流程控制該聲音輸出模組發出對應該可視化導覽模型的聲音。
- 如請求項1所述之人工智慧輔助實境系統,其中,該資料儲存模組更儲存至少一對應該機台模型之運作態樣的機台運作流程,該控制模組可依據該機台運作流程來更新該可視化導覽模型。
- 如請求項1所述之人工智慧輔助實境系統,其中,該控制裝置更包括一與該控制模組電連接之操控模組,該操控模組可操控該控制模組以控制該可視化虛擬裝置的輸出資訊。
- 如請求項8所述之人工智慧輔助實境系統,其中,該控制裝置之操控模組選自於一滑鼠、一鍵盤、一麥克風、一顯示螢幕,及其組合。
- 如請求項1所述之人工智慧輔助實境系統,其中,該可視化虛擬裝置包括一影像輸出模組,該影像輸出模組可輸出虛擬實境(Virtual Reality;VR)或擴增實境(Augmented Reality;AR) 。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW110200811U TWM611888U (zh) | 2021-01-22 | 2021-01-22 | 人工智慧輔助實境系統 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW110200811U TWM611888U (zh) | 2021-01-22 | 2021-01-22 | 人工智慧輔助實境系統 |
Publications (1)
Publication Number | Publication Date |
---|---|
TWM611888U true TWM611888U (zh) | 2021-05-11 |
Family
ID=77037857
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW110200811U TWM611888U (zh) | 2021-01-22 | 2021-01-22 | 人工智慧輔助實境系統 |
Country Status (1)
Country | Link |
---|---|
TW (1) | TWM611888U (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113239543A (zh) * | 2021-05-12 | 2021-08-10 | 鸣启数字科技(山东)有限公司 | 一种基于虚拟现实技术的数字工厂模拟系统 |
-
2021
- 2021-01-22 TW TW110200811U patent/TWM611888U/zh unknown
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113239543A (zh) * | 2021-05-12 | 2021-08-10 | 鸣启数字科技(山东)有限公司 | 一种基于虚拟现实技术的数字工厂模拟系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11227439B2 (en) | Systems and methods for multi-user virtual reality remote training | |
Segura et al. | Visual computing technologies to support the Operator 4.0 | |
Marques et al. | A conceptual model and taxonomy for collaborative augmented reality | |
Masoni et al. | Supporting remote maintenance in industry 4.0 through augmented reality | |
US9415509B2 (en) | Robot teach device with 3-D display | |
Szafir | Mediating human-robot interactions with virtual, augmented, and mixed reality | |
US20160253840A1 (en) | Control system and method for virtual navigation | |
EP1709519A1 (en) | A virtual control panel | |
US11922694B2 (en) | Systems and methods for augmented reality application for annotations and adding interfaces to control panels and screens | |
US11586852B2 (en) | System and method to modify training content presented by a training system based on feedback data | |
Dimitropoulos et al. | Operator support in human–robot collaborative environments using AI enhanced wearable devices | |
US11442685B2 (en) | Remote interaction via bi-directional mixed-reality telepresence | |
Zhang et al. | Evaluation of auditory and visual feedback on task performance in a virtual assembly environment | |
CN110466787A (zh) | 辅助被遮挡对象的操纵 | |
TWM611888U (zh) | 人工智慧輔助實境系統 | |
JP2022153509A (ja) | 測定支援システム | |
Ganlin et al. | Information integration and instruction authoring of augmented assembly systems | |
CN106200900A (zh) | 基于识别区域在视频中触发虚拟现实交互的方法及系统 | |
US11586946B2 (en) | System and method to generate training content based on audio and image feedback data | |
US11500915B2 (en) | System and method to index training content of a training system | |
Wolfartsberger et al. | Multi-modal visualization of working instructions for assembly operations | |
KR20180088005A (ko) | Vr 영상 저작 도구 및 vr 영상 저작 장치 | |
Lewis et al. | Usability of the remote console for virtual reality telerehabilitation: formative evaluation | |
Jalilvand et al. | An interactive digital twin of a composite manufacturing process for training operators via immersive technology | |
Marques et al. | An augmented reality framework for supporting technicians during maintenance procedures |