TWI757108B

TWI757108B - 操作路徑產生方法及系統

Info

Publication number: TWI757108B
Application number: TW110107477A
Authority: TW
Inventors: 陳政隆; 春祿阮; 中山黎; 國越陳; 李佳運
Original assignee: 所羅門股份有限公司
Priority date: 2021-03-03
Filing date: 2021-03-03
Publication date: 2022-03-01
Also published as: TW202235229A

Abstract

一種由一操作路徑產生系統對一標記物件實施的操作路徑產生方法，該標記物件具有多個分別朝向不同方向的標記面，且該等標記面上分別具有多個外觀彼此不同的標記圖案。該操作路徑產生方法包含：(A)獲得一即時動態影像；(B)對該即時動態影像進行影像辨識，以從該即時動態影像辨識出該等標記圖案中被該即時動態影像所呈現出的其中至少一目標標記圖案；(C)根據該（等）目標標記圖案在該即時動態影像中的姿態變化產生一對應該標記物件的操作路徑，且該操作路徑能被用於控制一機械加工設備活動。

Description

操作路徑產生方法及系統

本發明是有關於一種操作路徑產生方法，特別是指一種涉及機械加工設備之控制的操作路徑產生方法。本發明還有關於能實施該操作路徑產生方法的一種操作路徑產生系統。

在現代社會中，許多產業會利用機械加工設備（例如機械手臂）來對待加工物進行加工處理作業。雖然機械加工設備能達成對待加工物進行全自動的作業，但是，機械加工設備進行全自動作業時的活動方式，則仍需仰賴人為操作進行預先設定，因此，如何讓使用者能夠以更加直觀、方便的方式來設定機械加工設備的活動方式，便成為一個值得探討的議題。

本發明的其中一目的，在於提供一種便於供使用者對機械加工設備的活動方式進行設定的操作路徑產生方法。

本發明操作路徑產生方法由一操作路徑產生系統對一標記物件實施，該操作路徑產生系統包含一拍攝單元及一處理單元，該標記物件具有多個分別朝向不同方向的標記面，且該等標記面上分別形成有多個外觀彼此不同的標記圖案，該操作路徑產生方法包含：(A)該處理單元獲得一由該拍攝單元進行拍攝所產生的即時動態影像。(B)該處理單元對該即時動態影像進行影像辨識，以從該即時動態影像辨識出該等標記圖案中被該即時動態影像所呈現出的其中至少一目標標記圖案。(C)該處理單元根據該（等）目標標記圖案在該即時動態影像中的姿態變化產生一對應該標記物件的操作路徑，且該操作路徑能被用於控制一機械加工設備活動。

在本發明操作路徑產生方法的一些實施態樣中，該標記物件具有一目標部分，並且，在步驟(C)中，該處理單元是根據該（等）目標標記圖案在該即時動態影像中的姿態變化計算出該標記物件的目標部分在三維空間中的姿態變化，再根據該目標部分在三維空間中的姿態變化過程產生該操作路徑。

在本發明操作路徑產生方法的一些實施態樣中，該操作路徑產生系統還包含一儲存單元及一顯示單元，該儲存單元儲存有一對應該機械加工設備的加工設備三維模型，並且，在步驟(C)中，該處理單元還產生一呈現出該加工設備三維模型的模擬動態影像並控制該顯示單元顯示該模擬動態影像，且根據該操作路徑控制該加工設備三維模型在該模擬動態影像中活動。

在本發明操作路徑產生方法的一些實施態樣中，該加工設備三維模型包含一加工處理模組部分，且該加工處理模組部分對應於該機械加工設備所包含的一加工處理模組，在步驟(C)中，該處理單元控制該加工設備三維模型在該模擬動態影像中活動的方式，包含使該加工處理模組部分在該模擬動態影像中以符合該操作路徑的方式活動。

在本發明操作路徑產生方法的一些實施態樣中，該儲存單元還儲存有一對應該加工設備三維模型的加工設備活動度資料，且該加工設備活動度資料指示出該加工設備三維模型之加工處理模組部分的可活動範圍，在步驟(C)中，當該處理單元根據該加工設備活動度資料及該操作路徑判斷出該加工設備三維模型的加工處理模組部分不允許以符合該操作路徑的方式活動時，該處理單元輸出一第一警示通知。

在本發明操作路徑產生方法的一些實施態樣中，該儲存單元還儲存有一對應於一待加工物的待加工物三維模型，在步驟(C)中，該模擬動態影像還呈現出該待加工物三維模型，並且，當該處理單元根據該待加工物三維模型與該加工設備三維模型在該模擬動態影像中的相對位置關係判斷出該操作路徑會造成該加工設備三維模型在活動過程中與該待加工物三維模型彼此部分重疊時，該處理單元輸出一第二警示通知。

在本發明操作路徑產生方法的一些實施態樣中，該操作路徑是用於控制該機械加工設備的活動方式，以使得該機械加工設備所包含的一加工處理模組以符合該操作路徑的方式活動而對一待加工物進行加工處理。

在本發明操作路徑產生方法的一些實施態樣中，每一標記圖案為一ArUco Marker。

本發明的另一目的，在於提供能實施該操作路徑產生方法的一種操作路徑產生系統。

本發明操作路徑產生系統適用於與一標記物件相配合，該標記物件具有多個分別朝向不同方向的標記面，且該等標記面上分別形成有多個外觀彼此不同的標記圖案，該操作路徑產生系統包含一拍攝單元及一電連接該拍攝單元的處理單元。其中，該處理單元用於：獲得一由該拍攝單元進行拍攝所產生的即時動態影像；對該即時動態影像進行影像辨識，以從該即時動態影像辨識出該等標記圖案中被該即時動態影像所呈現出的其中至少一目標標記圖案；根據該（等）目標標記圖案在該即時動態影像中的姿態變化產生一對應該標記物件的操作路徑，且該操作路徑能被用於控制一機械加工設備活動。

在本發明操作路徑產生系統的一些實施態樣中，該標記物件具有一目標部分，並且，該處理單元是根據該（等）目標標記圖案在該即時動態影像中的姿態變化計算出該標記物件的目標部分在三維空間中的姿態變化，再根據該目標部分在三維空間中的姿態變化過程產生該操作路徑。

在本發明操作路徑產生系統的一些實施態樣中，該操作路徑產生系統還包含電連接該處理單元的一儲存單元及一顯示單元，該儲存單元儲存有一對應該機械加工設備的加工設備三維模型，並且，該處理單元還產生一呈現出該加工設備三維模型的模擬動態影像並控制該顯示單元顯示該模擬動態影像，且根據該操作路徑控制該加工設備三維模型在該模擬動態影像中活動。

在本發明操作路徑產生系統的一些實施態樣中，該加工設備三維模型包含一加工處理模組部分，且該加工處理模組部分對應於該機械加工設備所包含的一加工處理模組，並且，該處理單元控制該加工設備三維模型在該模擬動態影像中活動的方式，包含使該加工處理模組部分在該模擬動態影像中以符合該操作路徑的方式活動。

在本發明操作路徑產生系統的一些實施態樣中，該儲存單元還儲存有一對應該加工設備三維模型的加工設備活動度資料，且該加工設備活動度資料指示出該加工設備三維模型之加工處理模組部分的可活動範圍，並且，當該處理單元根據該加工設備活動度資料及該操作路徑判斷出該加工設備三維模型的加工處理模組部分不允許以符合該操作路徑的方式活動時，該處理單元輸出一第一警示通知。

在本發明操作路徑產生系統的一些實施態樣中，該儲存單元還儲存有一對應於一待加工物的待加工物三維模型，且該模擬動態影像還呈現出該待加工物三維模型，並且，當該處理單元根據該待加工物三維模型與該加工設備三維模型在該模擬動態影像中的相對位置關係判斷出該操作路徑會造成該加工設備三維模型在活動過程中與該待加工物三維模型彼此部分重疊時，該處理單元輸出一第二警示通知。

在本發明操作路徑產生系統的一些實施態樣中，該操作路徑是用於控制該機械加工設備的活動方式，以使得該機械加工設備所包含的一加工處理模組以符合該操作路徑的方式活動而對一待加工物進行加工處理。

在本發明操作路徑產生系統的一些實施態樣中，每一標記圖案為一ArUco Marker。

本發明之功效在於：該操作路徑產生系統能根據該標記物件上之該（等）目標標記圖案在該即時動態影像中的姿態變化而產生該操作路徑，且該操作路徑能夠被用於控制該機械加工設備的活動，如此一來，在該標記物件位於該拍攝單元之拍攝範圍內的情況下，使用者便能夠利用該標記物件進行操作以勾勒出所欲的加工處理軌跡，從而以更加直觀、方便的方式來設定該機械加工設備的活動方式。

在本發明被詳細描述之前應當注意：若未特別定義，則本專利說明書中所述的「電連接」是泛指多個電子設備/裝置/元件之間透過導電材料彼此相連而實現的「有線電連接」，以及透過無線通訊技術進行單/雙向無線信號傳輸的「無線電連接」。並且，若未特別定義，則本專利說明書中所述的「電連接」亦泛指多個電子設備/裝置/元件之間彼此直接相連而形成的「直接電連接」，以及多個電子設備/裝置/元件之間還透過其他電子設備/裝置/元件彼此間接相連而形成的「間接電連接」。

參閱圖1，本發明操作路徑產生系統1的一實施例適用於與一標記物件2配合地運作而產生一對應該標記物件2的操作路徑。更明確地說，該操作路徑產生系統1適用於對該標記物件2實施一操作路徑產生方法以產生該操作路徑，並且，該操作路徑例如能被用於控制一機械加工設備3的活動方式，以使得該機械加工設備3能夠根據該操作路徑活動而能對一待加工物4進行加工處理。更明確地說，在本實施例的應用中，該機械加工設備3例如為一機械手臂設備，然而，本實施例亦可應用於其他種類的機械加工設備，例如三軸動龍門式結構的加工平台，或者是其他任何藉由在三維空間中活動來進行加工處理的加工設備，因此，本實施例並不限於被應用在機械手臂設備上。

在本實施例中，該操作路徑產生系統1包含一儲存單元11、一拍攝單元12、一顯示單元13，以及一電連接該儲存單元11、該拍攝單元12及該顯示單元13的處理單元14。

更具體地說，在本實施例中，該儲存單元11例如是被實施為一用於儲存數位資料的硬碟模組，然而，在其他的實施態樣中，該儲存單元11亦可被實施為其他種類的電腦可讀取記錄媒體，或者是不同種類之電腦可讀取記錄媒體的組合，而並不以本實施例為限。另一方面，該拍攝單元12例如是被實施為一台具有錄影功能的攝影裝置，該顯示單元13例如是被實施為一台顯示螢幕，而該處理單元14則例如被實施為一中央處理器，或者是被實施為一具有中央處理器的中央處理模組，但並不以此為限。

在本實施例中，該儲存單元11例如儲存有一對應該機械加工設備3的加工設備三維模型M1、一對應該加工設備三維模型M1的加工設備活動度資料D1，以及一對應該待加工物4的待加工物三維模型M2。其中，該加工設備三維模型M1及該待加工物三維模型M2可例如是藉由電腦輔助設計（Computer Aided Design）技術所實現的，然而，在其他實施例中，該加工設備三維模型M1及該待加工物三維模型M2的其中任一者亦可例如被實施為一個三維點雲模型，而並不以本實施例為限。

具體而言，若將該加工設備三維模型M1與該待加工物三維模型M2以顯示裝置顯示（例如以該顯示單元13顯示），則該加工設備三維模型M1與該待加工物三維模型M2被顯示出的外觀例如是分別與實際的該機械加工設備3及該待加工物4相符。

配合參閱圖2，在本實施例中，該加工設備三維模型M1例如包含一加工處理模組部分M11、多個活動關節部分M12以及多個連接臂部分M13，並且，該加工設備三維模型M1的加工處理模組部分M11例如是對應於該機械加工設備3所包含的一加工處理模組31，該加工設備三維模型M1的該等活動關節部分M12例如是分別對應於該機械加工設備3所包含的多個活動關節32，而該加工設備三維模型M1的該等連接臂部分M13則例如是分別對應於該機械加工設備3所包含的多個連接臂33。補充說明的是，基於該加工設備三維模型M1整體的外觀是與該機械加工設備3相符，因此，該加工設備三維模型M1的該加工處理模組部分M11、該等活動關節部分M12及該等連接臂部分M13被顯示裝置所顯示出的外觀及彼此之間的連接關係亦分別與該機械加工設備3的該加工處理模組31、該等活動關節32及該等連接臂33的實際外觀及連接關係相符。

另一方面，在本實施例的應用中，該機械加工設備3的該等活動關節32及該等連接臂33例如是如圖2所示地相互連接，且每一活動關節32例如能夠受控制地轉動，而使得該加工處理模組31能夠受該等活動關節32及該等連接臂33帶動地在三維空間中移動及轉動。進一步說明的是，該機械加工設備3的加工處理模組31例如是用於對該待加工物4進行特定的加工處理，而該待加工物4可例如為任何種類的工件、零件組合或半成品。並且，利用該加工處理模組31所進行的加工處理可例如為銲接、切割、噴漆、上膠、打磨或噴砂等，但並不以此為限。

應當理解的是，本實施例的該操作路徑產生系統1能夠應用在各種不同態樣的機械加工設備上，而圖2所示出的該機械加工設備3僅是為了便於對本實施例之加工設備三維模型M1進行說明而示出的示例性態樣，因此，本實施例所能應用的機械加工設備並不以圖2所示出的態樣為限，而該加工設備三維模型M1的具體實施態樣當然也並不以本實施例為限。

在本實施例中，該加工設備活動度資料D1例如包含多筆分別對應該等活動關節部分M12的關節轉動度資料，且每一關節轉動度資料例如指示出對應之活動關節部分M12在三個旋轉自由度（即俯仰、偏擺及翻滾）的可轉動角度範圍，因此，藉由該等關節轉動度資料，該加工設備活動度資料D1相當於指示出該加工設備三維模型M1的加工處理模組部分M11在虛擬三維空間之六自由度（Six degrees of freedom）的可活動範圍，也例如相當於指示出該機械加工設備3的加工處理模組31在實際三維空間之六自由度的可活動範圍，但並不以此為限。

參閱圖3，在本實施例的應用中，該標記物件2例如包含一桿狀部21，以及一連接於該桿狀部21之頂端的標記部22。其中，該桿狀部21例如適用於供使用者握持，且該桿狀部21的底端例如被作為該標記物件2所具有的一目標部分211，並且，該標記物件2的目標部分211例如是對應於該機械加工設備3之加工處理模組31所具有的一工具中心點（Tool Center Point，簡稱TCP），其中，該工具中心點例如是代表該加工處理模組31用於實現加工處理功能的加工位置，舉一例來說，假設該加工處理模組31為一銲接模組，則該工具中心點可例如為該銲接模組的銲槍槍口，舉另一例來說，假設該加工處理模組31為一噴漆模組，則該工具中心點可例如為該噴漆模組的噴漆口。

另一方面，該標記部22具有多個分別朝向不同方向的標記面221，且該等標記面221上分別形成有多個外觀彼此不同的標記圖案222。更詳細地說，在本實施例的應用中，該標記部22例如被實施為一個截角二十面體（英文為truncated icosahedron），而是由十二個正五邊形面及二十個正六邊形面所組成。其中，該十二個正五邊形面的其中一者與該桿狀部21的頂端連接，而另外十一個正五邊形面則分別被作為該標記部22的其中十一個標記面221。另一方面，該二十個正六邊形面例如分別被作為該標記部22的其中另外二十個標記面221，也就是說，在本實施例的應用中，該標記部22總共具有三十一個標記面221，且該三十一個標記面221上分別形成有三十一個外觀彼此不同的標記圖案222，但並不以此為限。

進一步地，在本實施例的應用中，每一個標記圖案222例如被實施為一個ArUco Marker，也就是一個二進制平方標記。具體來說，每一個二進制平方標記是由一個黑色外框及一個位於該黑色外框內的二進制矩陣所組成，其中，該二進制矩陣指示出該二進制平方標記本身所對應的識別資料（也就是ID），而該黑色方框則有利於讓該二進制平方標記在影像中易於被電腦視覺所辨識出。補充說明的是，在本實施例的其他應用中，該標記物件2的具體實施方式並不限於圖3所示的態樣，舉例來說，該標記部22亦可例如被實施為一立方體，因此，該等標記面221及該等標記圖案222的數量並不以本實施例之應用為限，並且，該等標記圖案222也並不限於被實施為ArUco Markers，而亦可例如被實施為一維或二維的條碼，或者是其他任何能被電腦視覺所辨識出的圖案。

參閱圖4並配合參閱圖1，在該標記物件2位於該拍攝單元12之拍攝範圍內的情況下，以下示例性地詳細說明本實施例的該操作路徑產生系統1如何對該標記物件2實施該操作路徑產生方法以產生該操作路徑。

首先，在步驟S1中，該處理單元14獲得一由該拍攝單元12進行即時拍攝所產生的即時動態影像。更明確地說，該即時動態影像例如是由該拍攝單元12進行即時錄影所產生的，並且，較佳地，該拍攝單元12例如是以單色（monochrome）模式進行即時錄影來產生該即時動態影像，如此一來，該即時動態影像會被呈現為灰階的動態影像，而使得該標記物件2上之標記圖案222的黑色外框在該即時動態影像中顯得更加顯著，故有助於讓該處理單元14更易於從該即時動態影像中辨識出該等標記圖案222。

在該處理單元14獲得該即時動態影像後，流程進行至步驟S2。

在步驟S2中，該處理單元14對該即時動態影像進行即時影像辨識，以從該即時動態影像辨識出該等標記圖案222中被該即時動態影像所呈現出的其中至少一個目標標記圖案222’。換句話說，在本實施例中，每一目標標記圖案222’係代表該等標記圖案222中被該即時動態影像所呈現出，且還被該處理單元14所辨識出的標記圖案222。具體舉例來說，假設所有該等標記圖案222中有其中十一者被該即時動態影像所呈現出，但所述的十一者中又只有其中七者被該處理單元14所辨識出，則被該處理單元14所辨識出的該七個標記圖案222即分別被作為本實施例中當前的七個目標標記圖案222’。

特別說明的是，若該標記物件2隨著使用者的操作轉動而產生角度變化，則被該即時動態影像所呈現出的該等標記圖案222（也就是被該拍攝單元12所拍攝到的該等標記圖案222）也會隨著該標記部22的角度變化而有所不同，因此，當該標記物件2在該即時動態影像中的姿態改變時，則該等目標標記圖案222’的數量以及被作為目標標記圖案222’的標記圖案222亦可能會隨之而動態改變。另外，基於該標記物件2的標記部22在本實施例的應用中共形成有三十一個朝向不同方向的標記圖案222，故只要該標記部22在該拍攝單元12的拍攝範圍中，便會有兩個以上的標記圖案222能夠被該處理單元14所辨識出，因此，為了便於說明，以下假設本實施例之目標標記圖案222’的數量隨時皆為多個。

補充說明的是，在本實施例中，該儲存單元11例如還預先儲存有一對應該等標記圖案222的標記圖案資料，其中，該標記圖案資料例如指示出該等標記圖案222的識別資料（ID）、尺寸、該等標記圖案222在該標記部22上的排列方式（相當於該等標記圖案222彼此之間的相對位置關係），以及每一標記圖案222在該標記部22上所朝向的方向（相當於該等標記圖案222彼此之間的相對角度關係），而該處理單元14例如是根據該標記圖案資料而從該即時動態影像中辨識出該等目標標記圖案222’，但並不以此為限。

在該處理單元14從該即時動態影像中辨識出該等目標標記圖案222’後，流程進行至步驟S3。

在步驟S3中，該處理單元14根據該等目標標記圖案222’在該即時動態影像中的姿態變化而即時地產生對應於該標記物件2的該操作路徑。而且，在本實施例中，該處理單元14例如是先根據該標記圖案資料及該等目標標記圖案222’在該即時動態影像中的姿態變化而即時計算出該標記物件2的目標部分211在三維空間中的姿態變化，再根據該目標部分211在三維空間中的姿態變化過程而即時地產生指示出該目標部分211之姿態變化過程的該操作路徑。

更詳細地說，在本實施例中，該等目標標記圖案222’在該即時動態影像中的姿態變化例如是包含該等目標標記圖案222’在該即時動態影像中的位置變化、角度變化、尺寸變化及形狀變化，但並不以此為限。另一方面，該標記物件2之目標部分211在三維空間中的姿態變化則例如代表該目標部分211在實際三維空間中的位置變化及角度變化。也就是說，該處理單元14在本實施例中例如是根據該等目標標記圖案222’的位置、角度、尺寸及形狀變化而計算出該標記物件2之目標部分211相對於該拍攝單元12的位置及角度變化，進而計算出該標記物件2之目標部分211在實際三維空間中的位置及角度變化，所以，該操作路徑相當於指示出該標記物件2之目標部分211在實際三維空間中之六自由度的活動軌跡，也就是該目標部分211在實際三維空間中的位移過程及轉動過程。

特別說明的是，在本實施例中，該操作路徑是由該處理單元14根據該標記物件2的姿態變化過程而「即時」產生的，也就是說，該處理單元14產生該操作路徑的運作是一個持續性的過程。更明確地說，在本實施例中，該處理單元14例如是每隔一段預定周期地根據該標記物件2的姿態變化而產生該操作路徑中最新的一部份，並將最新的該部分接續在該操作路徑中先前已被產生的其他部分之後。然而，在其他的實施例中，該處理單元14也可以是一次性地產生該操作路徑的整體，因此，該處理單元14產生該操作路徑的方式並不以本實施例為限。

如此一來，在該標記部22位於該拍攝單元12之拍攝範圍內的情況下，使用者便能夠將該標記物件2的目標部分211當作該機械加工設備3的加工處理模組31，並以手持該標記物件2的方式以該目標部分211在該待加工物4上進行模擬操作，藉此勾勒出所欲對該待加工物4進行的加工處理的軌跡，而使得該處理單元14在使用者操作該標記物件2的過程中根據該標記部22的姿態變化而即時產生對應的該操作路徑。

在該處理單元14產生該操作路徑的過程中，流程同時進行至步驟S4至步驟S6。

在步驟S4中，該處理單元14產生一模擬動態影像，並且控制該顯示單元13顯示該模擬動態影像。在本實施例中，該模擬動態影像例如呈現出該加工設備三維模型M1與該待加工物三維模型M2共同位於一虛擬三維空間中，且該加工設備三維模型M1與該待加工物三維模型M2在該虛擬三維空間中的相對位置關係例如是被預先設定好的，但並不以此為限。而且，該處理單元14還根據該操作路徑而即時地控制該加工設備三維模型M1在該模擬動態影像中活動。更詳細地說，在本實施例中，該處理單元14控制該加工設備三維模型M1在該模擬動態影像中活動的方式，例如包含使該加工設備三維模型M1的加工處理模組部分M11在該模擬動態影像中以符合該操作路徑的方式即時移動及/或轉動，以及控制該加工設備三維模型M1的該等活動關節部分M12及連接臂部分M13隨著該加工處理模組部分M11的活動而一併聯動。而且，該處理單元14根據該操作路徑控制該加工設備三維模型M1活動的方式，例如是與該機械加工設備3在實際運作時所允許的活動方式相符。

換句話說，該加工設備三維模型M1在該模擬動態影像中的活動不但是反映出使用者利用該標記物件2在該待加工物4上所進行的模擬操作，同時也相當於呈現出該機械加工設備3根據該操作路徑活動的模擬運作情形，藉此，使用者便能一邊以該標記物件2在該待加工物4上進行模擬操作，一邊參考該加工設備三維模型M1在該模擬動態影像中的對應作動。

在步驟S5中，該處理單元14持續地根據該加工設備活動度資料D1及該操作路徑判斷該加工設備三維模型M1的加工處理模組部分M11是否允許以符合該操作路徑的方式移動及轉動。並且，當該處理單元14判斷出該加工處理模組部分M11不允許以符合該操作路徑的方式移動及/或轉動時，該處理單元14例如產生一第一警示通知，並且透過該顯示單元13輸出該第一警示通知。藉此，該處理單元14能夠以該第一警示通知提示使用者該標記物件2之目標部分211的當前活動方式已經超出了該機械加工設備3之加工處理模組31在實際運作時的允許活動範圍。

更具體地說，由於該加工設備活動度資料D1指示出了該加工設備三維模型M1之該等活動關節部分M12的可轉動角度範圍，因此，該處理單元14能夠根據該加工設備活動度資料D1來判斷該等活動關節部分M12及該等連接臂部分M13相互聯動的活動度是否足以帶動該加工處理模組部分M11以符合該操作路徑的方式活動，也就是判斷該等活動關節部分M12及連接臂部分M13是否能夠帶動該加工處理模組部分M11移動至該虛擬三維空間中對應於該目標部分211之當前姿態的位置。

補充說明的是，在該處理單元14輸出該第一警示通知後，可選地，當該處理單元14判斷出該標記物件2之目標部分211在實際三維空間中的姿態轉變為符合該加工處理模組部分M11之允許活動範圍的姿態時，該處理單元14例如會自動或根據使用者操作地修正該操作路徑中超出該加工處理模組部分M11之允許活動範圍的部分，並且繼續進行該操作路徑的產生。

在步驟S6中，該處理單元14持續地根據該待加工物三維模型M2與該加工設備三維模型M1在該模擬動態影像中的相對位置關係判斷該操作路徑是否會造成該加工設備三維模型M1在活動過程中與該待加工物三維模型M2彼此部分重疊。並且，當該處理單元14判斷出該操作路徑會造成該加工設備三維模型M1與該待加工物三維模型M2彼此部分重疊時，該處理單元14例如產生一第二警示通知，並且透過該顯示單元13輸出該第二警示通知。藉此，該處理單元14能夠以該第二警示通知提示使用者該標記物件2之目標部分211的當前活動方式會造成該機械加工設備3與該待加工物4碰撞。

補充說明的是，在該處理單元14輸出該第二警示通知後，可選地，當該處理單元14判斷出該標記物件2之目標部分211在實際三維空間中的姿態轉變為不會造成該加工設備三維模型M1與該待加工物三維模型M2彼此部分重疊的姿態時，該處理單元14例如會自動或根據使用者操作地修正該操作路徑中會造成該加工設備三維模型M1與該待加工物三維模型M2彼此部分重疊的部分，並且繼續進行該操作路徑的產生。

以上即為本實施例之操作路徑產生方法的示例說明。

特別說明的是，在本實施例之操作路徑產生方法的實際實施過程中，步驟S1至步驟S6被該處理單元14所執行的期間例如是彼此相互重疊的，但並不以此為限。更明確地說，在本實施例中，在流程進行至步驟S2的情況下，該處理單元14仍會持續執行步驟S1。而且，在流程進行至步驟S3的情況下，該處理單元14仍會持續執行步驟S1及步驟S2。進一步地，在流程進行至步驟S4至步驟S6的情況下，該處理單元14也仍會持續執行步驟S1、步驟S2及步驟S3。

另一方面，在本實施例中，當該處理單元14在該操作路徑的產生過程中接收到一完成指令時，該處理單元14例如會根據該完成指令停止繼續產生該操作路徑，並將該操作路徑儲存至該儲存單元11，而結束該操作路徑產生方法的實施。並且，在本實施例之操作路徑產生方法的實施結束後，該操作路徑例如是被用於控制該機械加工設備3的活動方式，以使該機械加工設備3的加工處理模組31以符合該操作路徑的方式活動而對多個待加工物4進行加工處理，從而達成該機械加工設備3對該等待加工物4進行加工處理的全自動化作業。

更具體地舉例來說，被儲存於該儲存單元11的該操作路徑可例如被一用於控制該機械加工設備3活動的控制單元（圖未示）讀取，藉此，該控制單元便能根據該操作路徑控制該機械加工設備3的加工處理模組31以符合該操作路徑的方式活動，以對該等待加工物4進行全自動化的加工處理。補充說明的是，該控制單元可例如為一台獨立於該機械加工設備3的電腦設備，也可例如為該機械加工設備3本身所包含的控制模組。

然而，在另一實施例中，該處理單元14也可例如是在該操作路徑產生方法的實施過程中還即時地根據當前的該操作路徑控制該機械加工設備3實際運作。換句話說，在另該實施例中，使用者能夠藉由操作該標記物件2而使得該機械加工設備3隨著該標記物件2的姿態變化而即時運作，藉此達成對該機械加工設備3進行遠端即時操作的效果，而且，該處理單元14在另該實施例中並不一定要將該操作路徑儲存至該儲存單元11，因此，該操作路徑的應用方式並不以本實施例為限。

綜上所述，藉由對該標記物件2實施該操作路徑產生方法，該操作路徑產生系統1能根據該標記物件2上之該等目標標記圖案222’在該即時動態影像中的姿態變化而產生該操作路徑，且該操作路徑能夠被用於控制該機械加工設備3的活動方式，如此一來，在該標記物件2之標記部22位於該拍攝單元12之拍攝範圍內的情況下，使用者便能夠利用該標記物件2在該待加工物4上進行操作以勾勒出所欲的加工處理軌跡，從而以更加直觀、方便的方式來設定該機械加工設備3的活動方式，故確實能達成本發明之目的。

惟以上所述者，僅為本發明之實施例而已，當不能以此限定本發明實施之範圍，凡是依本發明申請專利範圍及專利說明書內容所作之簡單的等效變化與修飾，皆仍屬本發明專利涵蓋之範圍內。

1:操作路徑產生系統 11:儲存單元 12:拍攝單元 13:顯示單元 14:處理單元 2:標記物件 21:桿狀部 211:目標部分 22:標記部 221:標記面 222:標記圖案 222’:目標標記圖案 3:機械加工設備 31:加工處理模組 32:活動關節 33:連接臂 4:待加工物 M1:加工設備三維模型 M11:加工處理模組部分 M12:活動關節部分 M13:連接臂部分 M2:待加工物三維模型 D1:加工設備活動度資料 S1~S6:步驟

本發明之其他的特徵及功效，將於參照圖式的實施方式中清楚地呈現，其中：圖1是一方塊示意圖，示例性地繪示本發明操作路徑產生系統的一實施例、一適於與該實施例相配合的標記物件，以及適合被應用在該實施例的一機械加工設備及一待加工物；圖2是一示意圖，用於示例性地說明該實施例所儲存的一加工設備三維模型與該機械加工設備之間的對應關係；圖3是一立體示意圖，示例性地繪示該標記物件；及圖4是一流程圖，用於示例性地說明該實施例如何配合該標記物件地實施一操作路徑產生方法。

S1~S6:步驟

Claims

一種操作路徑產生方法，由一操作路徑產生系統對一標記物件實施，該操作路徑產生系統包含一儲存單元、一拍攝單元、一顯示單元及一處理單元，該儲存單元儲存有一對應一機械加工設備的加工設備三維模型，以及一對應該加工設備三維模型的加工設備活動度資料，該加工設備三維模型包含一加工處理模組部分，且該加工處理模組部分對應於該機械加工設備所包含的一加工處理模組，該加工設備活動度資料指示出該加工設備三維模型之加工處理模組部分的可活動範圍，該標記物件具有多個分別朝向不同方向的標記面，且該等標記面上分別形成有多個外觀彼此不同的標記圖案，該操作路徑產生方法包含：(A)該處理單元獲得一由該拍攝單元進行拍攝所產生的即時動態影像；(B)該處理單元對該即時動態影像進行影像辨識，以從該即時動態影像辨識出該等標記圖案中被該即時動態影像所呈現出的其中至少一目標標記圖案；及(C)該處理單元根據該(等)目標標記圖案在該即時動態影像中的姿態變化產生一對應該標記物件的操作路徑，且該操作路徑能被用於控制該機械加工設備活動，該處理單元還產生一呈現出該加工設備三維模型的模擬動態影像並控制該顯示單元顯示該模擬動態影像，且根據該操作路徑控制該加工設備三維模型的加工處理模組部分在該模擬動態影像中以符合該操作路徑的方式活動，並且，當該處理單元根據該加工設備活動度資料及該操作路徑判斷出該加工設備三維模型的加工處理模組部分不允許以符合該操作路徑的方式活動時，該處理單元輸出一第一警示通知。
如請求項1所述的操作路徑產生方法，其中，該標記物件具有一目標部分，並且，在步驟(C)中，該處理單元是根據該(等)目標標記圖案在該即時動態影像中的姿態變化計算出該標記物件的目標部分在三維空間中的姿態變化，再根據該目標部分在三維空間中的姿態變化過程產生該操作路徑。
如請求項1所述的操作路徑產生方法，其中，該儲存單元還儲存有一對應於一待加工物的待加工物三維模型，在步驟(C)中，該模擬動態影像還呈現出該待加工物三維模型，並且，當該處理單元根據該待加工物三維模型與該加工設備三維模型在該模擬動態影像中的相對位置關係判斷出該操作路徑會造成該加工設備三維模型在活動過程中與該待加工物三維模型彼此部分重疊時，該處理單元輸出一第二警示通知。
如請求項1所述的操作路徑產生方法，其中，該操作路徑是用於控制該機械加工設備的活動方式，以使得該機械加工設備所包含的一加工處理模組以符合該操作路徑的方式活動而對一待加工物進行加工處理。
如請求項1所述的操作路徑產生方法，其中，每一標記圖案為一ArUco Marker。
一種操作路徑產生系統，適用於與一標記物件相配合，該標記物件具有多個分別朝向不同方向的標記面，且該等標記面上分別形成有多個外觀彼此不同的標記圖案，該操作路徑產生系統包含一拍攝單元及一電連接該拍攝單元的處理單元，且該操作路徑產生系統適用於對該標記物件實施如請求項1至5其中任一項所述的操作路徑產生方法。