TWI777213B - 運輸監控方法及其系統 - Google Patents

運輸監控方法及其系統 Download PDF

Info

Publication number
TWI777213B
TWI777213B TW109126568A TW109126568A TWI777213B TW I777213 B TWI777213 B TW I777213B TW 109126568 A TW109126568 A TW 109126568A TW 109126568 A TW109126568 A TW 109126568A TW I777213 B TWI777213 B TW I777213B
Authority
TW
Taiwan
Prior art keywords
robotic arm
distance
processing device
sampling area
image
Prior art date
Application number
TW109126568A
Other languages
English (en)
Other versions
TW202207161A (zh
Inventor
陳毅達
謝文欽
Original Assignee
華邦電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 華邦電子股份有限公司 filed Critical 華邦電子股份有限公司
Priority to TW109126568A priority Critical patent/TWI777213B/zh
Priority to US17/380,017 priority patent/US12046492B2/en
Publication of TW202207161A publication Critical patent/TW202207161A/zh
Application granted granted Critical
Publication of TWI777213B publication Critical patent/TWI777213B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00—Manipulators not otherwise provided for
    • B25J11/0095—Manipulators transporting wafers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00—Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02—Sensing devices
    • B25J19/021—Optical sensing devices
    • B25J19/023—Optical sensing devices including video camera means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00—Programme-controlled manipulators
    • B25J9/16—Programme controls
    • B25J9/1674—Programme controls characterised by safety, monitoring, diagnostic
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L21/00—Processes or apparatus adapted for the manufacture or treatment of semiconductor or solid state devices or of parts thereof
    • H01L21/67—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere
    • H01L21/67005—Apparatus not specifically provided for elsewhere
    • H01L21/67242—Apparatus for monitoring, sorting or marking
    • H01L21/67259—Position monitoring, e.g. misposition detection or presence detection
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L21/00—Processes or apparatus adapted for the manufacture or treatment of semiconductor or solid state devices or of parts thereof
    • H01L21/67—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere
    • H01L21/67005—Apparatus not specifically provided for elsewhere
    • H01L21/67242—Apparatus for monitoring, sorting or marking
    • H01L21/67288—Monitoring of warpage, curvature, damage, defects or the like
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L21/00—Processes or apparatus adapted for the manufacture or treatment of semiconductor or solid state devices or of parts thereof
    • H01L21/67—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere
    • H01L21/677—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere for conveying, e.g. between different workstations
    • H01L21/67763—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere for conveying, e.g. between different workstations the wafers being stored in a carrier, involving loading and unloading
    • H01L21/67778—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere for conveying, e.g. between different workstations the wafers being stored in a carrier, involving loading and unloading involving loading and unloading of wafers
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L21/00—Processes or apparatus adapted for the manufacture or treatment of semiconductor or solid state devices or of parts thereof
    • H01L21/67—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere
    • H01L21/68—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere for positioning, orientation or alignment
    • H01L21/681—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere for positioning, orientation or alignment using optical controlling means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30164—Workpiece; Machine component

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Manufacturing & Machinery (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Power Engineering (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)
  • Liquid Crystal Substances (AREA)

Abstract

本發明提出一種運輸監控方法，包括以下步驟：通過影像擷取裝置從固定視野擷取機械手臂在承載容器外的監控影像，其中機械手臂用以將物品移入或移出承載容器；通過處理裝置從監控影像中獲得取樣區域；以及，通過處理裝置根據取樣區域來判斷機械手臂的傾斜狀態，其中當處理裝置判斷機械手臂傾斜時，由處理裝置發出警示信號。一種運輸監控系統亦被提出。

Description

運輸監控方法及其系統
本發明是有關於一種物品搬運技術，且特別是有關於一種運輸監控方法及其系統。
在一般的半導體製程中，晶圓(Wafer)會在製程模組與儲存模組間傳輸。當要將晶圓載入製程設備時，利用機械手臂(Robot Blade)將晶圓從晶圓載具(FOUP)中取出後傳輸至製程反應室內進行製程反應，並於製程結束後再將晶圓送回晶圓載具中。然而若是機械手臂發生傾斜或是位置偏移，則取放晶圓的過程中會刮傷晶圓，導致不良品產生。因此為了要避免晶圓受損，如何在運輸過程中即時監控機械手臂的狀態成為一個很重要的問題。
本發明提供一種運輸監控方法及其系統，能夠即時監控機械手臂是否發生傾斜，以避免機械手臂在搬運過程中損害物品。
本發明的一實施例提出一種運輸監控方法，包括以下步驟：通過影像擷取裝置從固定視野擷取機械手臂在承載容器外的監控影像，其中機械手臂用以將物品移入或移出承載容器；通過處理裝置從監控影像中獲得取樣區域；以及，通過處理裝置根據取樣區域來判斷機械手臂的傾斜狀態，其中當處理裝置判斷機械手臂傾斜時，由處理裝置發出警示信號。
本發明的一實施例提出一種運輸監控系統，包括影像擷取裝置與處理裝置。影像擷取裝置用以從固定視野擷取機械手臂在承載容器外的監控影像，其中機械手臂用以將物品移入或移出承載容器。處理裝置電性連接影像擷取裝置與機械手臂，且用以根據監控影像的取樣區域來判斷機械手臂的傾斜狀態，其中當處理裝置判斷機械手臂傾斜時，處理裝置發出警示信號。
基於上述，本發明實施例提出的運輸監控方法及其系統會藉由擷取機械手臂在承載容器外的影像作為監控影像，其中監控影像的視野範圍是固定的。對監控影像進行影像處理並且從中擷取出一取樣範圍。處理裝置根據監控影像的取樣區域來判斷機械手臂的傾斜狀態，並對應的發出警示信號以提醒操作人員機械手臂有傾斜的狀況發生。
圖1是依照本發明的一實施例的一種運輸監控系統的示意圖，圖2是依照本發明的一實施例的一種晶圓的運輸過程示意圖。請一併參照圖1與圖2，運輸監控系統100用於監控機械手臂120的傾斜狀態，其中機械手臂120用以將物品移入或移出承載容器。運輸監控系統100包括處理裝置110與影像擷取裝置130，其中處理裝置110電性連接機械手臂120與影像擷取裝置130。
在本實施例中，運輸監控系統100應用於圖2的晶圓傳輸系統(Wafer Transfer System)。在圖2中，物品WA是晶圓，承載容器200是晶圓載具(front opening unified pod，FOUP)。機械手臂120可以將晶圓送入晶圓載具或是自晶圓載具取出晶圓。晶圓載具（承載容器200）會具有多個收納槽（以四個收納槽210~240為例），這些收納槽210～240沿Z方向排列，可個別收納晶圓。
機械手臂120在Z方向上不同高度可分別對應晶圓載具中收納槽210～240，以選擇將晶圓移出或移入對應的收納槽。機械手臂120則沿X方向延伸。換句話說，晶圓可平躺於機械手臂120的X-Y平面上。
影像擷取裝置130例如包括電荷耦接元件（charge coupled device，CCD）或互補式金屬氧化物半導體影像感測元件(CMOS image sensor)。影像擷取裝置130配置在承載容器200旁邊，用以拍攝機械手臂120的影像以產生至少一監控影像。處理裝置110例如包括中央處理單元（Central Processing Unit，CPU），或是其他可程式化之一般用途或特殊用途的微處理器（Microprocessor）、數位信號處理器（Digital Signal Processor，DSP）、可程式化控制器、特殊應用積體電路（Application Specific Integrated Circuit，ASIC）或其他類似元件或上述元件的組合，本發明並不限於此。處理裝置110可以處理上述的監控影像，藉此判斷機械手臂120是否發生傾斜或是機械手臂120的位置是否正確。
圖3是依照本發明的一實施例的一種運輸監控方法的示意圖。運輸監控系統100適於實施圖3的運輸監控方法300。以下通過運輸監控系統100的元件符號來說明運輸監控方法300的實施方式。
在步驟S310中，影像擷取裝置130從固定視野擷取機械手臂120在承載容器200外的監控影像。換言之，影像擷取裝置130拍攝的角度是固定的，拍攝範圍也是固定的。在一實施例中，影像擷取裝置130會在機械手臂120從承載容器200移出物品WA（例如晶圓）之前擷取監控影像。也就是說，監控影像是機械手臂120正要伸入承載容器200以取出物品WA，但還未伸入時的影像。但本發明不限制於此。接著，在步驟S320中，處理裝置110從影像擷取裝置130接收監控影像，並且從該監控影像中獲得一取樣區域。下面的實施例會進一步說明如何獲得取樣區域。在步驟S330中，處理裝置110根據監控影像的取樣區域來判斷機械手臂120的傾斜狀態。如果處理裝置110判斷機械手臂120沒有傾斜，運作狀況正常，則回到步驟S310，繼續監控機械手臂120。當處理裝置110判斷機械手臂120傾斜時，進入步驟S340，處理裝置110發出一警示信號。在本實施例中，處理裝置110可以發送警示信號至晶圓傳輸系統的失效偵測與分類(Fault Detection and Classification, FDC)控制主機，以提醒操作人員機械手臂120異常。機械手臂120也可以回應於警示信號而自動停止後續動作，以避免取出晶圓時發生事故。
圖4是依照本發明的一實施例的一種監控影像的示意圖。請參照圖4，處理裝置110在接收到監控影像400後，會對監控影像400進行影像處理操作以從監控影像400中擷取出取樣區域410並且獲得取樣區域410的多個灰階值。舉例而言，處理裝置110執行一灰階轉換操作，將監控影像400轉換成灰階影像。在本實施例中，取樣區域400為監控影像400的一固定像素範圍，因此處理裝置110可以根據預定的像素座標而從轉換後的監控影像400擷取出取樣區域410，並且獲得取樣區域410的所有灰階值。處理裝置110根據上述的這些灰階值來進行圖像辨識以找出機械手臂120在取樣區域410中的位置。由於機械手臂120的外觀通常呈現金屬色澤，因此具有較高的灰階值，處理裝置110可以根據此特點，利用灰階差異來辨識機械手臂120。
處理裝置110根據這些灰階值獲得機械手臂120的至少二像素座標，並且根據上述至少二像素座標來判斷機械手臂120的傾斜狀態。本發明不限制處理裝置110所取得的像素座標數目。在圖4中，處理裝置110取得機械手臂120的四個像素座標P1～P4。在其他實施例中，處理裝置110可以只取得機械手臂120的二個像素座標或是更多個像素座標。
處理裝置110計算像素座標P1～P4至取樣區域410的邊界的距離D1～D4，並且根據距離D1～D4的至少其中之二來判斷機械手臂120是否傾斜以及其傾斜類型。
圖5是依照本發明的一實施例的一種機械手臂的傾斜類型的示意圖。請搭配圖4參照圖5。圖4中的座標P1與座標P2是位於機械手臂120的第一表面S1上不同位置的兩個像素座標，以下分別稱為第一像素座標P1與第二像素座標P2。更具體來說，第一像素座標P1與第二像素座標P2分別表示機械手臂120的不同長度的位置，即X方向上的不同位置。在另一實施例中，第一像素座標P1與第二像素座標P2分別表示機械手臂120的不同長度的位置，即X方向上的不同位置及Y方向上的位置相同。第一像素座標P1位於機械手臂120的前端，第二像素座標P2位於機械手臂120的後端。第一像素座標P1至取樣區域410的邊界B1的距離稱為第一距離D1，第二像素座標P2至取樣區域410的邊界B1的距離稱為第二距離D2。處理裝置110根據第一距離D1與第二距離D2的差值來判斷機械手臂120是否前後傾斜。在一實施例中，第一距離D1與第二距離D2的差值大於一門檻值，處理裝置110判斷機械手臂120發生前後傾斜並且發出警示信號。
舉例來說，如果第一距離D1大於第二距離D2，處理裝置110判斷機械手臂120前後傾斜，如圖5的傾斜類型530所示，機械手臂120往下傾斜。如果第一距離D1小於第二距離D2，處理裝置110仍舊判斷機械手臂120前後傾斜，如圖5的傾斜類型510所示，機械手臂120向上傾斜。
圖4中的座標P3與座標P4是位於機械手臂120的第二表面S2上不同位置的兩個像素座標，以下分別稱為第三像素座標P3與第四像素座標P4，其中第二表面S2相對於第一表面S1。在此，第一表面S1是機械手臂120的上表面，第二表面S2是機械手臂120的下表面。更具體來說，第三像素座標P3與第四像素座標P4分別表示機械手臂120的不同長度的位置，即X方向上的不同位置。在另一實施例中，第三像素座標P3與第四像素座標P4分別表示機械手臂120的不同長度的位置，即X方向上的不同位置及Y方向上的位置相同，第三像素座標P3位於機械手臂120的前端，第四像素座標P4位於機械手臂120的後端。第三像素座標P3至取樣區域410的邊界B2的距離稱為第三距離D3，第四像素座標P4至取樣區域410的邊界B2的距離稱為第四距離D4。邊界B2與邊界B1相對。處理裝置110也可以根據第三距離D3與第四距離D4的差值來決定機械手臂120是否前後傾斜。
舉例來說，如果第三距離D3大於第四距離D4，處理裝置110判斷機械手臂120前後傾斜，如圖5的傾斜類型560所示，機械手臂120向上傾斜。如果第三距離D3小於第四距離D4，處理裝置110仍舊判斷機械手臂120前後傾斜，如圖5的傾斜類型580所示，機械手臂120向下傾斜。
處理裝置110可以通過第一距離D1與第二距離D2的差值以及第三距離D3與第四距離D4的差值來雙重確認機械手臂120是否傾斜以及其傾斜類型，是向上傾斜還是向下傾斜。
在本實施例中，第五距離D5即取樣區域410由邊界B1至邊界B2的總長度。處理裝置110還可以根據第五距離D5扣除第一距離D1與第三距離D3所產生的差值D5-(D1+D3)判斷機械手臂120是否左右傾斜。在本實施例中，第一像素座標P1與第三像素座標P3都是位於機械手臂120的前端，第二像素座標P2與第四像素座標P4都是位於機械手臂120的後端。更具體而言，第一像素座標P1與第三像素座標P3可以位於機械手臂120相同長度的位置（X方向上的位置相同及Y方向上的不同位置），第二像素座標P2與第四像素座標P4可以位於機械手臂120相同長度的位置（X方向上的位置相同及Y方向上的不同位置），即，第一像素座標P1與第三像素座標P3在機械手臂120的相對兩側，第二像素座標P2與第四像素座標P4在機械手臂120的相對兩側。但在其他實施例中，第一像素座標P1與第三像素座標P3也可以位於機械手臂120不同長度的位置，第二像素座標P2與第四像素座標P4也可以位於機械手臂120不同長度的位置。
當差值D5-(D1+D3)大於一門檻值（例如參考機械手臂120的厚度）時，處理裝置110判斷機械手臂120左右傾斜，如圖5的傾斜類型520或550所示。另一方面，將第五距離D5扣除第二距離D2與第四距離D4，即獲得另一差值D5-(D2+D4)。當差值D5-(D2+D4)大於上述門檻值時，處理裝置110判斷機械手臂120左右傾斜，如圖5的傾斜類型540或570所示。
在本實施例中，由於影像擷取裝置130都是擷取固定視野的影像，並且從監控影像400擷取固定大小的影像作為取樣區域410，因此處理裝置110可以通過查找表獲得每個像素座標所對應的空間座標，進而判斷機械手臂120在空間中的位置。
運輸監控系統100可以事先從相同的固定視野擷取一預校正影像。也就是說，預校正影像與監控影像的視野相同，拍攝的背景範圍也相同。處理裝置110可以根據預校正影像與已知的拍攝空間座標建立查找表，其中該查找表紀錄多個空間座標，其中由影像擷取裝置130擷取的影像的多個像素座標與這些空間座標相對應。
在本實施例中，可以在拍攝的背景中設置一校正標誌，其中該校正標誌的配置位置要在影像擷取裝置130的固定視野內，使得監控影像的內容包括校正標誌。處理裝置110可以根據校正標誌在監控影像的位置判斷固定視野是否偏移。在圖4的實施例中，使用兩個校正標誌402與404，本發明不限制校正標誌的數量。校正標誌402與校正標誌404被設置在出現於監控影像400的對角角落的位置。如果校正標誌402與校正標誌404的其中任一沒有出現在監控影像400中的預設位置，處理裝置110或操作人員可以判斷影像擷取裝置130的拍攝視角已經發生偏移並對應校正影像擷取裝置130。
由於查找表已經紀錄像素座標與對應的空間座標，因此處理裝置110可以預先決定監控影像400中哪一部分的圖像作為取樣區域410。舉例來說，當機械手臂120移動到承載容器200的入口時，影像擷取裝置130拍攝機械手臂120的影像，處理裝置110可以只擷取承載容器200門口的影像作為取樣範圍，而取樣範圍會包括到機械手臂120。如此一來，可以降低辨識機械手臂120時的運算負擔，另一方面也可以將機械手臂120至取樣範圍的邊界的像素長度輕易轉換成空間距離。
在處理裝置110獲得機械手臂120的像素座標P1~P4之後，處理裝置110還可以根據像素座標P1~P4的至少其中之一來通過查找表判斷機械手臂120的空間位置，以及根據判斷結果來決定是否調整機械手臂120相對於承載容器200的空間位置。在一實施例中，影像擷取裝置130所拍攝的視野會固定選擇在容載容器200的入口處，並且涵蓋多個收納槽210~240的高度。處理裝置110根據監控影像400獲得機械手臂120的高度（Z方向上的位置），並進一步判斷機械手臂120是否能夠成功取出物品WA。舉例來說，機械手臂120要取出位於收納槽220的物品WA，如果處理裝置110判斷機械手臂120目前位於收納槽240的開口前或者機械手臂120伸入容載容器200時有損壞物品WA的疑慮，則處理裝置110使機械手臂120改變高度，直到處理裝置110判斷機械手臂120能夠順利取出物品WA。
特別說明的是，在本實施例中，承載容器200與處理裝置110可以一對一配置，但不限制。藉由一對一配置，每台處理裝置110可以針對及時處理每個承載容器200外的機械手臂120的影像，能夠在機械手臂120進行搬運動作前判斷機械手臂120是否適合進行搬運動作，以達到良好的監控效果。
綜上所述，本發明的運輸監控方法及其系統能夠即時監控機械手臂的狀態。通過擷取機械手臂的監控影像來判斷機械手臂是否發生傾斜，並且能進一步判斷其傾斜類型。當發現機械手臂傾斜時，處理裝置可以發出警示信號以使機械手臂停止，避免對物品造成傷害。除此之外，通過監控影像，處理裝置還能同時判斷機械手臂的定位是否正確，以避免取錯物品或是在移動過程中刮傷貨品。
100:運輸監控系統 110:處理裝置 120:機械手臂 130:影像擷取裝置 200:承載容器 210～240:收納槽 300:運輸監控方法 400:監控影像 402、404:校正標誌 410:取樣區域 510～580:傾斜類型 B1、B2:邊界 D1:第一距離 D2:第二距離 D3:第三距離 D4:第四距離 S1:第一表面 S2:第二表面 P1:第一像素座標 P2:第二像素座標 P3:第三像素座標 P4:第四像素座標 WA:物品 S310～S340:運輸監控方法的步驟
圖1是依照本發明的一實施例的一種運輸監控系統的示意圖。 圖2是依照本發明的一實施例的一種晶圓的運輸過程示意圖。 圖3是依照本發明的一實施例的一種運輸監控方法的示意圖。 圖4是依照本發明的一實施例的一種監控影像的示意圖。 圖5是依照本發明的一實施例的一種機械手臂的傾斜類型的示意圖。
300:運輸監控方法
S310:S340:運輸監控方法的步驟

Claims (10)

  1. 一種運輸監控方法，包括：通過一影像擷取裝置從一固定視野擷取一機械手臂在一承載容器外的一監控影像，其中該機械手臂用以將一物品移入或移出該承載容器；通過一處理裝置從該監控影像中獲得一取樣區域；通過該取樣區域獲得該機械手臂的至少二像素座標；計算該至少二像素座標至該取樣區域的邊界的至少二距離；以及比較該至少二距離來判斷該機械手臂的傾斜類型，其中該至少二距離包括一第一距離與一第二距離，其中該第一距離與該第二距離分別是該機械手臂的一第一表面上的一第一像素座標與一第二像素座至該取樣區域的邊界的距離，根據該第一距離與該第二距離的差值判斷該機械手臂是否前後傾斜，其中該第一像素座標與該第二像素座標分別位於該機械手臂的不同的長度位置；以及通過該處理裝置根據該取樣區域來判斷該機械手臂的傾斜狀態，其中當該處理裝置判斷該機械手臂傾斜時，由該處理裝置發出一警示信號。
  2. 如請求項1所述的運輸監控方法，其中通過該處理裝置根據該監控影像的該取樣區域來判斷該機械手臂的傾斜狀態的步驟包括： 進行一影像處理操作以獲得該取樣區域的多個灰階值；根據該些灰階值獲得該機械手臂的該至少二像素座標；以及根據該至少二像素座標來判斷該機械手臂的傾斜狀態。
  3. 如請求項1所述的運輸監控方法，其中該至少二距離還包括一第三距離，其中該第三距離是該機械手臂的一第二表面上的一第三像素座標至該取樣區域的邊界的距離，其中該第二表面相對於該第一表面，根據該取樣區域的總長度扣除該第一距離與該第三距離所產生的差值判斷該機械手臂是否左右傾斜，其中該第一像素座標與該第三像素座標分別位於該機械手臂的相同的長度位置。
  4. 一種運輸監控系統，包括：一影像擷取裝置，用以從一固定視野擷取一機械手臂在一承載容器外的一監控影像，其中該機械手臂用以將一物品移入或移出該承載容器；以及一處理裝置，電性連接該影像擷取裝置與該機械手臂，且用以根據該監控影像的一取樣區域來判斷該機械手臂的傾斜狀態，其中該處理裝置通過該取樣區域獲得該機械手臂的至少二像素座標，其中該處理裝置計算該至少二像素座標至該取樣區域的邊界的至少二距離，並且比較該至少二距離來判斷該機械手臂的傾斜類型，其中該至少二距離包括一第一距離與一第二距離，其中該第 一距離與該第二距離分別是該機械手臂的一第一表面上的一第一像素座標與一第二像素座至該取樣區域的邊界的距離，根據該第一距離與該第二距離的差值判斷該機械手臂是否前後傾斜，其中該第一像素座標與該第二像素座標分別位於該機械手臂的不同長度的位置，其中當該處理裝置判斷該機械手臂傾斜時，該處理裝置發出一警示信號。
  5. 如請求項4所述的運輸監控系統，其中該取樣區域為該監控影像的一固定像素範圍。
  6. 如請求項4所述的運輸監控系統，其中該處理裝置進行一影像處理操作以獲得該取樣區域的多個灰階值，並根據該些灰階值獲得該機械手臂的該至少二像素座標，以及，該處理裝置根據該至少二像素座標來判斷該機械手臂的傾斜狀態。
  7. 如請求項6所述的運輸監控系統，其中該處理裝置還根據該至少二像素座標的至少其中之一判斷該機械手臂的一空間位置，並根據一判斷結果來決定是否調整該機械手臂相對於該承載容器的該空間位置。
  8. 如請求項4所述的運輸監控系統，其中該至少二距離還包括一第三距離，其中該第三距離是該機械手臂的一第二表面上的一第三像素座標至該取樣區域的邊界的距離，其中該第二表面相對於該第一表面，根據該取樣區域的總長度扣除該第一距離與該第三距離所產生的差值判斷該機械手臂是否左右傾斜，其中 該第一像素座標與該第三像素座標分別位於該機械手臂的相同長度的位置。
  9. 如請求項4所述的運輸監控系統，還包括：一校正標誌，設置於一校正位置，其中該監控影像的內容還包括該校正標誌，以及該處理裝置根據該校正標誌在該監控影像的位置判斷該固定視野是否偏移。
  10. 如請求項4所述的運輸監控系統，其中該影像擷取裝置在該機械手臂從該承載容器運出該物品之前擷取該監控影像。
TW109126568A 2020-08-05 2020-08-05 運輸監控方法及其系統 TWI777213B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW109126568A TWI777213B (zh) 2020-08-05 2020-08-05 運輸監控方法及其系統
US17/380,017 US12046492B2 (en) 2020-08-05 2021-07-20 Robot blade tilt determination by evaluating grayscale in images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW109126568A TWI777213B (zh) 2020-08-05 2020-08-05 運輸監控方法及其系統

Publications (2)

Publication Number Publication Date
TW202207161A TW202207161A (zh) 2022-02-16
TWI777213B true TWI777213B (zh) 2022-09-11

Family

ID=80113963

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109126568A TWI777213B (zh) 2020-08-05 2020-08-05 運輸監控方法及其系統

Country Status (1)

Country Link
TW (1) TWI777213B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200818382A (en) * 2006-10-05 2008-04-16 Promos Technologies Inc Wafer positioning apparatus and method thereof
US20120271590A1 (en) * 2007-08-30 2012-10-25 Vijay Sakhare Method and apparatus for robot calibrations with a calibrating device
TW201413214A (zh) * 2012-09-20 2014-04-01 Univ Feng Chia 傾斜角度及置放位置之光學檢測系統及其檢測方法
TW201440980A (zh) * 2013-04-29 2014-11-01 Globalfoundries Us Inc 監控晶圓處理及晶圓處理機之系統及方法
CN110729211A (zh) * 2019-09-27 2020-01-24 深圳赛意法微电子有限公司 半导体封装测试智能工厂

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200818382A (en) * 2006-10-05 2008-04-16 Promos Technologies Inc Wafer positioning apparatus and method thereof
US20120271590A1 (en) * 2007-08-30 2012-10-25 Vijay Sakhare Method and apparatus for robot calibrations with a calibrating device
TW201413214A (zh) * 2012-09-20 2014-04-01 Univ Feng Chia 傾斜角度及置放位置之光學檢測系統及其檢測方法
TW201440980A (zh) * 2013-04-29 2014-11-01 Globalfoundries Us Inc 監控晶圓處理及晶圓處理機之系統及方法
CN110729211A (zh) * 2019-09-27 2020-01-24 深圳赛意法微电子有限公司 半导体封装测试智能工厂

Also Published As

Publication number Publication date
US20220044947A1 (en) 2022-02-10
TW202207161A (zh) 2022-02-16

Similar Documents

Publication Publication Date Title
JP3694808B2 (ja) ウェハ搬送用ロボットの教示方法および教示用プレート
KR102192041B1 (ko) 마크 검출 방법
TWI670154B (zh) 監控晶圓處理及晶圓處理機之系統及方法
US20170151673A1 (en) Manipulator system, and image capturing system
KR102313347B1 (ko) 화상 검사 장치 및 화상 검사 방법
JP5488806B2 (ja) トレイ移載装置及び方法
JP6472801B2 (ja) 部品データ取扱装置および部品データ取扱方法並びに部品実装システム
US20180294244A1 (en) Detector for detecting position of ic device and method for the same
JP4733001B2 (ja) 部品実装装置、部品実装方法及びプログラム
US20070260341A1 (en) Correcting apparatus for wafer transport equipment and correcting method for wafer transport equipment
TWI777213B (zh) 運輸監控方法及其系統
KR100936506B1 (ko) 웨이퍼 위치 오차 인식 시스템 및 이의 웨이퍼 위치 오차 인식방법
TWI582852B (zh) 用於監測半導體裝置中邊緣斜角去除區域的方法和裝置以及電鍍系統
JP2012216752A (ja) ロードロックモジュール、ウエハ加工処理システム及びウエハの加工処理方法
US12046492B2 (en) Robot blade tilt determination by evaluating grayscale in images
CN114078160A (zh) 运输监控方法及其系统
TWI778870B (zh) 用於機器人放料的動態影像定位方法及系統
JP4566686B2 (ja) 対象物の形状判別方法及び装置
JP5409080B2 (ja) 円盤状部材の中心位置推定方法及び画像処理装置
JP2017130592A (ja) 部品データ取扱装置および部品データ取扱方法並びに部品実装システム
WO2022196712A1 (ja) ウエハ搬送ロボット及びウエハ取出方法
JPWO2020100522A1 (ja) マーク検出システム、信号処理回路、コンピュータプログラムおよび方法
US20220367220A1 (en) Substrate inspection method and substrate inspection device
TW202011493A (zh) 半導體製造系統、邊緣檢測裝置以及檢測半導體晶圓之邊緣斜面去除區域的方法
US20230317490A1 (en) Area camera substrate pre-aligner

Legal Events

Date Code Title Description
GD4A Issue of patent certificate for granted invention patent