TWI770712B - 影像確認用電腦 - Google Patents

影像確認用電腦 Download PDF

Info

Publication number
TWI770712B
TWI770712B TW109143325A TW109143325A TWI770712B TW I770712 B TWI770712 B TW I770712B TW 109143325 A TW109143325 A TW 109143325A TW 109143325 A TW109143325 A TW 109143325A TW I770712 B TWI770712 B TW I770712B
Authority
TW
Taiwan
Prior art keywords
area
image
robot
displayed
computer
Prior art date
Application number
TW109143325A
Other languages
English (en)
Other versions
TW202137381A (zh
Inventor
北野真也
中矢敦史
吉田雅也
藤森一夫
岡田拓之
Original Assignee
日商川崎重工業股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商川崎重工業股份有限公司 filed Critical 日商川崎重工業股份有限公司
Publication of TW202137381A publication Critical patent/TW202137381A/zh
Application granted granted Critical
Publication of TWI770712B publication Critical patent/TWI770712B/zh

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00—Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/06—Safety devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00—Controls for manipulators
    • B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
    • G05B19/406—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by monitoring or safety
    • G05B19/4063—Monitoring general control system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L21/00—Processes or apparatus adapted for the manufacture or treatment of semiconductor or solid state devices or of parts thereof
    • H01L21/67—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere
    • H01L21/677—Apparatus specially adapted for handling semiconductor or electric solid state devices during manufacture or treatment thereof; Apparatus specially adapted for handling wafers during manufacture or treatment of semiconductor or electric solid state devices or components ; Apparatus not specifically provided for elsewhere for conveying, e.g. between different workstations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30148—Semiconductor; IC; Wafer

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Manufacturing & Machinery (AREA)
  • Mechanical Engineering (AREA)
  • Robotics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Power Engineering (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Manipulator (AREA)
  • Numerical Control (AREA)
  • Container, Conveyance, Adherence, Positioning, Of Wafer (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)

Abstract

一種影像確認用電腦，係確認與機器人之動作相關之影像，前述影像確認用電腦係具備記憶部及演算部。前述記憶部係記憶自前述機器人之控制器接收之驅動前述機器人之連桿體之電動馬達之位置之資訊、及藉由安裝於前述機器人上之照相機獲取之影像之資訊。演算部係使本機及連接於本機之電腦中之至少任一個上並排顯示模型區域及影像區域。於前述模型區域中，藉由電腦繪圖顯示再現前述機器人之姿勢之二維或三維之模型。於前述影像區域顯示前述影像。

Description

影像確認用電腦
本發明係關於一種影像確認用電腦，該影像確認用電腦係用以確認與機器人之動作相關之影像。
過往，例如為了搬送晶圓等之基板，已經使用機器人。專利文獻1之機器人具備控制器，該控制器用以控制機器人之運動。 [先前技術文獻] [專利文獻]
[專利文獻1]日本特開2008-28134號公報。
[發明所欲解決之課題]
機器人可能會因種種之原因而產生故障。於此情況下，需要根據產生之故障進行維修作業。於晶圓處理設備等中，為了實現高等級之資訊管理，多數情況下會限制將資料外帶至其他之場所、及限制與外部網路之通信。於這種狀況下，要求能迅速地確定機器人故障之原因並加以排除。
爰此，本發明之目的在於：當機器人產生故障時，能使作業人員迅速且良好地把握狀況。 [用以解決課題之手段]
本發明所欲解決之問題誠如上述，以下對用以解決該問題之手段及其功效進行說明。
根據本發明之觀點，提供以下構成之影像確認用電腦。亦即，前述影像確認用電腦係為了確認與機器人之動作相關之影像而使用。前述影像確認用電腦係具備記憶部及演算部。前述記憶部係可記憶資訊。前述演算部係輸出基於前述記憶部之記憶內容之資訊。前述記憶部係記憶電動馬達之位置之資訊及影像之資訊。前述電動馬達係用以驅動前述機器人之連桿體。自前述機器人之控制器接收前述電動馬達之位置之資訊。前述影像之資訊係可藉由安裝於前述機器人之照相機獲取。前述演算部係使本機及連接於本機之電腦中之至少任一個上並排顯示模型區域及影像區域。於前述模型區域內，藉由電腦繪圖顯示再現前述機器人之姿勢之二維或三維之模型。於前述影像區域內顯示前述影像。
藉由以這種方式並排顯示兩個區域，作業人員可複合且直觀地把握與機器人之動作相關之狀況。因此，作業人員可圓滑且準確地處置狀況。 [發明功效]
根據本發明，例如當機器人產生故障時，作業人員可迅速且良好地把握狀況。
其次，參照圖式，對本發明之實施形態進行說明。圖1為顯示應用本發明之一實施形態之半導體處理設備20之一部分之平面剖視圖。圖2為剖切顯示半導體處理設備20之一部分之側面剖視圖。於圖1及圖2中，以二點鏈線顯示以各種方式移動機器人27之狀態。
半導體處理設備20係對作為處理對象基板之晶圓24實施預先設定之處理。於本實施形態中，晶圓24係半導體晶圓。作為對晶圓24施加之處理，可列舉各種各樣之製程處理，例如熱處理、雜質導入處理、薄膜形成處理、光微影處理、洗淨處理或平坦化處理等。也可於半導體處理設備20中進行上述基板處理以外之基板處理。
半導體處理設備20係具備晶圓處理裝置22及晶圓移載裝置23。半導體處理設備20係例如為藉由SEMI(國際半導體設備與材料產業協會)標準預先定義者。SEMI係「Semicondutor Equipment and Materials International」之簡稱。於此情況下，例如晶圓傳送盒(FOUP；Front Opening Unified Pod)25及用以開閉晶圓傳送盒25之晶圓盒開啟器26係遵循SEMI標準之E47.1、E15.1、E57、E62、E63、E84等之規格。惟，半導體處理設備20之構成也可不同於SEMI標準。
於晶圓處理裝置22形成有填充預定之氣體之處理空間30。晶圓處理裝置22係於該處理空間30內對晶圓24實施上述處理。晶圓處理裝置22係除了具備對晶圓24實施處理之處理裝置本體外，還具備形成處理空間30之處理空間形成部、於處理空間30內搬送晶圓24之搬送裝置、及控制填滿處理空間30內之環境用氣體之調整裝置。調整裝置係藉由風扇濾網機組等實現。
晶圓移載裝置23係自晶圓傳送盒25中取出處理前之晶圓24，將晶圓24供給於晶圓處理裝置22，並且自晶圓處理裝置22中取出處理後之晶圓24，將晶圓24重新容納於晶圓傳送盒25內。晶圓移載裝置23係具有作為設備前端模組(equipment front end module；EFEM)之功能。於半導體處理設備20中，晶圓移載裝置23係作為在晶圓傳送盒25與晶圓處理裝置22之間進行晶圓24之交接之介面部。晶圓24係在移動於晶圓傳送盒25內之空間與晶圓處理裝置22之處理空間30之間時，通過充滿預定之環境用氣體之高純淨度之準備空間29。
準備空間29係一進行了污染控制之封閉空間。於準備空間29中，空氣中之懸浮微細顆粒被控制在限定之純淨度等級以下，且根據需要還對溫度、濕度、壓力等之環境條件進行管理。於本實施形態中，處理空間30及準備空間29以不會對晶圓24之處理產生不良影響之方式保持為預定之純淨度。作為該純淨度，例如採用ISO(International Standard Organization；國際標準化機構)規定之CLASS1(等級1)。
機器人27係作為晶圓移載機器人而使用。於本實施形態中，機器人27係藉由SCARA(平面關節型機械手臂)型之水平多關節機器人而實現。SCARA係「Selective Compliance Assembly Robot Arm」之簡稱。機器人27配置於準備空間29內。
如圖2等所示，機器人27係具備基座41、機械臂42、上下驅動致動器43a、水平驅動致動器43b及控制器44。
基座41係具有作為支撐機械臂42之基座構件之功能。於基座41之上面安裝有機械臂42。
機械臂42係具有連桿構造，該連桿構造係具備沿自基端部朝向前端部之方向依序連結之複數個連桿體。機械臂42之前端部設置有機械手45。機械手45可保持晶圓24或解除該保持。藉由機械手45保持晶圓24之方法各式各樣，例如可於機械手45上載置晶圓24、或者藉由機械手45夾持晶圓24、或者藉由負壓將晶圓24吸附於機械手45上等。
上下驅動致動器43a係使機械臂42沿上下方向移位。上下驅動致動器43a係例如作為電動馬達而構成。藉由機械臂42沿上下方向移動，可變更機械手45之高度。
水平驅動致動器43b係使機械臂42之各連桿體分別繞對應之關節軸旋轉。水平驅動致動器43b係例如作為電動馬達而構成。藉由使各連桿體繞上下方向之關節軸旋轉，可使機械手45於水平面內移動。
控制器44係根據預先設定之動作程式或者由使用者輸入之移動指令，控制上下驅動致動器43a及水平驅動致動器43b，而使機械手45朝預先設定之位置移動。如圖3所示，控制器44具備記憶電路46、演算電路47及輸出裝置48。記憶電路46記憶預定之程式及各種資料。演算電路47根據上述程式進行演算處理。輸出裝置48根據演算電路47之演算結果，將控制信號輸出至上下驅動致動器43a及水平驅動致動器43b。記憶電路46係例如藉由RAM(Random Access Memory；隨機存取記憶體)、ROM(Read Only Memory；唯讀記憶體)、及HDD(Hard Disk Drive；硬碟驅動機)等實現。演算電路47例如藉由CPU(Central Processing Unit；中央處理單元)實現。
如圖3所示，半導體處理設備20具備高階控制器(high-order controller)61。高階控制器61係將用以執行半導體處理步驟之指令傳送至構成半導體處理設備20之各種裝置。
高階控制器61係以有線或無線方式與機器人27具備之上述控制器44連接。高階控制器61係對控制器44傳送指令以使機器人27按要求之時間執行所需之動作。控制器44根據自高階控制器61接收之指令控制機器人27。
於產生某種故障之情況下，控制器44將關於該故障之資訊傳送至高階控制器61。用以供控制器44控制機器人27之程式係由複數個模組構成。其中，模組係指用以藉由機器人27實現某一動作單位之程式之部分。作為動作單位，例如可列舉將藉由機械手45保持之晶圓24載置於預定位置之動作、及藉由機械手45保持載置於預定位置上之晶圓24之動作等，但不限於此。
上下驅動致動器43a及水平驅動致動器43b係分別作為電動馬達而構成。電動馬達係公知之構成，雖未圖示，但具備馬達驅動電路、馬達本體、旋轉位置感測器及電流感測器。馬達本體具備定子、轉子及輸出軸。控制器44，以電動馬達進行期望之動作之方式經由電源電路對馬達驅動電路供給電流。結果，電動馬達之輸出軸根據流動之電流而旋轉。
流經馬達驅動電路之電流係可藉由電動馬達之動作之目標值及動作之測量值而確定。作為電動馬達之動作之目標值，例如可列舉與旋轉位置、旋轉速度或旋轉加速度相關之目標值。同樣地，作為測量值，例如可列舉與旋轉位置、旋轉速度或旋轉加速度相關之測量值。於流經馬達驅動電路之電流之控制中也可使用反饋控制定律或自適應控制定律等之控制定律。
於機械臂42中之固定有機械手45之連桿體上固定有照相機62。如圖3所示，該照相機62經由網路連接於影像確認用電腦65。影像確認用電腦65例如可為移動終端、個人電腦等。
於半導體處理設備20上設置有用以拍攝機器人27之照相機63。照相機63係以有線或無線方式與控制器44連接。
於機器人27中產生某種異常且產生排除故障之需要之情況下，作業人員可操作某台電腦以獲取用以處置之資訊。該電腦也可稱為處置用電腦70。於本實施形態中，高階控制器61係兼作處置用電腦70。
影像確認用電腦65係具備記憶電路(記憶部)66及演算電路(演算部)67。記憶電路66係例如藉由RAM、ROM及HDD等實現。演算電路67係例如藉由CPU實現。
於影像確認用電腦65之記憶電路66及控制器44之記憶電路46(以下，簡稱為記憶電路)中記憶有例如以下之(1)至(6)所示之資訊。這些記憶動作可連續地進行或者也可間隔式地分散進行。
(1)與藉由照相機62、63獲得之影像相關之資訊。 (2)與控制器44自高階控制器61接收之信號、及由控制器44傳送至高階控制器61之信號相關之資訊(通信日誌資訊)。 (3)與控制器44為了控制機器人27而執行之程式相關之資訊。 (4)與機器人27具備之電動馬達之電流值、位置、速度、加速度(包含負加速度。以下相同)、位置偏差、速度偏差及加速度偏差相關之資訊。 (5)與來自機器人27搭載之各種感測器(例如，光投射／遮光感測器、氣動致動器之活塞位置感測器、壓力感測器、電磁閥之閥位置感測器)之輸出信號相關之資訊。 (6)與輸入機器人27搭載之各種機器(例如電磁閥)之輸入信號相關之資訊。
其中，電動馬達之電流值係藉由設於馬達驅動電路之電流感測器而測量。電動馬達之位置係可根據設於該電動馬達之旋轉位置感測器之測定值而獲得。電動馬達之速度及加速度係可藉由對上述旋轉位置感測器之測定值進行時間微分而獲得。位置偏差、速度偏差及加速度偏差係可藉由計算上述位置、速度及加速度與目標位置、目標速度及目標加速度之差而獲得。
於控制器44中預先安裝有網站伺服器(web server)應用程式及資料庫應用程式，且於上述記憶電路46記憶有程式。
然而，機器人27可能因某種原因而產生故障。於此情況下，影像確認用電腦65係可根據記憶於記憶電路66之內容，顯示如圖4所示之狀況確認畫面71。該狀況確認畫面71係具備模型區域72、影像區域73、日誌區域74及圖形區域75。
於模型區域72中，藉由電腦繪圖顯示有二維及三維之模型，該二維及三維之模型係用以再現機器人27在某個時刻之姿勢。並且，所顯示之模型之姿勢係可根據記憶於記憶電路66之馬達之位置進行計算。於模型區域72之下部配置有搜索條72a，且於該搜索條72a上配置有滑塊、播放鍵、暫停鍵及反向播放鍵。藉此，可於模型區域72之顯示中再現機器人27之動作、或者可於某個時刻停止機器人27之動作。即使於實際之機器人27位於例如隱藏於照相機63後面而不能攝影之位置情況下，作業人員也可參照模型區域72之顯示內容輕鬆把握機器人27處於何種之姿勢下。
於影像區域73中顯示有藉由照相機62獲得且被記憶於記憶電路66之攝影影像。影像之播放位置可藉由上述搜索條72a指定。藉此，可使模型區域72中之模型動作之再現與影像區域73之動畫之播放同步。
於日誌區域74顯示有記憶於記憶電路66之通信日誌。也可於日誌區域74顯示與為了控制機器人27而執行之程式相關之資訊。
於圖形區域75中，分別以不同顏色之圖表顯示與記憶於記憶電路66之電動馬達之電流值、位置、速度、加速度、位置偏差、速度偏差及加速度偏差相關之資訊。於圖4所示之例中顯示有折線圖，其中於縱軸上取各值，且於橫軸上取時刻。於圖形區域75之各圖表中顯示有垂直之直線(時刻圖形)。該直線之位置與在模型區域72及影像區域73中顯示之時間點上之時刻對應。
當於機器人27中產生某種故障時，將在包含故障產生時之預定時間範圍內(例如，自產生故障時之數秒前至產生故障時之數秒後為止之範圍)記憶於記憶電路66之資訊作為顯示於狀況確認畫面71上之顯示對象。
當於搜索條72a上按下播放鍵時，可於模型區域72及影像區域73中播放顯示對象之資訊。同樣地，當按下反向播放鍵時，顯示對象之資訊被反向播放。當按下暫停鍵時，則將播放／反向播放暫停，若再次按下暫停鍵，則解除暫停。搜索條72a上也可包含用以進行公知之快送操作／倒退操作之鍵。
於播放顯示對象之資訊之情況下，於模型區域72內顯示有被再現之機器人27之運動，且於影像區域73內動態地顯示照相機62之攝影圖像。播放時，於日誌區域74顯示通信日誌，且於圖形區域75顯示圖表。於日誌區域74中顯示有以搜索條72a指示之時刻上之日誌履歷。該日誌履歷係與播放同步地隨著時刻而被逐一追記。於圖形區域75中，各圖表中之上述時刻圖形係與播放同步地橫向移動。
利用以上之構成，作業人員可於產生故障時藉由操作影像確認用電腦65，自各式各樣之角度迅速地確定故障原因並加以處置。
於上述例子中，將在故障產生前後之預定時間範圍內記憶於記憶電路66之資訊作為顯示於狀況確認畫面71之顯示對象。也可取代此，將產生故障時記憶於動作單位或模組之資訊作為顯示於狀況確認畫面71之顯示對象，其中該動作單位或模組係於控制器44中被執行。
模型區域72及影像區域73係以相互接近之方式並排配置於相同之狀況確認畫面71。因此，作業人員可根據兩個區域之資訊複合且直觀地了解產生故障之狀況。
機器人27整體之狀況可自模型區域72獲得，機械手45之前端周邊之詳細狀況可自影像區域73獲得。如此，顯示於模型區域72之二維或三維模型之資訊與顯示於影像區域73之攝影影像之資訊，彼此可成為互補之關係。於這層意義上講，同樣說明並排顯示兩個影像有益無害。
除此之外，由於日誌區域74之日誌履歷之追加係在與顯示模型區域72及影像區域73之時刻一致之時間上進行，因此作業人員不會於狀況之把握上產生混亂。
由於模型區域72與影像區域73係鄰接配置，因此作業人員可容易將模型影像與攝影圖像作為統一之資訊而加以把握。因此，即使藉由模型區域72之搜索條72a對影像區域73之影像進行播放／停止，仍難以產生不調和感。
於圖4之例子中，以模型區域72位於左側且影像區域73位於右側之方式配置。然而，也可將配置左右顛倒。此外，模型區域72與影像區域73也可上下排列配置。
接著，參照圖5，對可藉由控制器44顯示於處置用電腦70之顯示器(例如，圖3所示之顯示器68)上之日誌分析畫面81進行說明。
於機器人27中產生某種故障之情況下，描述此時刻前後之通信內容之通信日誌係對用以確定故障原因等價值非常高之資訊。然而，通信日誌通常包含與故障之關聯性高及關聯性低之內容，且多數情況下與故障之關聯性低之內容佔據之部分更大。因此，存在與故障之關聯性高之內容可能被埋沒而難以發現之風險。
因此，於本實施形態中，於藉由控制器44輸出在處置用電腦70上之日誌分析畫面81中，具有即使於通信日誌中也能擷取且顯示與故障之關聯性高之內容之功能。藉此，可容易確定故障原因及進行處置。處置用電腦70可用作為控制器44之終端。
具體說明如下，於通信日誌之每一行描述有顯示通信之種類之通信代碼。於控制器44之記憶電路46中，以與確定故障之種類之資訊(例如，故障代碼)建立關聯之形式預先記憶有在通信日誌中與故障之關聯性高之通信代碼之資訊。於作業人員指示擷取通信日誌之情況下，以僅顯示與故障代碼之關聯性高之種類之通信日誌之方式進行篩選，且自控制器44輸出至處置用電腦70。
於使通信日誌以這種限縮範圍之形式顯示於處置用電腦70之情況下，控制器44例如可同時集中顯示以下之資訊(1)至(5)。作業人員可根據該日誌分析畫面81更容易地了解狀況。
(1)故障說明區域82。於故障說明區域82之顯示內容中包含有例如故障之產生日期及時間、故障代碼及故障之概要。 (2)詳細日誌區域83。於詳細日誌區域83之顯示內容中包含有如上述擷取之、自故障產生之預定時間前至故障產生時為止之通信日誌。 (3)動作位置區域84。於動作位置區域84，可以電動馬達中測量之位置或目標值之形式顯示用以顯示故障產生時之機器人27之姿勢之數值。 (4)程式狀態區域85。於程式狀態區域85顯示有用以根據顯示於詳細日誌區域83之通信日誌來確定為了控制機器人27而執行之模組之資訊。然而，也可於詳細日誌區域83中選擇通信日誌之各行，且於程式狀態區域85顯示根據所選擇之行之日誌之程式。 (5)輸入／輸出信號區域86。輸入／輸出信號區域86顯示有來自機器人27搭載之各種感測器之輸出信號、及朝各種機器輸入之輸入信號。
接著，參照圖6，對可由處置用電腦70顯示之故障處置支援畫面88進行說明。
控制器44之記憶電路46記憶有顯示在機器人27中產生某種故障之情況時之處置方法之資料。藉由將該處置方法自控制器44輸出至處置用電腦70，且顯示於顯示器(例如，圖3所示之顯示器68)上，可支援作業人員進行故障應對。
作為為了支援處置故障之作業而顯示於顯示器68上之內容，例如可為以下之(1)至(3)。
(1)故障說明區域89。於故障說明區域89顯示有故障之產生日期、時間及故障代碼等。於故障說明區域89中，也可選擇性地顯示自最近之故障產生時刻算起之過去之預定時間內產生之故障、或者自最近之故障產生時刻算起之過去產生之預定次數之故障。以下之說明中，亦可將顯示於故障說明區域89之過去之故障稱為故障履歷。
(2)處置內容說明區域(詳細說明區域)90。於處置內容說明區域90詳細地顯示有與在故障說明區域89中作為說明對象之故障對應之處置方法。處置方法係藉由機器人27之製造商對應故障代碼而預先製作，且被以HTML(hypertext markup language；超文件標記語言)資料、影像資料、動畫資料、PDF資料等適宜之電子資料之形式記憶於控制器44之記憶電路46。於在故障說明區域89中選擇了故障履歷之情況下，也可於處置內容說明區域90中顯示與該故障履歷對應之處置方法。動畫資料係例如可為當過去產生故障時藉由照相機63拍攝機器人27而得之資料。
(3)關聯項目一覽區域91。於關聯項目一覽區域91顯示有與在故障說明區域89中作為說明對象之故障相關之項目的一覽。於在故障說明區域89中選擇了故障履歷之情況下，也可於關聯項目一覽區域91中顯示與該故障履歷相關之項目。一覽係由一個或複數個關聯項目構成。作為關聯項目，例如可為以下之(a)、(b)。 (a)過去之與本次故障或所選之故障履歷對應之作業記錄。於產生故障之情況下，作業人員藉由操作適宜之使用者介面裝置，可使作業記錄製作畫面顯示於顯示器68上。該介面係例如可為與顯示器68一體設置之觸控面板、或配置於顯示器68附近之硬體鍵等，但不限於此。作業人員藉由在作業記錄製作畫面上指定故障代碼、故障產生日期及時間、作業日期及時間、作業人員、作業內容及其結果、作業記錄之標題、作業記錄之重要度等而可製作作業記錄。由作業人員輸入處置用電腦70之作業記錄係自處置用電腦70被傳送至控制器44。接收了作業記錄之資料後之控制器44係將該作業記錄與故障代碼建立關聯並記憶於記憶電路46。於關聯項目一覽區域91上顯示有例如作業記錄之重要度及標題。 (b)與本次故障或所選之故障履歷相關之故障。作為關聯之故障，例如可列舉可能與某個故障同時產生之另一故障、及起因於某個故障之產生而產生之另一故障，但不限於此。故障與故障之關聯建立，可藉由機器人27之製造商預先製作，且記憶於控制器44之記憶電路46。故障與故障之關聯也可被構成為可藉由作業人員之操作而登錄於記憶電路46。例如，於關聯項目一覽區域91中顯示有故障代碼。
作業人員藉由適宜地操作上述使用者介面裝置，可適宜選擇顯示於關聯項目一覽區域91上之關聯項目。選擇之關聯項目之資訊係自處置用電腦70傳送至控制器44。控制器44係分別以於選擇作業記錄之情況下將該作業記錄之內容顯示於處置內容說明區域90、且於選擇關聯之故障之情況下將該故障之處置方法顯示於處置內容說明區域90之方式將各種資料傳送至處置用電腦70。
雖然可於關聯項目一覽區域91顯示複數個關聯項目，但控制器44係可以對關聯項目進行排序而使得優先度高之關聯項目位於上部且優先度低之關聯項目位於下部之方式控制處置用電腦70。圖6顯示在關聯項目一覽區域91中根據優先度排列關聯項目的狀態。優先度係例如可根據自故障之產生頻率、顯示說明畫面之頻率、於作業記錄中指定之重要度、故障產生時之電流感測器、位置感測器檢測值判斷之關聯度等而確定。於為了確定優先度而採用複數個觀點之情況下，控制器44係例如可計算將量化故障之產生頻率等而得之指標乘以適宜之權重後之總和，且將獲得之總和作為優先度。
例如，於產生碰撞之情況下，同時對驅動各關節之複數個馬達檢測位置偏差之增大等之異常。另一方面，例如於某個馬達之電纜斷線之情況下，僅對該馬達檢測異常。也可預先記憶被如此假設之異常檢測模式，當產生異常時，計算實際之異常檢測模式與假設異常檢測模式之相似度，且優先顯示用於與相似度高之假設異常檢測模式對應之異常之故障排除內容。作為異常檢測模式，可使用複數個檢測項目(位置偏差或速度偏差等)之產生／不產生之組合、或者也可使用異常產生時之某個馬達之電流值等之測量值。此外，作為相似度，例如於使用複數個檢測項目之產生／不產生之組合作為異常檢測模式之情況下，也可使用複數個檢測項目之產生／不產生之組合一致之數目。於此情況下，也可藉由對複數個檢測項目進行加權，以增加對重要檢測項目的相似度之影響。
藉由以上之構成，可容易確定故障之原因並進行處置。此外，藉由將使用者登錄之作業記錄也作為故障處置支援畫面88上之顯示對象，可根據藉由過去之處置而獲取之知識之累積進行處置，並且還可供多人共享上述之知識。由於自優先度高之順序開始依序顯示關聯項目，因此可有效地處置產生之故障。
於控制器44之記憶電路46內記憶有用以確定故障原因之方法、描述故障之處置方法之資料、及描述機器人之使用方法之說明書。如圖7所示，使用者可根據狀況操作使用者介面裝置，將這些資料及說明書顯示於顯示器68上以供參照。
簡單地對說明書畫面93進行說明。於說明書畫面93之左側配置有目錄顯示區域94，且於該目錄顯示區域94中以一覽形式顯示說明書之目錄之項目。於說明書畫面93之右側配置有詳細顯示區域95，於該詳細顯示區域95可顯示與在目錄顯示區域94中選擇之目錄之項目對應之說明書之具體內容。於目錄顯示區域94之上側配置有搜索框96，可進行將說明書之文字資料作為對象之文字搜索。藉此，不需要將紙製之說明書帶入機器人27旁。
以上說明之日誌分析畫面81、故障處置支援畫面88、及說明書畫面93之各個顯示係藉由預先安裝於控制器44之網站伺服器應用程式、及預先安裝於處置用電腦70之網站瀏覽器應用程式之協作而實現。作業人員於處置用電腦70上啟動網站瀏覽器且進行適宜操作，可以網頁等形式將上述之日誌分析畫面81、故障處置支援畫面88、說明書畫面93顯示於例如顯示器68上。
也可與高階控制器61分開準備用以閱覽各種畫面之處置用電腦70(換言之，用於控制器44之終端)。不管什麼情形，皆於閱覽側之電腦上安裝有網站瀏覽器應用程式。控制器44之網站伺服器係根據來自閱覽側之電腦之網站瀏覽器之要求，自記憶電路46之記憶內容中確定顯示內容，且傳送HTML資料等之各種資料。於閱覽側之電腦上，網站瀏覽器根據接收之各種資料繪製網頁等之畫面。於該構成中，作業人員只需準備安裝有一般之網站瀏覽器應用程式之適宜之終端作為閱覽側之電腦，即可利用日誌分析畫面81、故障處置支援畫面88及說明書畫面93之功能。如此，於本實施形態中，不需要於終端上安裝諸如專用應用程式等之特殊軟體。因此，該構成非常適用於嚴格限制電子設備之攜入且對攜入之電子設備要求高度之保密措施之半導體製造工廠等中使用。
如以上說明，於本實施形態中，用以確認與機器人27之動作相關之影像之影像確認用電腦65係具備記憶電路66及演算電路67。記憶電路66係可記憶資訊。演算電路67係輸出基於記憶電路66之記憶內容之資訊。記憶電路66係記憶驅動機器人27之連桿體之電動馬達之位置之資訊、及影像之資訊。電動馬達之位置之資訊係可自機器人27之控制器44接收。影像資訊，可藉由安裝於機器人27上之照相機62獲取。演算電路67係使本機之顯示器上並排顯示模型區域72及影像區域73。於模型區域72中，藉由電腦繪圖顯示有再現機器人27之姿勢之二維或三維之模型。於影像區域73顯示影像。
如此藉由並排顯示兩個區域，作業人員可複合且直觀地把握與機器人27之動作相關之狀況。 因此，作業人員可圓滑且準確地處置狀況(例如，故障之產生)。
此外，於本實施形態之影像確認用電腦65中，使與顯示於模型區域72之模型對應之時刻、及與顯示於影像區域73之影像對應之時刻同步。
藉此，可使模型區域72中之模型動作之再現與影像區域73中之動畫之播放同步。因此，觀看畫面之作業人員可容易把握狀況。
此外，於本實施形態之影像確認用電腦65中，記憶電路66係記憶控制器44與其他裝置進行通信之通信日誌。演算電路67係除了模型區域72及影像區域73外，還可使日誌區域74顯示於本機上，該日誌區域74係用以輸出通信日誌之履歷。通信日誌履歷之顯示於日誌區域74之顯示時間係與模型區域72及影像區域73之時刻同步。
藉此，日誌區域74之顯示係以與顯示模型區域72及影像區域73之時刻一致之時間進行變化。因此，作業人員不會於狀況之把握上產生混亂。
此外，於本實施形態之影像確認用電腦65中，演算電路67顯示有共用之搜索條72a，該搜索條72a係用以指定與顯示於模型區域72之模型對應之時刻、及與顯示於影像區域73之影像對應之時刻。
藉此，可藉由使用搜索條之直觀性操作，指定將哪一時刻上之狀況顯示於模型區域72及影像區域73。因此，作業人員可容易把握想要了解之時刻之狀況。此外，由於搜索條72a被共用，因此可實現操作時不易產生混亂之簡潔畫面。
以上，對本發明之較佳實施形態進行了說明，但上述構成例如可變更如下。
也可將機器人27之正常狀態下之資訊記憶於影像確認用電腦65之記憶電路66及控制器44之記憶電路46中之至少一個中。於此情況下，當產生故障時，可於影像確認用電腦65或處置用電腦70中，顯示正常狀態下之資訊以供參考。該構成於影像確認用電腦65顯示之狀況確認畫面71上之圖形區域75中特別有用。這是因為圖形區域75之圖表即使於正常狀態下也可能大幅變動，若無比較之標準，則無法區分異常與正常。也可於圖形區域75之圖表中一併顯示一參數(例如、數值之平均值、最大值、最小值等)，該參數顯示正常狀態下之圖表之特徵。
顯示日誌分析畫面81、故障處置支援畫面88及說明書畫面93中之至少一個之電腦，也可為用以對機器人27進行教學作業而操作之教學器。
當藉由教學器進行教學作業時，由安裝於機器人27上之照相機62獲取之影像也可利用於輔助教學。
也可由一個硬體(電腦)實現影像確認用電腦65及處置用電腦70。
影像確認用電腦65所顯示之狀況確認畫面71也可與日誌分析畫面81等相同，而由瀏覽器顯示。
影像確認用電腦65也可取代本機之顯示器或除此之外，使連接於影像確認用電腦65之另一台電腦之顯示器顯示狀況確認畫面71。
20:半導體處理設備 22:晶圓處理裝置 23:晶圓移載裝置 24:晶圓 25:晶圓傳送盒 26:晶圓盒開啟器 27:機器人 29:準備空間 30:處理空間 41:基座 42:機械臂 43a:上下驅動致動器 43b:水平驅動致動器 44:控制器(機器人用控制器) 45:機械手 46, 66:記憶電路(記憶部) 47, 67:演算電路(演算部) 48:輸出裝置 61:高階控制器 62,63:照相機 65:影像確認用電腦 68:顯示器(顯示部) 70:處置用電腦 71:狀況確認畫面 72:模型區域 72a:搜索條 73:影像區域 74:日誌區域 75:圖形區域 81:日誌分析畫面 82:故障說明區域 83:詳細日誌區域 84:動作位置區域 85:程式狀態區域 86:輸入／輸出信號區域 88:故障處置支援畫面 89:故障說明區域 90:處置內容說明區域 91:關聯項目一覽區域 93:說明書畫面 94:目錄顯示區域 95:詳細顯示區域 96:搜索框
[圖1]為顯示應用本發明之一實施形態之影像確認用電腦之半導體處理設備之一部分之平面剖視圖。 [圖2]為剖切顯示半導體處理設備之一部分之側面剖視圖。 [圖3]為說明構築於半導體處理設備中之通信網路之示意圖。 [圖4]為顯示被顯示於影像確認用電腦上之狀況確認畫面之顯示例之圖。 [圖5]為顯示被顯示於處置用電腦上之日誌分析畫面之顯示例之圖。 [圖6]為顯示故障處置支援畫面之顯示例之圖。 [圖7]為顯示說明書畫面之顯示例之圖。
20:半導體處理設備
22:晶圓處理裝置
23:晶圓移載裝置
24:晶圓
25:晶圓傳送盒
26:晶圓盒開啟器
27:機器人
29:準備空間
30:處理空間
41:基座
42:機械臂
44:控制器(機器人用控制器)
45:機械手
62,63:照相機

Claims (2)

  1. 一種影像確認用電腦，係用以確認與機器人之動作相關之影像，並具備：記憶部，係可記憶資訊；以及演算部，係輸出基於前述記憶部之記憶內容之資訊；前述記憶部係記憶自前述機器人之控制器接收之驅動前述機器人之連桿體之電動馬達之位置之資訊、及藉由安裝於前述機器人上之照相機獲取之影像之資訊；前述演算部係使本機及連接於本機之電腦中之至少任一個上並排顯示模型區域及影像區域，前述模型區域係藉由電腦繪圖顯示再現前述機器人之姿勢之二維或三維之模型，前述影像區域顯示前述影像；與顯示於前述模型區域之前述模型對應之時刻、及與顯示於前述影像區域之影像對應之時刻係同步；前述記憶部記憶前述控制器與其他裝置進行通信之通信日誌；前述演算部係除了前述模型區域及前述影像區域外，還使日誌區域顯示於本機及連接於本機之電腦中之至少一個上，前述日誌區域係輸出前述通信日誌之履歷；通信日誌履歷之顯示於前述日誌區域之顯示時間係與前述模型區域及前述影像區域之時刻同步。
  2. 如請求項1所記載之影像確認用電腦，其中前述演算部顯示有共用之搜索條，前述搜索條係用以指定與顯示於前述模型區域之前述模型對應之時刻、及與顯示於前述影像區域之影像對應之時刻。
TW109143325A 2019-12-10 2020-12-09 影像確認用電腦 TWI770712B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2019-222900 2019-12-10
JP2019222900 2019-12-10
JP2020099458A JP2021091077A (ja) 2019-12-10 2020-06-08 映像確認用コンピュータ
JP2020-099458 2020-06-08

Publications (2)

Publication Number Publication Date
TW202137381A TW202137381A (zh) 2021-10-01
TWI770712B true TWI770712B (zh) 2022-07-11

Family

ID=76311372

Family Applications (2)

Application Number Title Priority Date Filing Date
TW109143325A TWI770712B (zh) 2019-12-10 2020-12-09 影像確認用電腦
TW109143324A TW202138138A (zh) 2019-12-10 2020-12-09 機器人用控制器

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW109143324A TW202138138A (zh) 2019-12-10 2020-12-09 機器人用控制器

Country Status (6)

Country Link
US (1) US20230019019A1 (zh)
JP (2) JP2021091078A (zh)
KR (1) KR20220100983A (zh)
CN (1) CN114830320A (zh)
TW (2) TWI770712B (zh)
WO (2) WO2021117620A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022132166A (ja) * 2021-02-26 2022-09-07 株式会社キビテク ロボット支援システム
KR20230094447A (ko) * 2021-12-21 2023-06-28 이규옥 엔드이펙터 감지센서를 갖는 풉 및 이를 이용한 데이터 통합 관리시스템
WO2024095340A1 (ja) * 2022-10-31 2024-05-10 ファナック株式会社 動画マニュアル作成装置、及び動画マニュアル作成方法
KR102624242B1 (ko) * 2023-07-07 2024-01-15 주식회사 아임토리 로봇 기반 ２ｄ 및 ３ｄ 매칭 서비스 제공 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080286697A1 (en) * 2001-08-31 2008-11-20 Steven Verhaverbeke Method and apparatus for processing a wafer
JP2017052053A (ja) * 2015-09-10 2017-03-16 株式会社Ｉｈｉエアロスペース 無人車両における遠隔操縦用画像の作製方法、及び無人車両の遠隔操縦システム

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2764586B2 (ja) * 1988-09-30 1998-06-11 トーヨーエイテック株式会社 機械異常の復旧方法表示装置
JPH03105406A (ja) * 1989-09-19 1991-05-02 Matsushita Electric Ind Co Ltd 設備のエラーメッセージ表示方法
JP2001062766A (ja) * 1999-08-26 2001-03-13 Matsushita Electric Works Ltd ２足歩行ロボットの遠隔制御用ユーザインターフェイスシステム
JP2004031381A (ja) * 2002-06-21 2004-01-29 Hitachi High-Technologies Corp 半導体製造装置及びその診断装置ならびに半導体製造装置の運用システム
JP2004174662A (ja) * 2002-11-27 2004-06-24 Fanuc Ltd ロボットの動作状態解析装置
JP2006120820A (ja) * 2004-10-21 2006-05-11 Hitachi Sci Syst Ltd 薄型基板処理装置及び薄型基板搬送装置
JP2006219258A (ja) * 2005-02-10 2006-08-24 Hitachi Plant Technologies Ltd 設備装置の作業支援システム
JP4098338B2 (ja) 2006-07-20 2008-06-11 川崎重工業株式会社 ウェハ移載装置および基板移載装置
JP4508252B2 (ja) * 2008-03-12 2010-07-21 株式会社デンソーウェーブ ロボット教示装置
JP5260156B2 (ja) * 2008-06-17 2013-08-14 株式会社日立ハイテクノロジーズ 自動分析装置管理システム
JP5414703B2 (ja) * 2011-01-20 2014-02-12 東京エレクトロン株式会社 処理装置の異常診断方法及びその異常診断システム
JP6105537B2 (ja) * 2014-09-24 2017-03-29 ファナック株式会社 アラーム対処履歴を表示する数値制御装置
JP2019171490A (ja) * 2018-03-27 2019-10-10 日本電産サンキョー株式会社 動作履歴管理システム
EP3875230A4 (en) * 2018-11-01 2022-07-27 Canon Kabushiki Kaisha EXTERNAL INPUT DEVICE, ROBOT SYSTEM, CONTROL METHOD FOR ROBOT SYSTEM, CONTROL PROGRAM AND RECORDING MEDIA

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080286697A1 (en) * 2001-08-31 2008-11-20 Steven Verhaverbeke Method and apparatus for processing a wafer
JP2017052053A (ja) * 2015-09-10 2017-03-16 株式会社Ｉｈｉエアロスペース 無人車両における遠隔操縦用画像の作製方法、及び無人車両の遠隔操縦システム

Also Published As

Publication number Publication date
WO2021117619A1 (ja) 2021-06-17
TW202138138A (zh) 2021-10-16
WO2021117620A1 (ja) 2021-06-17
US20230019019A1 (en) 2023-01-19
TW202137381A (zh) 2021-10-01
KR20220100983A (ko) 2022-07-18
JP2021091078A (ja) 2021-06-17
JP2021091077A (ja) 2021-06-17
CN114830320A (zh) 2022-07-29

Similar Documents

Publication Publication Date Title
TWI770712B (zh) 影像確認用電腦
JP7290622B2 (ja) 搬送装置およびアダプタペンダント
US9829873B2 (en) Method and data presenting device for assisting a remote user to provide instructions
JP6384195B2 (ja) ロボットシステムおよびロボット教示方法
EP3014367B1 (en) Method and video communication device for transmitting video to a remote user
US11556875B2 (en) Generating visualizations for instructional procedures
EP3822743A1 (en) Remote support via visualizations of instructional procedures
US11455300B2 (en) Interactive industrial automation remote assistance system for components
JP2017094407A (ja) シミュレーション装置、シミュレーション方法、およびシミュレーションプログラム
TW201440980A (zh) 監控晶圓處理及晶圓處理機之系統及方法
US20090070634A1 (en) System and method for automated customizable error diagnostics
JP2019171490A (ja) 動作履歴管理システム
CN210323824U (zh) 一种机台加工控制系统和监控系统
JP2706793B2 (ja) 塗布現像装置
TWI776556B (zh) 機器人的示教裝置以及機器人的示教程序
KR20140008659A (ko) 로봇을 모니터링하는 교시조작 시스템 및 교시조작 방법
JP2005335000A (ja) 人間介入型ロボットの制御装置
US11992960B2 (en) Robot system, control apparatus of robot system, control method of robot system, imaging apparatus, and storage medium
US20210187751A1 (en) Robot system, control apparatus of robot system, control method of robot system, imaging apparatus, and storage medium
TW202204110A (zh) 機器人的示教裝置以及機器人的示教程序
JP2023174513A (ja) 情報処理装置、情報処理方法、ロボットシステム、ロボットシステムを用いた物品の製造方法、教示装置、プログラム及び記録媒体
Sallinen et al. Framework for teleoperation and maintenance of an industrial robot
Higinio de Jesús Development of an augmented reality interface for a manufacturing monitoring system for deployment in Industry 4.0 environments