CN107211572A - 图像处理装置、安装处理系统、图像处理方法及程序 - Google Patents

图像处理装置、安装处理系统、图像处理方法及程序 Download PDF

Info

Publication number
CN107211572A
CN107211572A CN201580075193.XA CN201580075193A CN107211572A CN 107211572 A CN107211572 A CN 107211572A CN 201580075193 A CN201580075193 A CN 201580075193A CN 107211572 A CN107211572 A CN 107211572A
Authority
CN
China
Prior art keywords
image
spent component
spent
discarded
display field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580075193.XA
Other languages
English (en)
Other versions
CN107211572B (zh
Inventor
加藤刚
大池博史
江崎弘健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fuji Corp
Original Assignee
Fuji Machine Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Machine Manufacturing Co Ltd filed Critical Fuji Machine Manufacturing Co Ltd
Publication of CN107211572A publication Critical patent/CN107211572A/zh
Application granted granted Critical
Publication of CN107211572B publication Critical patent/CN107211572B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/0008Industrial image inspection checking presence/absence
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05KPRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K13/00Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
    • H05K13/04Mounting of components, e.g. of leadless components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05KPRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K13/00Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
    • H05K13/08Monitoring manufacture of assemblages
    • H05K13/081Integration of optical monitoring devices in assembly lines; Processes using optical monitoring devices specially adapted for controlling devices or machines in assembly lines
    • H05K13/0813Controlling of single components prior to mounting, e.g. orientation, component geometry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30141Printed circuit board [PCB]

Landscapes

  • Engineering & Computer Science (AREA)
  • Manufacturing & Machinery (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Supply And Installment Of Electrical Components (AREA)
  • Image Processing (AREA)

Abstract

安装装置(11)首先向基板(S)安装元件(P),进行使基于拍摄到的图像而废弃的废弃元件(R)排列于废弃载置部(30)的处理。另一方面,管理计算机(50)的CPU取得能够识别废弃的废弃元件(R)的识别图像和拍摄该废弃元件(R)而得到的拍摄图像,将取得的废弃元件(R)的识别图像与拍摄该废弃元件(R)而得到的拍摄图像建立对应,生成包含根据排列于废弃载置部(30)的顺序而配置有识别图像的排列显示栏的废弃元件排列形象画面。接下来,管理计算机(50)的CPU输出生成的废弃元件排列形象画面。

Description

图像处理装置、安装处理系统、图像处理方法及程序
技术领域
本发明涉及图像处理装置、安装处理系统及图像处理方法,更详细而言,涉及与将元件向基板安装的处理关联的图像处理装置、安装处理系统及图像处理方法。
背景技术
以往,作为安装装置,提出了如下的结构:具备将判定为不良的元件搬出的输送器,在设定于输送器上的元件载置区域内掌握未载置元件的空区域,考虑不良元件的朝向和配置场所而在空区域内装满地载置不良元件(例如,参照专利文献1)。
专利文献
专利文献1:日本特开2004-165456号公报
发明内容
发明要解决的课题
然而,在上述的安装装置中,例如,作业者有时想要了解判定为不良的元件的不良原因与元件的状态的关联。在安装系统中,关于判定为不良元件的不良的内容,有时存储在管理服务器等中,但是存在不了解与载置在输送器上的元件对应的信息为哪个的问题。
本发明鉴于这样的课题而作出,主要目的在于提供作业者能够更容易地识别废弃元件的图像处理装置、图像处理方法及其程序。
用于解决课题的方案
本发明为了实现上述的主要目的而采用以下的方案。
本发明的图像处理装置用于安装装置,该安装装置将元件安装于基板,且具备使基于拍摄到的图像而被废弃的废弃元件排列于预定的废弃载置部的废弃处理部,所述图像处理装置具备:信息取得部,取得能够识别被所述废弃处理部废弃的废弃元件的识别图像和拍摄该废弃元件而得到的拍摄图像;画面生成部,将所述信息取得部取得的废弃元件的识别图像与拍摄该废弃元件而得到的所述拍摄图像建立对应,生成包含根据所述废弃处理部使废弃元件排列于所述废弃载置部的顺序而配置了所述识别图像的排列显示栏的废弃元件排列形象画面;及输出部,输出由所述画面生成部生成的废弃元件排列形象画面。
在该图像处理装置中,安装装置首先向基板安装元件,进行使基于拍摄到的图像而被废弃的废弃元件排列于预定的废弃载置部的处理。在该装置中,取得能够识别废弃处理的废弃元件的识别图像和拍摄该废弃元件而得到的拍摄图像。接下来,该装置将取得的废弃元件的识别图像与拍摄该废弃元件而得到的拍摄图像建立对应,生成包含根据排列于废弃载置部的顺序而配置了识别图像的排列显示栏的废弃元件排列形象画面。接下来,该装置输出生成的废弃元件排列形象画面。然后,作业者能够确认载置于废弃载置部的废弃元件,并且能够确认输出的废弃元件排列形象画面的排列显示栏的废弃元件的排列。因此,在该装置中,作业者能够更容易地识别废弃元件。
在本发明的图像处理装置中,可以是,所述画面生成部生成包含拍摄图像显示栏的所述废弃元件排列形象画面,该拍摄图像显示栏与配置于所述排列显示栏的识别图像一起显示与该识别图像对应的所述拍摄图像,或者当配置于所述排列显示栏的识别图像被选择时显示与所选择的该识别图像对应的所述拍摄图像。在该装置中,作业者通过拍摄图像显示栏,容易确认拍摄图像。
在本发明的图像处理装置中,可以是,所述信息取得部也取得与所述废弃元件的废弃理由相关的废弃信息,所述画面生成部生成包含废弃信息显示栏的所述废弃元件排列形象画面,该废弃信息显示栏与配置于所述排列显示栏的识别图像一起显示与该识别图像对应的所述废弃元件的废弃信息,或者当配置于所述排列显示栏的识别图像被选择时显示与所选择的该识别图像对应的所述废弃元件的废弃信息。在该装置中,作业者通过废弃信息显示栏,容易确认废弃元件的废弃理由。
在本发明的图像处理装置中,可以是,所述画面生成部使用模仿了所述废弃元件的图标图像和使拍摄所述废弃元件而得到的拍摄图像缩小了的缩略图中的一个以上作为所述识别图像。在该装置中,通过图标图像、缩略图,作业者能够更容易地识别废弃元件。
在本发明的图像处理装置中,可以是,所述废弃载置部是废弃输送器,所述画面生成部生成包含模仿了排列于所述废弃输送器上的废弃元件的所述排列显示栏的废弃元件排列形象画面。
在本发明的图像处理装置中,可以是,所述画面生成部生成从所述排列显示栏删除了基于来自所述安装装置具备的所述废弃载置部上的废弃元件的检测部的检测结果而从所述废弃载置部上除去的废弃元件的所述识别图像的所述废弃元件排列形象画面。在该装置中,基于废弃元件的检测结果,能够更适当地更新排列显示栏。此时,所述画面生成部可以在整个所述废弃载置部上排列有所述废弃元件之后,生成从所述排列显示栏删除了从所述废弃载置部上除去的废弃元件的所述识别图像的所述废弃元件排列形象画面。
本发明的安装处理系统具备:安装装置,将元件安装于基板,且具备使基于拍摄到的图像而被废弃的废弃元件排列于预定的废弃载置部的废弃处理部;及上述的任一个图像处理装置。
该安装处理系统由于具备上述任一个图像处理装置,因此作业者能够更容易地识别废弃元件。而且,安装处理系统能够得到与采用的图像处理装置对应的效果。
本发明的图像处理方法用于安装装置,该安装装置将元件安装于基板,且具备使基于拍摄到的图像而被废弃的废弃元件排列于预定的废弃载置部的废弃处理部,所述图像处理方法包括以下的步骤:(a)取得能够识别被所述废弃处理部废弃的废弃元件的识别图像和拍摄该废弃元件而得到的拍摄图像;(b)将所述步骤(a)中取得的废弃元件的识别图像与拍摄该废弃元件而得到的所述拍摄图像建立对应,生成包含根据所述废弃处理部使废弃元件排列于所述废弃载置部的顺序而配置了所述识别图像的排列显示栏的废弃元件排列形象画面;及(c)输出所述步骤(b)中生成的废弃元件排列形象画面。
在该图像处理方法中,与上述的图像处理装置同样,作业者能够确认载置于废弃载置部的废弃元件,并且能够确认输出的废弃元件排列形象画面的排列显示栏的废弃元件的排列。因此,在该方法中,作业者能够更容易地识别废弃元件。需要说明的是,在该图像处理方法中,可以采用上述的图像处理装置的各种形态,而且,也可以追加实现上述的图像处理装置的各功能的步骤。
本发明的程序使一台以上的计算机执行上述的图像处理方法的步骤。该程序可以记录于计算机能够读取的记录介质(例如硬盘、ROM、FD、CD、DVD等),也可以经由传送介质(互联网、LAN等通信网)而从某一计算机向另一计算机发送,还可以通过其他任意的方式进行交接。如果使一台计算机执行该程序或者使多台计算机分担地执行各步骤,则能执行上述的图像处理方法的各步骤,因此能得到与该方法同样的作用效果。
附图说明
图1是表示安装系统10的一例的概略说明图。
图2是表示安装装置11及管理计算机50的结构的框图。
图3是表示废弃处理例程的一例的流程图。
图4是表示废弃元件除去报知画面60的一例的说明图。
图5是表示废弃画面生成处理例程的一例的流程图。
图6是表示废弃元件排列形象画面70的一例的说明图。
图7是表示废弃元件排列形象画面70B的一例的说明图。
具体实施方式
参照附图,以下说明本发明的优选的实施方式。图1是表示安装系统10的一例的概略说明图。图2是表示安装装置11及管理计算机50的结构的框图。安装系统10是将元件P向基板S安装的系统。该安装系统10具备安装装置11和管理计算机50。安装系统10从上游至下游配置有实施将元件P向基板S安装的安装处理的多个安装装置11。在图1中,为了便于说明而安装装置11仅示出1台。需要说明的是,在本实施方式中,左右方向(X轴)、前后方向(Y轴)及上下方向(Z轴)如图1所示。
如图1、2所示,安装装置11具备基板搬运单元12、安装单元13、元件供给单元14、零件相机15、操作面板16、废弃载置部30、控制装置40。基板搬运单元12是进行基板S的搬入、搬运、安装位置处的固定、搬出的单元。基板搬运单元12具有在图1的前后空出间隔地设置且沿左右方向架设的一对输送带。基板S由该输送带搬运。
安装单元13从元件供给单元14拾取元件P,并向固定于基板搬运单元12的基板S配置。安装单元13具备头移动部20、安装头22、吸嘴24、侧方相机25。头移动部20具备由导轨引导而在XY方向上移动的滑动件和对滑动件进行驱动的电动机。安装头22以能够拆卸的方式装配于滑动件,通过头移动部20而在XY方向上移动。在安装头22的下表面以能够拆卸的方式装配有1个以上的吸嘴24。安装头22内置有Z轴电动机,通过该Z轴电动机而沿着Z轴来调整吸嘴24的高度。吸嘴24拾取元件P,由未图示的减压泵供给负压,通过该负压而吸附保持元件P。侧方相机25是从侧方拍摄拾取了元件P的状态的吸嘴24的相机。
元件供给单元14具备多个带盘,以能够拆装的方式安装于安装装置11的前侧。在各带盘卷缠带,在带的表面沿着长度方向保持元件P。该带从带盘朝向后方开卷,在元件P露出的状态下,通过供料器部送出到由吸嘴24吸附的拾取位置。
零件相机15是拍摄安装头22吸附的元件P的单元,配设在基板搬运单元12与元件供给单元14之间。该零件相机15的拍摄范围是零件相机15的上方。在吸附有元件P的吸嘴24通过零件相机15的上方时,零件相机15拍摄吸嘴24吸附的元件P,并将拍摄结果向控制装置40输出。
操作面板16具备显示部17及操作部18。显示部17构成为显示各种信息并向作业者报知信息的显示器。操作部18具备作业者输入各种指令的触摸面板及输入键等。
废弃载置部30载置废弃的废弃元件R。如图2所示,废弃载置部30具备控制部31、输送器32、检测部33。控制部31对输送器32进行驱动控制,取得来自检测部33的检测信号。输送器32载置废弃元件R,并使载置的废弃元件R在前后方向上移动。在输送器32的前方的下方放置集尘箱19(参照图1)。检测部33是非接触式的传感器,当其检测区域存在物体时输出检测信号。该废弃载置部30在通过安装单元13载置新的废弃元件R时,将载置完的废弃元件R向装置前方送出,向空的空间载置新的废弃元件R。
如图2所示,控制装置40构成为以CPU41为中心的微处理器,具备存储处理程序的ROM42、存储各种数据的HDD43、被用作作业区域的RAM44、用于与外部装置进行电信号的交接的输入输出接口45等,它们经由总线46而连接。该控制装置40在基板搬运单元12、安装单元13、元件供给单元14、零件相机15、操作面板16及废弃载置部30之间输入输出控制信号,输入来自侧方相机25、零件相机15的图像数据。
管理计算机50是管理安装系统10的各装置的信息的计算机。管理计算机50具备CPU51、存储处理程序的ROM52、存储各种信息的HDD53、作为作业区域使用的RAM54、用于与外部装置进行电信号的交接的输入输出接口55等,它们经由总线56而连接。管理计算机50具备作业者输入各种指令的键盘及鼠标等输入装置57、显示各种信息的显示器58。在HDD53存储有安装作业信息、元件数据库、拍摄废弃元件R而得到的拍摄图像数据等。安装作业信息包括通过安装装置11安装的元件P的类别(识别信息)、配置位置、配置顺序等信息。元件数据库包括元件P的识别信息、尺寸信息、成为形状的基准的基准图像、识别图像等的信息。识别图像是通过其形状而能够视觉辨认元件P的图像数据,可以作为模仿元件P而生成的图标图像,也可以作为将拍摄该元件P而得到的拍摄图像缩小了的缩略图。拍摄废弃元件R而得到的拍摄图像数据在安装装置11的安装处理中由零件相机15、侧方相机25拍摄,当进行废弃该元件P的判定时,从安装装置11取得而存储于HDD53。该拍摄图像数据与废弃元件R的识别信息、通过安装装置11判定的废弃理由的信息建立对应而保存在HDD53中,以在之后作业者能够确认。这样,管理计算机50具有取得能够识别废弃的废弃元件R的识别图像和拍摄该废弃元件R而得到的拍摄图像的功能。而且,管理计算机50具有将取得的废弃元件的识别图像与拍摄该废弃元件而得到的拍摄图像建立对应而生成包含根据排列于废弃载置部30的顺序而配置有识别图像的排列显示栏的废弃元件排列形象画面的功能。此外,管理计算机50具有将生成的废弃元件排列形象画面向显示器58、显示部17输出的功能。
接下来,说明这样构成的本实施方式的安装系统10的动作,首先,说明安装装置11的安装处理。当安装处理开始时,控制装置40的CPU41将与拾取的元件P对应的吸嘴24装配于安装头22,对安装单元13进行控制,以从元件供给单元14拾取元件P。接下来,CPU41通过侧方相机25从侧方拍摄元件P。而且,CPU41以使安装头22通过零件相机15的上方的方式控制头移动部20,使零件相机15拍摄安装头22吸附保持的元件P。接下来,CPU41基于零件相机15及侧方相机25的拍摄结果,检测元件P的形状、位置、旋转角度等。CPU41进行元件P的基准图像与拍摄图像的匹配,判定元件P的旋转角度、形状异常的有无。然后,CPU41调整元件P的位置、旋转角度,向基板S配置元件P。此时,在元件P存在变形等形状异常、无法配置那样的吸附位置的异常等的情况下,CPU41使安装单元13进行不将该元件P用于安装而废弃的处理。CPU41基于安装作业信息而反复进行这样的处理,直至元件P向基板S的配置全部结束为止。
接下来,说明废弃载置部30的废弃处理。图3是表示由废弃载置部30的控制部31执行的废弃处理例程的一例的流程图。该例程每当控制装置40判定为废弃元件P时由控制部31执行。当该例程开始时,控制部31从控制装置40取得废弃元件R的信息(步骤S100)。控制部31取得的废弃元件R的信息包括例如废弃元件R的尺寸等。接下来,在输送器32上输送的情况下,控制部31基于取得的废弃元件R的信息和当前的输送器32的状态来判定将安装头22吸附的废弃元件R载置在输送器32上的空间是否存在(步骤S110)。需要说明的是,控制部31将载置于输送器32的废弃元件R的识别信息、与尺寸、位置、废弃元件R的识别信息建立对应的拍摄图像的信息等建立对应而作为废弃元件配置信息进行管理。
在能够将安装头22吸附的废弃元件R向输送器32载置时,控制部31以与废弃元件R的尺寸对应的移动量向前方驱动输送器32(步骤S120),为了确认而判定从检测部33是否输入了检测信号(步骤S130)。在从检测部33输入了检测信号时,控制部31视为废弃元件R到达输送器32的最前部,向控制装置40输出在操作面板16上显示将输送器32上的废弃元件R除去这一内容的报知画面的指令(步骤S140)。接受到此指令的控制装置40将报知画面显示于显示部17。图4是表示废弃元件除去报知画面60的一例的说明图。在该废弃元件除去报知画面60配置有消息显示栏62、指示显示栏63、完毕输入显示栏64。在消息显示栏62显示将输送器32上的废弃元件R去除这一内容的消息。在指示显示栏63显示将输送器32上的废弃元件R去除的处理图像。在完毕输入显示栏64显示对于操作部18进行废弃完毕输入的说明图像。而且,控制部31在步骤S110中判定为在输送器32不能载置废弃元件R时,也进行步骤S140的处理。作业者当确认该废弃元件除去报知画面60时,将处于废弃载置部30的废弃元件R除去,通过操作部18进行废弃完毕输入。
接下来,控制部31基于来自控制装置40的信号来判定操作部18是否作出了废弃完毕输入(步骤S150),在未作出废弃完毕输入时,原封不动地待机。另一方面,在作出了废弃完毕输入时,控制部31遍及能够载置废弃元件R的整个区域的预定距离地继续驱动输送器32(步骤S160),判定来自检测部33的检测信号是否存在(步骤S170)。在输入了来自检测部33的检测信号时,控制部31视为输送器32上残留有废弃元件R,执行步骤S140以后的处理。即,控制部31将废弃元件的除去向作业者报知。另一方面,在步骤S170中没有检测信号时,控制部31视为输送器32上的废弃元件R全部被除去,将应配置在输送器32上的废弃元件R的信息从废弃元件配置信息清除(步骤S180)。这样,控制部31基于来自检测部33的检测信号,对废弃元件配置信息进行更新。
在步骤S180之后,或者在步骤S130中从检测部33未输入检测信号时,控制部31向控制装置40输出信号并将废弃元件R向输送器32载置(步骤S190),加入载置的废弃元件R的信息等而对废弃元件配置信息进行更新(步骤S200),结束该例程。这样,控制部31基于来自检测部33的检测信号,对载置在输送器32上的废弃元件R的包含状态的废弃元件配置信息进行更新,并进行输送器32的驱动。
接下来,说明关于废弃载置部30而生成显示于显示部17、显示器58的画面的处理。在此,说明管理计算机50生成关于废弃载置部30的画面的情况。图5是表示管理计算机50的CPU51执行的废弃画面生成处理例程的一例的流程图。该例程存储在HDD53中,根据来自作业者的显示指示的输入而由CPU51执行。在此,说明作业者操作安装装置11的操作面板16而使显示部17进行画面显示的情况。当该例程开始时,CPU51从安装装置11取得废弃元件配置信息(步骤S300),取得与载置在输送器32上的废弃元件R对应的识别图像及在废弃时拍摄的拍摄图像数据(步骤S310)。CPU51从HDD53取得拍摄图像数据,并从元件数据库取得识别图像。接下来,CPU51生成排列有识别图像的输送器排列显示栏(步骤S320),生成配置有输送器排列显示栏、拍摄图像显示栏、废弃信息显示栏的废弃元件排列形象画面(步骤S330)。
图6是表示废弃元件排列形象画面70的一例的说明图,图6(a)是废弃元件R的选择前的说明图,图6(b)是废弃元件R的选择后的说明图。废弃元件排列形象画面70包括光标71、输送器排列显示栏72、上方拍摄图像显示栏73、侧方拍摄图像显示栏74、废弃信息显示栏75。光标71用于选择图像,根据作业者的输入而能够上下左右移动。输送器排列显示栏72是显示安装单元13根据排列于废弃载置部30的顺序而配置有识别图像的形象图像的栏。在该输送器排列显示栏72排列有与当前的废弃载置部30所载置的废弃元件R的配置顺序同样的识别图像(图6(a))。上方拍摄图像显示栏73是显示在零件相机15的上方拍摄的废弃元件R的拍摄图像的栏。侧方拍摄图像显示栏74是显示由侧方相机25拍摄到的废弃元件R的拍摄图像的栏。废弃信息显示栏75是显示废弃元件R的废弃理由的栏。在该废弃元件排列形象画面70中,在上方拍摄图像显示栏73、侧方拍摄图像显示栏74、废弃信息显示栏75显示与输送器排列显示栏72中选择的废弃元件R对应的拍摄图像、废弃理由等(图6(b))。需要说明的是,在废弃元件排列形象画面70中,在废弃载置部30的整体排列有废弃元件R之后,从输送器排列显示栏72删除基于来自检测部33的检测结果而判定为从废弃载置部30上除去的废弃元件R的识别图像。
当生成废弃元件排列形象画面70时,CPU51将生成的画面向安装装置11输出(步骤S340),结束该例程。取得了该废弃元件排列形象画面70的安装装置11的CPU41使显示部17显示废弃元件排列形象画面70。需要说明的是,通过作业者在废弃元件排列形象画面70上操作光标71,而在输送器排列显示栏72上选择任一废弃元件R时,CPU41对与该废弃元件R对应的拍摄图像、废弃理由进行显示控制,省略具体的说明。
废弃元件R因基于元件变形的情况、吸附位置的异常的情况、图像识别的错误的情况等废弃理由而废弃。作业者有时想要了解该废弃元件R因何种理由而被废弃,但是即便确认配置于输送器32的废弃元件R,也无法了解安装装置11的判定结果。在此,在废弃元件排列形象画面70上,显示载置于输送器32的废弃元件R的形象、其拍摄图像、其废弃理由,因此作业者容易确认实际的载置于输送器32的废弃元件R、废弃理由。因此,作业者能够判断废弃理由的妥当性,而且,也能够再利用废弃元件R。
在此,明确本实施方式的构成要素与本发明的构成要素的对应关系。本实施方式的CPU51相当于本发明的信息取得部、画面生成部及输出部,安装单元13相当于废弃处理部,废弃载置部30相当于废弃载置部。而且,废弃元件排列形象画面70相当于废弃元件排列形象画面,输送器排列显示栏72相当于排列显示栏,上方拍摄图像显示栏73及侧方拍摄图像显示栏74相当于拍摄图像显示栏,废弃信息显示栏75相当于废弃信息显示栏。需要说明的是,在本实施方式中,通过说明管理计算机50的动作,本发明的图像处理方法的一例也变得明确。
在以上说明的安装系统10中,安装装置11首先向基板S安装元件P,进行使基于拍摄到的图像而被废弃的废弃元件R排列于废弃载置部30的处理。然后,管理计算机50的CPU51取得能够识别废弃的废弃元件R的识别图像和拍摄该废弃元件R而得到的拍摄图像。接下来,CPU51将取得的废弃元件的识别图像与拍摄该废弃元件而得到的拍摄图像建立对应,生成包含根据排列于废弃载置部30的顺序而配置了识别图像的输送器排列显示栏72的废弃元件排列形象画面70,并将生成的废弃元件排列形象画面向安装装置11输出。然后,作业者能够确认载置于废弃载置部30的废弃元件R,并且能够确认废弃元件排列形象画面70的输送器排列显示栏72的废弃元件R的排列。因此,作业者能够更容易地识别废弃元件R。
另外,当选择配置于输送器排列显示栏72的识别图像时,CPU51生成包含显示与所选择的该识别图像对应的拍摄图像的上方拍摄图像显示栏73及侧方拍摄图像显示栏74的画面。因此,作业者通过输送器排列显示栏72、上方拍摄图像显示栏73、侧方拍摄图像显示栏74,而容易确认废弃元件R与其拍摄图像的对应关系。此外,当选择配置于输送器排列显示栏72的识别图像时,CPU51生成包含显示与所选择的该识别图像对应的废弃元件R的废弃信息的废弃信息显示栏75的画面。因此,作业者通过输送器排列显示栏72及废弃信息显示栏75,而容易确认废弃元件R与其废弃理由的对应关系。此外,CPU51由于使用图标图像、缩略图作为识别图像,因此通过图标图像、缩略图,作业者能够更容易地识别废弃元件R。并且,CPU51生成包含模仿了排列在输送器32上的废弃元件R的输送器排列显示栏72的画面,因此作业者在视觉上容易确认废弃元件R。此外,CPU51生成从输送器排列显示栏72删除了基于检测部33的检测结果而从废弃载置部30上除去的废弃元件R的识别图像的画面,因此能够更适当地更新输送器排列显示栏72。
需要说明的是,本发明不受上述的实施方式的任何限定,只要属于本发明的技术范围,当然就能以各种形态实施。
例如,在上述的实施方式中,说明了废弃元件排列形象画面70包括上方拍摄图像显示栏73、侧方拍摄图像显示栏74及废弃信息显示栏75的情况,但是可以省略它们中的1个以上,也可以省略全部。而且,在省略了上方拍摄图像显示栏73、侧方拍摄图像显示栏74及废弃信息显示栏75中的1个以上的情况下,可以将省略的显示栏显示在另外的画面上。例如,废弃元件排列形象画面只要至少包括输送器排列显示栏并将其识别信息与拍摄图像建立对应即可。此时,在选择了识别图像时,可以将与选择的识别图像对应的拍摄图像显示栏及/或废弃信息显示栏显示在另外的画面上。即便如此,通过废弃元件排列形象画面,作业者也能够更容易地识别废弃元件R。
在上述的实施方式中,在选择了识别图像之后,显示与该废弃元件R对应的拍摄图像、废弃信息,但是没有特别限定于此。也可以例如如图7所示,生成配置有与识别图像一起显示拍摄图像的上方拍摄图像显示栏73B、侧方拍摄图像显示栏74B、与识别图像一起显示废弃信息的废弃信息显示栏75B等的废弃元件排列形象画面70B。图7是表示废弃元件排列形象画面70B的一例的说明图。在该废弃元件排列形象画面70B中,与识别图像一起显示拍摄图像、废弃信息。即便如此,作业者也能够更容易地识别废弃元件R。需要说明的是,在废弃元件排列形象画面70B中,可以使上方拍摄图像显示栏73B、侧方拍摄图像显示栏74B及废弃信息显示栏75B中的任1个以上成为在选择了识别信息之后显示图像的结构。而且,在废弃元件排列形象画面70B中,例如,可以在选择了拍摄图像显示栏的情况下将其包含的拍摄图像进行放大显示。
在上述的实施方式中,管理计算机50生成废弃元件排列形象画面70,并通过安装装置11进行显示,但是没有特别限定于此。例如,也可以通过安装装置11生成废弃元件排列形象画面70,并通过管理计算机50进行显示。需要说明的是,在安装装置11生成废弃元件排列形象画面70的情况下,安装装置11相当于本发明的图像处理装置。
在上述的实施方式中,废弃载置部30为输送器32,但是没有特别限定于此,也可以为载置台。
在上述的实施方式中,废弃载置部30使用检测部33的检测结果对废弃元件配置信息进行更新,但是没有特别限定于此,也可以不使用检测部33的检测结果而对废弃元件配置信息进行更新。而且,废弃载置部30可以不具备检测部33。例如,可以在产生了废弃元件R时,控制部31对输送器32进行驱动,从输送器32的前端向集尘箱19依次将废弃元件R废弃,并对应于此而更新废弃元件配置信息。而且,在上述的实施方式中,在废弃处理例程中,进行了步骤S100~S200的处理,但是例如也可以省略其中的一部分的处理,还可以仅进行步骤S100、S120、S190及S200的处理。即便如此,通过废弃元件排列形象画面70,作业者也能够更容易地识别废弃元件R。
在上述的实施方式中虽然未特别说明,但是废弃载置部30可以具备手动地操作输送器32的操作键。此时,可以是,控制部31管理输送器32的位置,在载置有废弃元件R的状态下操作输送器32,当废弃元件R成为输送器32的区域外时,将该废弃元件R除去。
在上述的实施方式中,作为图像处理装置即管理计算机50而说明了本发明,但是没有特别限定于此,可以作为图像处理方法,也可以作为其程序。
工业实用性
本发明能够利用于进行将元件配置在基板上的安装关联处理的装置。
附图标记说明
10安装系统、11安装装置、12基板搬运单元、13安装单元、14元件供给单元、15零件相机、16操作面板、17显示部、18操作部、19集尘箱、20头移动部、22安装头、24吸嘴、25侧方相机、30废弃载置部、31控制部、32输送器、33检测部、40控制装置、41CPU、42ROM、43HDD、44RAM、45输入输出接口、46总线、50管理计算机、51CPU、52ROM、53HDD、54RAM、55输入输出接口、56总线、57输入装置、58显示器、60废弃元件除去报知画面、62消息显示栏、63指示显示栏、64完毕输入显示栏、70、70B废弃元件排列形象画面、71光标、72输送器排列显示栏、73、73B上方拍摄图像显示栏、74、74B侧方拍摄图像显示栏、75、75B废弃信息显示栏、P元件、R废弃元件、S基板。

Claims (9)

1.一种图像处理装置,用于安装装置,该安装装置将元件安装于基板,且具备使基于拍摄到的图像而被废弃的废弃元件排列于预定的废弃载置部的废弃处理部,
所述图像处理装置具备:
信息取得部,取得能够识别被所述废弃处理部废弃的废弃元件的识别图像和拍摄该废弃元件而得到的拍摄图像;
画面生成部,将所述信息取得部取得的废弃元件的识别图像与拍摄该废弃元件而得到的所述拍摄图像建立对应,生成包含根据所述废弃处理部使废弃元件排列于所述废弃载置部的顺序而配置了所述识别图像的排列显示栏的废弃元件排列形象画面;及
输出部,输出由所述画面生成部生成的废弃元件排列形象画面。
2.根据权利要求1所述的图像处理装置,其中,
所述画面生成部生成包含拍摄图像显示栏的所述废弃元件排列形象画面,该拍摄图像显示栏与配置于所述排列显示栏的识别图像一起显示与该识别图像对应的所述拍摄图像,或者当配置于所述排列显示栏的识别图像被选择时显示与所选择的该识别图像对应的所述拍摄图像。
3.根据权利要求1或2所述的图像处理装置,其中,
所述信息取得部也取得与所述废弃元件的废弃理由相关的废弃信息,
所述画面生成部生成包含废弃信息显示栏的所述废弃元件排列形象画面,该废弃信息显示栏与配置于所述排列显示栏的识别图像一起显示与该识别图像对应的所述废弃元件的废弃信息,或者当配置于所述排列显示栏的识别图像被选择时显示与所选择的该识别图像对应的所述废弃元件的废弃信息。
4.根据权利要求1~3中任一项所述的图像处理装置,其中,
所述画面生成部使用模仿了所述废弃元件的图标图像和使拍摄所述废弃元件而得到的拍摄图像缩小了的缩略图中的一个以上作为所述识别图像。
5.根据权利要求1~4中任一项所述的图像处理装置,其中,
所述废弃载置部是废弃输送器,
所述画面生成部生成包含模仿了排列于所述废弃输送器上的废弃元件的所述排列显示栏的废弃元件排列形象画面。
6.根据权利要求1~5中任一项所述的图像处理装置,其中,
所述画面生成部生成从所述排列显示栏删除了基于来自所述安装装置具备的检测所述废弃载置部上的废弃元件的检测部的检测结果而从所述废弃载置部上除去的废弃元件的所述识别图像的所述废弃元件排列形象画面。
7.一种安装处理系统,具备:
安装装置,将元件安装于基板,且具备使基于拍摄到的图像而被废弃的废弃元件排列于预定的废弃载置部的废弃处理部;及
权利要求1~6中任一项所述的图像处理装置。
8.一种图像处理方法,用于安装装置,该安装装置将元件安装于基板,且具备使基于拍摄到的图像而被废弃的废弃元件排列于预定的废弃载置部的废弃处理部,
所述图像处理方法包括以下的步骤:
(a)取得能够识别被所述废弃处理部废弃的废弃元件的识别图像和拍摄该废弃元件而得到的拍摄图像;
(b)将所述步骤(a)中取得的废弃元件的识别图像与拍摄该废弃元件而得到的所述拍摄图像建立对应,生成包含根据所述废弃处理部使废弃元件排列于所述废弃载置部的顺序而配置了所述识别图像的排列显示栏的废弃元件排列形象画面;及
(c)输出所述步骤(b)中生成的废弃元件排列形象画面。
9.一种程序,使一台以上的计算机执行权利要求8所述的图像处理方法的步骤。
CN201580075193.XA 2015-02-04 2015-02-04 图像处理装置及方法、安装处理系统、计算机可读存储介质 Active CN107211572B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/053047 WO2016125262A1 (ja) 2015-02-04 2015-02-04 画像処理装置、実装処理システム、画像処理方法及びプログラム

Publications (2)

Publication Number Publication Date
CN107211572A true CN107211572A (zh) 2017-09-26
CN107211572B CN107211572B (zh) 2019-10-18

Family

ID=56563627

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580075193.XA Active CN107211572B (zh) 2015-02-04 2015-02-04 图像处理装置及方法、安装处理系统、计算机可读存储介质

Country Status (5)

Country Link
US (1) US10366486B2 (zh)
EP (1) EP3255971B1 (zh)
JP (1) JP6285578B2 (zh)
CN (1) CN107211572B (zh)
WO (1) WO2016125262A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111757667A (zh) * 2019-03-29 2020-10-09 Juki株式会社 检查装置及检查方法
CN114041110A (zh) * 2019-07-22 2022-02-11 株式会社富士 图像显示装置及图像显示方法

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6739264B2 (ja) * 2016-07-11 2020-08-12 株式会社Fuji 画像処理装置、実装処理システム
JP6903268B2 (ja) * 2016-12-27 2021-07-14 株式会社Nsテクノロジーズ 電子部品搬送装置および電子部品検査装置
JP2018117090A (ja) * 2017-01-20 2018-07-26 株式会社Fuji 廃棄装置
JP6899762B2 (ja) * 2017-12-20 2021-07-07 ヤマハ発動機株式会社 部品実装システム
WO2023238247A1 (ja) * 2022-06-07 2023-12-14 ヤマハ発動機株式会社 部品実装装置および部品実装方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1424885A2 (en) * 2002-11-29 2004-06-02 Hitachi High-Tech Instruments Co., Ltd. Electronic component mounting apparatus and electronic component mounting method
CN101330821A (zh) * 2007-06-19 2008-12-24 松下电器产业株式会社 部件安装装置及部件安装装置的部件供给方法
JP2009004468A (ja) * 2007-06-20 2009-01-08 Fuji Mach Mfg Co Ltd 部品実装機の部品廃棄装置及び部品廃棄方法
JP2009200143A (ja) * 2008-02-20 2009-09-03 Juki Corp 部品供給最適化方法及びシステム
CN103857269A (zh) * 2012-12-03 2014-06-11 Juki株式会社 管理系统
JP2014120654A (ja) * 2012-12-18 2014-06-30 Fuji Mach Mfg Co Ltd 実装管理装置、検査管理装置、実装システム、実装管理方法及びそのプログラム、ならびに検査管理方法及びそのプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6477266B1 (en) * 1998-12-11 2002-11-05 Lucent Technologies Inc. Vision comparison inspection system graphical user interface
US6701003B1 (en) * 2000-04-10 2004-03-02 Innoventions, Inc. Component identification system for electronic board testers
JP4237470B2 (ja) 2002-11-13 2009-03-11 富士機械製造株式会社 電子部品実装装置における部品搬出方法および装置
KR100586522B1 (ko) * 2004-03-17 2006-06-07 삼성전자주식회사 인쇄회로기판의 가공시스템
JP2007281227A (ja) * 2006-04-07 2007-10-25 Yamaha Motor Co Ltd 実装機における部品供給装置の配置設定方法
JP2012115785A (ja) * 2010-12-02 2012-06-21 Sharp Corp 廃棄物の選別システム
JP5904097B2 (ja) * 2012-11-02 2016-04-13 株式会社ダイフク 物品情報の表示装置
JP6239267B2 (ja) * 2013-05-21 2017-11-29 Jukiオートメーションシステムズ株式会社 実装装置、コンベア装置、制御方法及びプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1424885A2 (en) * 2002-11-29 2004-06-02 Hitachi High-Tech Instruments Co., Ltd. Electronic component mounting apparatus and electronic component mounting method
CN101330821A (zh) * 2007-06-19 2008-12-24 松下电器产业株式会社 部件安装装置及部件安装装置的部件供给方法
JP2009004468A (ja) * 2007-06-20 2009-01-08 Fuji Mach Mfg Co Ltd 部品実装機の部品廃棄装置及び部品廃棄方法
JP2009200143A (ja) * 2008-02-20 2009-09-03 Juki Corp 部品供給最適化方法及びシステム
CN103857269A (zh) * 2012-12-03 2014-06-11 Juki株式会社 管理系统
JP2014120654A (ja) * 2012-12-18 2014-06-30 Fuji Mach Mfg Co Ltd 実装管理装置、検査管理装置、実装システム、実装管理方法及びそのプログラム、ならびに検査管理方法及びそのプログラム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111757667A (zh) * 2019-03-29 2020-10-09 Juki株式会社 检查装置及检查方法
CN111757667B (zh) * 2019-03-29 2023-08-25 Juki株式会社 检查装置及检查方法
CN114041110A (zh) * 2019-07-22 2022-02-11 株式会社富士 图像显示装置及图像显示方法
CN114041110B (zh) * 2019-07-22 2023-11-10 株式会社富士 图像显示装置及图像显示方法

Also Published As

Publication number Publication date
EP3255971A4 (en) 2018-03-14
JPWO2016125262A1 (ja) 2017-08-03
US10366486B2 (en) 2019-07-30
JP6285578B2 (ja) 2018-02-28
EP3255971B1 (en) 2019-07-03
US20180012351A1 (en) 2018-01-11
EP3255971A1 (en) 2017-12-13
WO2016125262A1 (ja) 2016-08-11
CN107211572B (zh) 2019-10-18

Similar Documents

Publication Publication Date Title
CN107211572B (zh) 图像处理装置及方法、安装处理系统、计算机可读存储介质
JP6075180B2 (ja) 作業管理システムおよび作業管理方法
CN107003659B (zh) 作业管理装置
CN110024511B (zh) 元件安装生产线的生产管理系统
CN109792858B (zh) 元件安装机的机外作业区域监视系统
JP6156441B2 (ja) 作業管理システムおよび作業管理方法
CN110521294A (zh) 作业系统
JP5808160B2 (ja) 電子部品実装装置
JP6694600B2 (ja) 昇降装置の保守確認システム
WO2019163044A1 (ja) 部品実装システム
CN107432117A (zh) 安装装置及安装方法
CN107926156A (zh) 元件安装机
JP6739264B2 (ja) 画像処理装置、実装処理システム
JP5113792B2 (ja) 電子部品装着装置
CN106358435B (zh) 部件供给装置以及部件安装系统和部件安装方法
JP5955059B2 (ja) 基板組立装置
JP4907493B2 (ja) 実装条件決定方法および実装条件決定装置
JP6503379B2 (ja) 実装関連処理装置、画像処理方法及びそのプログラム
JP6420582B2 (ja) 実装設定装置及び実装設定方法
JP6423193B2 (ja) 実装装置及び実装方法
JP2017224779A (ja) 実装関連処理装置
JP6734722B2 (ja) 品質管理システム
JP6277044B2 (ja) 基板処理装置および実装機
WO2024029048A1 (ja) 画像出力装置および画像出力システム
JP6817423B2 (ja) 実装機管理システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Aichi Japan vertical city

Applicant after: Fuji Corporation

Address before: Aichi Japan vertical city

Applicant before: Fuji Machinery Manufacturing Co., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant