CN109964247A - 图像处理用元件形状数据生成系统及图像处理用元件形状数据生成方法 - Google Patents
图像处理用元件形状数据生成系统及图像处理用元件形状数据生成方法 Download PDFInfo
- Publication number
- CN109964247A CN109964247A CN201680090303.4A CN201680090303A CN109964247A CN 109964247 A CN109964247 A CN 109964247A CN 201680090303 A CN201680090303 A CN 201680090303A CN 109964247 A CN109964247 A CN 109964247A
- Authority
- CN
- China
- Prior art keywords
- shape data
- minimum unit
- measurement
- component shape
- measurement object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/0006—Industrial image inspection using a design-rule based approach
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/20—Finite element generation, e.g. wire-frame surface description, tesselation
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K13/00—Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Manufacturing & Machinery (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
Abstract
一种图像处理用元件形状数据生成系统,生成在对由元件安装机安装的元件进行图像识别时使用的图像处理用元件形状数据,其构成为具备:显示部,显示拍摄作为图像处理用元件形状数据的生成对象的元件而得到的元件图像;线框描绘部,与显示于上述显示部的元件图像重叠地描绘包围该元件图像中的计测对象部分用的线框,并且根据作业者的拖曳操作使上述线框的边的位置移动;最小单位指定部,指定计测由上述线框包围的上述计测对象部分的形状数据时的最小单位;及元件形状数据生成部,以由上述最小单位指定部指定的最小单位的精度计测由上述线框包围的上述计测对象部分的形状数据,而生成上述图像处理用元件形状数据。
Description
技术领域
本说明书公开了生成对由元件安装机安装的元件进行图像识别时使用的图像处理用元件形状数据的图像处理用元件形状数据生成系统及图像处理用元件形状数据生成方法。
背景技术
通常,在元件安装机中,在利用相机拍摄吸附于吸嘴的元件并对该元件进行图像识别时,使用预先生成的图像处理用元件形状数据(表示元件的主体部分的尺寸、引脚的位置、宽度、长度、间距、根数等外观上的特征的数据)对该元件进行图像识别,来判定该元件的吸附位置的偏移量或吸附姿势的良好与否。以往,在元件安装机的用户侧生成图像处理用元件形状数据的情况下,除了利用元件的CAD数据的方法以外,还利用相机拍摄作为图像处理用元件形状数据的生成对象的元件,并使用该拍摄图像生成图像处理用元件形状数据(专利文献1)。
在这种图像处理用元件形状数据生成系统中,需要作业者指定对由相机拍摄到的元件图像中的哪个部分进行计测,因此,与显示于显示装置的画面的元件图像重叠地描绘包围该元件图像中的计测对象部分(例如元件的主体部分、引脚的列等)用的线框,作业者操作鼠标,对该线框的四边进行利用显示于显示装置的画面的鼠标指针点击线框的边的中央的尺寸变更句柄,并进行拖曳操作而使该线框的边的位置向与计测对象部分的端缘位置靠近的方向移动并使两者重合,由此指定该计测对象部分的端缘位置的操作,然后计测由该线框的四边包围的计测对象部分的形状数据(例如纵横的尺寸等)来生成图像处理用元件形状数据。
现有技术文献
专利文献1:日本特开2011-211088号公报
发明内容
发明所要解决的课题
然而,作为图像处理用元件形状数据的生成对象的元件存在尺寸不同的各种元件,但元件越小,则计测元件的计测对象部分的形状数据所需要的精度(计测值的最小单位)要求越精细的精度(更低位数的最小单位)。由于该关系,以往,为了即使是作为图像处理用元件形状数据的生成对象的元件中的最小元件也能够确保所需要的计测精度,将计测值的最小单位设定为尽可能小的位数的最小单位(例如1μm)。
在该情况下,大型元件也以与最小元件相同的精度被计测,因此在大型元件的情况下计测值的最小单位超过所需要的计测精度,而计测至本来不需要的较低的位数。因此,在大型元件的情况下,在形状数据的计测后需要作业者通过手动输入将计测值中的不必要的较低的位数的数值四舍五入的作业,存在该作业繁琐这样的缺点。
用于解决课题的技术方案
为了解决上述课题,一种图像处理用元件形状数据生成系统,生成在对由元件安装机安装的元件进行图像识别时使用的图像处理用元件形状数据,其中,上述图像处理用元件形状数据生成系统具备:显示部,显示拍摄作为上述图像处理用元件形状数据的生成对象的元件而得到的元件图像;线框描绘部,与显示于上述显示部的元件图像重叠地描绘包围该元件图像中的计测对象部分用的线框,并且根据作业者的拖曳操作而使上述线框的边的位置移动;最小单位指定部,指定计测由上述线框包围的上述计测对象部分的形状数据时的最小单位(有效的最小位数);及元件形状数据生成部,以由上述最小单位指定部指定的最小单位的精度计测由上述线框包围的上述计测对象部分的形状数据,来生成上述图像处理用元件形状数据。
在该结构中,具备指定计测由线框包围的计测对象部分的形状数据时的最小单位的最小单位指定部,因此能够根据计测对象部分的尺寸和种类等,指定该计测对象部分的形状数据的计测所需要的最小单位。其结果是,能够指定为与元件或计测对象部分的尺寸或种类等对应的位数的最小单位,以对于小型元件(较小的计测对象部分)将计测值的最小单位指定为较低的位数的最小单位,对于大型元件(较大的计测对象部分)将计测值的最小单位指定为较高的位数的最小单位。由此,能够以根据该计测对象部分的尺寸或种类等而适当地指定的最小单位的精度进行计测对象部分的形状数据的计测,不需要在形状数据的计测后进行作业者通过手动输入将计测值中的不必要的较低的位数的数值四舍五入等繁琐的作业,从而能够提高操作性,能够高效地生成图像处理用元件形状数据。
然而,可想到在根据作业者的拖曳操作而使线框的边的位置移动时,使线框的边的位置每次移动一像素(或者最小的位数的最小单位),但在该情况下,对于大型元件(较大的计测对象部分)而言,在作业者通过拖曳操作使线框的边的位置与计测对象部分的端缘位置重合时,该线框的边的位置偏离作为该计测对象部分的计测所需要的最小单位的位置的可能性高。在该情况下,若通过四舍五入等将该计测对象部分的计测值中的比指定的最小单位更低的位数的数值自动省略,则也能够以指定的最小单位的精度求出该计测对象部分的计测值,但需要通过四舍五入等将不必要的位数的数值自动地省略的功能。
因此,也可以是,上述线框描绘部根据作业者的拖曳操作而使线框的边的位置每次以由上述最小单位指定部指定的最小单位进行间距移动。这样一来,根据拖曳操作而进行间距移动的线框的边的位置与成为由最小单位指定部指定的最小单位的位置始终一致,计测对象部分的计测值的最小单位与由最小单位指定部指定的最小单位始终一致,不需要通过四舍五入等将不必要的位数的数值自动地省略的功能。
另外,也可以是,取代线框描绘部而具备端缘位置指定部,上述端缘位置指定部指定显示于显示部的元件图像中的计测对象部分的各端缘位置,以由最小单位指定部指定的最小单位的精度计测由该端缘位置指定部指定了各端缘位置的计测对象部分的形状数据,来生成上述图像处理用元件形状数据。这样,能够以根据该计测对象部分的尺寸和种类等而适当地指定的最小单位的精度进行计测对象部分的形状数据的计测,不需要在形状数据的计测后进行作业者通过手动输入将计测值中的不必要的较低的位数的数值四舍五入等繁琐的作业。
例如,在将带引脚元件的主体部分和引脚分别作为计测对象部分的情况下,主体部分的计测所需要的最小单位大于引脚的计测所需要的最小单位。考虑到这一点,也可以是,在元件图像中存在多个计测对象部分的情况下,上述最小单位指定部对各计测对象部分的每一个指定计测各计测对象部分的形状数据时的最小单位。这样一来,即使在元件图像的多个计测对象部分的计测所需要的最小单位不同的情况下,也能够对各计测对象部分分别指定适当的最小单位。
另外,上述最小单位指定部可以由作业者从预先设定的多个最小单位中选择并指定在计测对象部分的形状数据的计测中使用的最小单位,或者也可以由作业者在可指定的最小单位的范围内输入并指定与计测对象部分的尺寸和种类等对应的最小单位。
或者,也可以是,上述最小单位指定部基于作为图像处理用元件形状数据的生成对象的元件的计测对象部分的信息,自动地指定在该计测对象部分的形状数据的计测中使用的最小单位。例如,可想到在计测对象部分为引脚或凸块等电极的情况下,自动地指定适于它们的计测的预定的最小单位。
另外,也可以是,上述最小单位指定部基于包围计测对象部分的线框的尺寸,自动地指定在该计测对象部分的形状数据的计测中使用的最小单位。这样一来,例如,能够自动地指定计测对象部分的尺寸越大则越自动地增大在计测中使用的最小单位这样的适于计测对象部分的尺寸的最小单位。
另外,上述最小单位指定部也可以构成为,作业者能够切换手动指定模式与自动指定模式来指定最小单位,上述手动指定模式是作业者通过选择或者输入来指定在计测对象部分的形状数据的计测中使用的最小单位的模式,上述自动指定模式是自动地指定在计测对象部分的形状数据的计测中使用的最小单位的模式。这样一来,例如,熟练的作业者能够通过选择手动指定模式,而基于经验等利用手动来指定适于计测对象部分的计测的最小单位,另一方面,在作业者的经验较少的情况下或使操作性优先的情况下,能够通过选择自动指定模式,而防止经验较少的作业者指定错误的最小单位,并且能够减少作业量,且高效地生成图像处理用元件形状数据。
附图说明
图1是表示实施例1的图像处理用元件形状数据生成系统的结构的框图。
图2是表示元件图像和线框的显示例的图。
图3是表示图像处理用元件形状数据生成程序的前半部分的处理的流程的流程图。
图4是表示图像处理用元件形状数据生成程序的后半部分的处理的流程的流程图。
图5是表示最小单位自动指定程序的处理的流程的流程图。
具体实施方式
以下,对两个实施例1、2进行说明。
实施例1
基于图1至图5来对实施例1进行说明。
如图1所示,图像处理用元件形状数据生成系统构成为具备:个人计算机等计算机11;相机12,拍摄作为图像处理用元件形状数据的生成对象的元件;键盘、鼠标、触摸面板等输入装置13;液晶显示器、CRT等显示装置14(显示部);及存储装置15,存储生成后述的图像处理用元件形状数据时执行的图3至图5的各程序及生成的图像处理用元件形状数据等各种数据。该存储装置15使用电源断开时也保持存储数据的能够改写的非易失性的存储介质(例如硬盘装置等)而构成。
本实施例1的图像处理用元件形状数据生成系统的计算机11虽未图示,但设于元件安装机的外部(元件安装线的外部),并经由网络以能够通信的方式连接于元件安装线的生产管理计算机或各元件安装机。
计算机11通过执行后述的图3至图5的各程序,而作为“线框描绘部”发挥作用,并且也作为“最小单位指定部”发挥作用,其中,上述“线框描绘部”如图2所示与显示于显示装置14的元件图像重叠地描绘包围该元件图像中的计测对象部分(例如主体部分)用的线框W,并且根据作业者的拖曳操作使线框W的边的位置移动,上述“最小单位指定部”指定计测由线框W包围的计测对象部分的形状数据时的最小单位(有效的最小位)。此外,计算机11通过执行后述的图3及图4的图像处理用元件形状数据生成程序,而也作为“元件形状数据生成部”发挥作用,上述“元件形状数据生成部”以指定的最小单位的精度计测由线框W包围的计测对象部分的形状数据并生成图像处理用元件形状数据。
以下,对通过计算机11执行后述的图3至图5的各程序而实现的各功能(1)~(3)进行说明。
(1)作为线框描绘部的功能
如图2所示,与显示于显示装置14的元件图像重叠地描绘包围该元件图像中的计测对象部分用的线框W。并且,作业者操作输入装置13的鼠标等,进行如下的拖曳操作来使线框W的边的位置与计测对象部分的端缘位置重合,上述拖曳操作为通过鼠标指针M点击并拖住线框W的边的中央的尺寸变更句柄H,在该状态下使鼠标指针M向接近计测对象部分的端缘位置的方向(图2的显示例中为左方向)移动。作业者通过对线框W的四边逐个边地进行该拖曳操作,而使线框W的四边与计测对象部分的四个方向的端缘位置重合。
然而,可想到在根据作业者的拖曳操作使线框W的边的位置移动时,使线框W的边的位置每次移动一像素(或者每次移动最小的位数的最小单位),但在该情况下,在大型元件(较大的计测对象部分)中,在作业者利用拖曳操作使线框W的边的位置与计测对象部分的端缘位置重合时,该线框W的边的位置偏离成为该计测对象部分的计测所需要的最小单位的位置的可能性较高。在该情况下,若通过四舍五入等将该计测对象部分的计测值中的比指定的最小单位更低的位数的数值自动地省略,则也能够以指定的最小单位的精度求出该计测对象部分的计测值,但需要通过四舍五入等自动地省略不必要的位数的数值的功能。
因此,在本实施例1中,根据作业者的拖曳操作使线框W的边的位置每次以指定的最小单位进行间距移动。此时,例如在最小单位为1mm的情况下,在拖曳操作的移动量达到最小单位的中央值即0.5mm之前不使线框W的边的位置移动,在超过了0.5mm的瞬间,使线框W的边的位置间距移动最小单位即1mm。这样,根据拖曳操作而间距移动的线框W的边的位置与成为指定的最小单位的位置始终一致,计测对象部分的计测值的最小单位与指定的最小单位始终一致,不需要通过四舍五入等自动地省略不必要的位数的数值的功能。
(2)作为最小单位指定部的功能
例如,在将带引脚的元件的主体部分和引脚分别作为计测对象部分的情况下,主体部分的计测所需要的最小单位大于引脚的计测所需要的最小单位。考虑到这一点,在本实施例1中,在元件图像中存在多个计测对象部分的情况下,对各计测对象部分的每一个指定计测各计测对象部分的形状数据时的最小单位。这样,即使在元件图像的多个计测对象部分的计测所需要的最小单位不同的情况下,也能够对各计测对象部分分别指定适当的最小单位。
此外,在本实施例1中,构成为作业者能够操作输入装置13而将指定计测由线框W包围的计测对象部分的形状数据时的最小单位的模式切换为作业者通过选择或者输入来指定最小单位的“手动指定模式”与自动地指定最小单位的“自动指定模式”来指定最小单位。
在该情况下,在“手动指定模式”中,作业者使用“选择指定”与“输入指定”中的某一个来指定最小单位。在“选择指定”中,在显示装置14上显示能够选择的多个最小单位。将例如1μm、0.01mm、0.1mm、1mm、1mil(0.0254mm)、0.01in(0.254mm)、0.1in(2.54mm)等多个最小单位显示于显示装置14,作业者考虑计测对象部分的尺寸和种类等而操作输入装置13的鼠标等从上述能够选择的多个最小单位之中选择并指定任一个最小单位。
另一方面,在“输入指定”中,在可指定的最小单位的范围内,作业者操作输入装置13的键盘等而输入并指定与计测对象部分的尺寸和种类等对应的最小单位。在“输入指定”中,不限于能够通过“选择指定”选择的最小单位,也能够输入无法通过“选择指定”选择的最小单位(例如5μm、0.5mm、2mm等),能够在可指定的最小单位的范围内以任意的数值输入最小单位。
在“选择指定”、“输入指定”中的任一个的情况下,例如在元件的计测对象部分为主体部分的情况下,以主体部分的尺寸的例如1/10的数值为标准来指定最小单位即可。另外,在计测对象部分为引脚的情况下,将最小单位例如一律指定为0.1mm即可。另外,也可以构成为仅能够使用“选择指定”与“输入指定”的任一方,这是不言而喻的。
在“自动指定模式”中,例如通过如下的任一种指定方法(a)~(c)来自动指定在计测对象部分的形状数据的计测中使用的最小单位。在该情况下,例如,在元件的计测对象部分为主体部分的情况下,以主体部分的尺寸的例如1/10的数值为标准来指定最小单位,在计测对象部分为引脚的情况下,将最小单位例如一律指定为0.1mm。
(a)计算机11取得作为图像处理用元件形状数据的生成对象的元件的计测对象部分的尺寸和种类等信息,并基于该元件的计测对象部分的尺寸和种类等信息而自动地指定在该计测对象部分的形状数据的计测中使用的最小单位。此时,关于元件的计测对象部分的尺寸和种类等信息,可以由作业者操作输入装置13的键盘等而向计算机11输入,也可以从元件安装线的生产管理计算机等外部的计算机向计算机11发送元件的计测对象部分的尺寸和种类等信息。
(b)计算机11对元件图像进行处理而对被推断为元件的计测对象部分的区域粗略地进行识别,计测该区域的尺寸,并基于该尺寸的计测值来自动地指定在该计测对象部分的形状数据的计测中使用的最小单位。
(c)在通过拖曳操作使线框W的四边与计测对象部分的四个方向的端缘位置重合后,基于该线框W的尺寸来自动地指定在该计测对象部分的形状数据的计测中使用的最小单位。在该情况下,进行通过四舍五入等将计测对象部分的计测值中的比指定的最小单位更低的位数的数值自动地省略的处理。另外,在基于包围计测对象部分的线框W的尺寸来指定最小单位的情况下,在对线框W的边进行拖曳操作的阶段,未指定最小单位,因此计算机11根据作业者的拖曳操作使线框W的边的位置每次移动像素(或者最小的位数的最小单位)。
如本实施例1那样,若作业者能够切换“手动指定模式”与“自动指定模式”来指定最小单位,则例如熟练的作业者能够通过选择“手动指定模式”,而基于经验等手动地指定适于计测对象部分的计测的最小单位,另一方面,在作业者的经验较少的情况下或使操作性优先的情况下,能够通过选择“自动指定模式”,而防止经验较少的作业者指定错误的最小单位,并且能够减少作业量且高效地生成图像处理用元件形状数据。
另外,也可以构成为,仅能够使用“手动指定模式”与“自动指定模式”的某一个,这是不言而喻的。
(3)作为元件形状数据生成部的功能
计算机11以指定的最小单位的精度计测由通过拖曳操作而使线框W的四边与计测对象部分的四个方向的端缘位置重合的该线框W包围的计测对象部分的形状数据(例如X方向尺寸和Y方向尺寸等)来生成图像处理用元件形状数据。
例如,在以引脚为计测对象部分的情况下,通过线框W包围元件的计测对象一侧的引脚的列,计测各引脚的长度,并且通过鼠标指针M指定从线框W的边(引脚列的端部)离开了引脚间距大小的引脚侧缘,从而计测引脚间距,此外,通过将线框W的两边间的尺寸(引脚列的长度)除以引脚间距而求出引脚的根数,并且根据线框W的位置(引脚列的位置)和引脚的根数来计算各引脚的位置。关于引脚的宽度的计测,可以通过利用鼠标指针M指定从线框W的边(引脚列的端部)离开了引脚的宽度大小的引脚侧缘来计算引脚的宽度,也可以通过线框W包围一根引脚来计测引脚的宽度。
在以元件下表面的凸块为计测对象部分的情况下,通过线框W包围凸块的形成图案区域整体,通过与上述引脚的形状数据的计测相同的方法,计测凸块的间距、凸块直径、各凸块的位置即可。
以上说明的各功能(1)~(3)通过利用计算机11执行图3至图5的各程序来实现。另外,也可以通过硬件来处理图3至图5的各程序的一部分处理。以下,对图3至图5的各程序的处理进行说明。
[图像处理用元件形状数据生成程序]
当图3及图4的图像处理用元件形状数据生成程序启动时,首先,在步骤101中,待机直至作为图像处理用元件形状数据的生成对象的元件安设于相机12的视场范围内的拍摄位置为止。然后,在元件安设于拍摄位置的时刻,进入步骤102,通过相机12拍摄元件,在接下来的步骤103中,在显示装置14上显示元件图像。
然后,进入步骤104,与显示于显示装置14的元件图像重叠地描绘包围该元件图像中的计测对象部分用的线框W。然后,进入步骤105,判定指定最小单位的指定模式是否为“手动指定模式”,在不是“手动指定模式”的情况下,也就是说在“自动指定模式”的情况下,进入步骤107,执行后述的图5的最小单位自动指定程序,自动地指定在计测对象部分的形状数据的计测中使用的最小单位。
另一方面,在上述步骤105中,若判定为“手动指定模式”,则进入步骤106,待机直至作业者选择或者输入最小单位为止,在作业者选择或者输入了最小单位的时刻,进入步骤108,将作业者所选择或者输入的最小单位指定为在计测对象部分的形状数据的计测中使用的最小单位。上述步骤105~108的处理发挥作为最小单位指定部的作用。
在上述步骤107或者108中指定了最小单位后,进入图4的步骤109,待机直至作业者进行拖曳操作为止。然后,在作业者进行了拖曳操作的时刻,进入步骤110,根据作业者的拖曳操作,使线框W的边的位置向拖曳操作方向每次间距移动在上述步骤107或者108中指定的最小单位。上述步骤104及109~110的处理发挥作为线框描绘部的作用。
然后,进入步骤111,对线框W的四边的拖曳操作是否全部结束进行判定,若残留有拖曳操作尚未结束的线框W的边,则重复进行上述步骤109~111的处理。由此,在线框W的四边的拖曳操作全部结束而使线框W的四边与计测对象部分的四个方向的端缘位置重合的时刻,进入步骤112,计测由线框W包围的计测对象部分的形状数据(例如X方向尺寸和Y方向尺寸等),在接下来的步骤113中,基于该形状数据的计测值生成图像处理用元件形状数据并存储于存储装置15,结束本程序。上述步骤112~113的处理发挥作为元件形状数据生成部的作用。
[最小单位自动指定程序]
图5的最小单位自动指定程序是在选择了“自动指定模式”的情况下在上述图3及图4的图像处理用元件形状数据生成程序的步骤107中执行的子流程,发挥作为自动指定最小单位的最小单位指定部的作用。
当本程序启动时,首先,在步骤201中,判定计算机11是否取得了作为图像处理用元件形状数据的生成对象的元件的计测对象部分的尺寸和种类等信息,若取得了计测对象部分的尺寸和种类等信息,则进入步骤202,并基于取得的计测对象部分的尺寸和种类等信息,自动地指定在该计测对象部分的形状数据的计测中使用的最小单位,结束本程序。
另一方面,在上述步骤201中,若判定为未取得计测对象部分的尺寸和种类等信息,则进入步骤203,对元件图像进行处理并对被推断为元件的计测对象部分的区域粗略地进行识别,来计测该区域的尺寸。然后,进入步骤204,基于被推断为计测对象部分的区域的尺寸的计测值,自动地指定在该计测对象部分的形状数据的计测中使用的最小单位,结束本程序。
将由本实施例1的图像处理用元件形状数据生成系统生成的图像处理用元件形状数据向元件安装线的生产管理计算机传送。生产管理计算机向各元件安装机传送用于由各元件安装机安装的元件的图像识别的图像处理用元件形状数据。由此,各元件安装机使用接收到的图像处理用元件形状数据,对吸附于吸嘴的元件进行图像识别。
根据以上说明的本实施例1,通过手动指定模式或者自动指定模式指定计测由线框W包围的计测对象部分的形状数据时的最小单位,因此能够根据计测对象部分的尺寸和种类等,指定该计测对象部分的形状数据的计测所需要的最小单位。其结果是,例如能够指定为与元件和计测对象部分的尺寸和种类等对应的位数的最小单位,以对于小型元件(较小的计测对象部分)将计测值的最小单位指定为较低的位数的最小单位、对于大型元件(较大的计测对象部分)将计测值的最小单位指定为较高的位数的最小单位。由此,能够以根据该计测对象部分的尺寸和种类等而适当地指定的最小单位的精度进行计测对象部分的形状数据的计测,不需要在形状数据的计测后进行作业者通过手动输入将计测值中的不必要的较低的位数的数值四舍五入等繁琐的作业,从而能够提高操作性,能够高效地生成图像处理用元件形状数据。
实施例2
接下来,对实施例2进行说明。其中,对与上述实施例1实质上相同的部分,省略或者简化说明,主要对不同的部分进行说明。
在上述实施例1中,由线框W包围并指定显示于显示装置14的元件图像中的计测对象部分,但在本实施例2中,构成为具备:端缘位置指定部,作业者通过鼠标指针M等来指定显示于显示装置14的元件图像中的计测对象部分的各端缘位置;最小单位指定部,指定计测由上述端缘位置指定部指定了上述各端缘位置的上述计测对象部分的形状数据时的最小单位;及元件形状数据生成部,以由上述最小单位指定部指定的最小单位的精度计测由上述端缘位置指定部指定了上述各端缘位置的上述计测对象部分的形状数据,来生成上述图像处理用元件形状数据。
总之,在本实施例2中,作业者通过鼠标指针M等来指定计测对象部分的各端缘位置,并以指定的最小单位的精度计测该计测对象部分的形状数据,除此以外的点与上述实施例1实质上相同。
这样,能够以根据该计测对象部分的尺寸和种类等而适当地指定的最小单位的精度进行计测对象部分的形状数据的计测,不需要在形状数据的计测后进行作业者通过手动输入将计测值中的不必要的较低的位数的数值四舍五入等繁琐的作业,能够得到与上述实施例1相同的效果。
本发明的图像处理用元件形状数据生成系统不限定于上述实施例1、2,也可以搭载于元件安装机。在该情况下,也可以是,在对元件安装机中产生的错误进行原因探究时,利用该元件安装机的元件识别用的相机拍摄吸附于该元件安装机的吸嘴的元件,将其元件图像显示于该元件安装机的显示部并重新生成图像处理用元件形状数据。这样,在元件安装机中产生的错误的原因为图像处理用元件形状数据的不匹配的情况下,能够修正为适于该元件安装机的图像处理系统的图像处理用元件形状数据,能够减少元件安装机的错误的产生频次,并且能够提高元件的图像识别精度。
此外,本发明不限定于上述实施例1、2,例如,也可以变更线框W的边的拖曳操作方法等,在不脱离主旨的范围内能够实施各种变更,这是不言而喻的。
附图标记说明
11…计算机(线框描绘部、最小单位指定部、元件形状数据生成部);12…相机;13…输入装置;14…显示装置(显示部);H…尺寸变更句柄;M…鼠标指针;W…线框。
Claims (11)
1.一种图像处理用元件形状数据生成系统,生成在对由元件安装机安装的元件进行图像识别时使用的图像处理用元件形状数据,其中,所述图像处理用元件形状数据生成系统具备:
显示部,显示拍摄作为所述图像处理用元件形状数据的生成对象的元件而得到的元件图像;
线框描绘部,与显示于所述显示部的元件图像重叠地描绘包围该元件图像中的计测对象部分用的线框,并且根据作业者的拖曳操作而使所述线框的边的位置移动;
最小单位指定部,指定计测由所述线框包围的所述计测对象部分的形状数据时的最小单位;及
元件形状数据生成部,以由所述最小单位指定部指定的最小单位的精度计测由所述线框包围的所述计测对象部分的形状数据,来生成所述图像处理用元件形状数据。
2.根据权利要求1所述的图像处理用元件形状数据生成系统,其中,
所述线框描绘部根据作业者的拖曳操作而使所述线框的边的位置每次以由所述最小单位指定部指定的最小单位进行间距移动。
3.一种图像处理用元件形状数据生成系统,生成在对由元件安装机安装的元件进行图像识别时使用的图像处理用元件形状数据,其中,所述图像处理用元件形状数据生成系统具备:
显示部,显示拍摄作为所述图像处理用元件形状数据的生成对象的元件而得到的元件图像;
端缘位置指定部,指定显示于所述显示部的元件图像中的计测对象部分的各端缘位置;
最小单位指定部,指定计测由所述端缘位置指定部指定了所述各端缘位置的所述计测对象部分的形状数据时的最小单位;及
元件形状数据生成部,以由所述最小单位指定部指定的最小单位的精度计测由所述端缘位置指定部指定了所述各端缘位置的所述计测对象部分的形状数据,来生成所述图像处理用元件形状数据。
4.根据权利要求1至3中任一项所述的图像处理用元件形状数据生成系统,其中,
在所述元件图像中存在多个计测对象部分的情况下,所述最小单位指定部对各计测对象部分的每一个指定计测各计测对象部分的形状数据时的最小单位。
5.根据权利要求1至4中任一项所述的图像处理用元件形状数据生成系统,其中,
所述最小单位指定部由作业者从预先设定的多个最小单位中选择并指定在所述计测对象部分的形状数据的计测中使用的最小单位。
6.根据权利要求1至4中任一项所述的图像处理用元件形状数据生成系统,其中,
所述最小单位指定部由作业者在可指定的最小单位的范围内输入并指定在所述计测对象部分的形状数据的计测中使用的最小单位。
7.根据权利要求1至4中任一项所述的图像处理用元件形状数据生成系统,其中,
所述最小单位指定部基于作为所述图像处理用元件形状数据的生成对象的元件的计测对象部分的信息,自动地指定在该计测对象部分的形状数据的计测中使用的最小单位。
8.根据权利要求1或2所述的图像处理用元件形状数据生成系统,其中,
所述最小单位指定部基于包围所述计测对象部分的所述线框的尺寸,自动地指定在该计测对象部分的形状数据的计测中使用的最小单位。
9.根据权利要求1至4中任一项所述的图像处理用元件形状数据生成系统,其中,
所述最小单位指定部构成为,作业者能够切换手动指定模式与自动指定模式来指定最小单位,所述手动指定模式是作业者通过选择或者输入来指定在所述计测对象部分的形状数据的计测中使用的最小单位的模式,所述自动指定模式是自动地指定在所述计测对象部分的形状数据的计测中使用的最小单位的模式。
10.一种图像处理用元件形状数据生成方法,生成在对由元件安装机安装的元件进行图像识别时使用的图像处理用元件形状数据,其中,所述图像处理用元件形状数据生成方法包括:
显示处理,显示拍摄作为所述图像处理用元件形状数据的生成对象的元件而得到的元件图像;
线框描绘处理,与显示于所述显示部的元件图像重叠地描绘包围该元件图像中的计测对象部分用的线框,并且根据作业者的拖曳操作而使所述线框的边的位置移动;
最小单位指定处理,指定计测由所述线框包围的所述计测对象部分的形状数据时的最小单位;及
元件形状数据生成处理,以由所述最小单位指定处理指定的最小单位的精度计测由所述线框包围的所述计测对象部分的形状数据,来生成所述图像处理用元件形状数据。
11.一种图像处理用元件形状数据生成方法,生成在对由元件安装机安装的元件进行图像识别时使用的图像处理用元件形状数据,其中,所述图像处理用元件形状数据生成方法包括:
显示处理,显示拍摄作为所述图像处理用元件形状数据的生成对象的元件而得到的元件图像;
端缘位置指定处理,指定显示于所述显示部的元件图像中的计测对象部分的各端缘位置;
最小单位指定处理,指定计测由所述端缘位置指定处理指定了所述各端缘位置的所述计测对象部分的形状数据时的最小单位;及
元件形状数据生成处理,以由所述最小单位指定处理指定的最小单位的精度计测由所述端缘位置指定处理指定了所述各端缘位置的所述计测对象部分的形状数据,来生成所述图像处理用元件形状数据。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2016/082498 WO2018083745A1 (ja) | 2016-11-01 | 2016-11-01 | 画像処理用部品形状データ作成システム及び画像処理用部品形状データ作成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109964247A true CN109964247A (zh) | 2019-07-02 |
CN109964247B CN109964247B (zh) | 2023-05-05 |
Family
ID=62075875
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680090303.4A Active CN109964247B (zh) | 2016-11-01 | 2016-11-01 | 图像处理用元件形状数据生成系统及图像处理用元件形状数据生成方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10872405B2 (zh) |
EP (1) | EP3537374B1 (zh) |
JP (1) | JP6802854B2 (zh) |
CN (1) | CN109964247B (zh) |
WO (1) | WO2018083745A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021157077A1 (ja) * | 2020-02-07 | 2021-08-12 | 株式会社Fuji | 吸着位置調整装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10135686A (ja) * | 1996-10-25 | 1998-05-22 | Sanyo Electric Co Ltd | データ処理装置及び電子部品装着装置 |
CN1490629A (zh) * | 2001-12-10 | 2004-04-21 | ������������ʽ���� | 校正方法、电子元件的质量检查方法及特性测量系统 |
JP2006309336A (ja) * | 2005-04-26 | 2006-11-09 | Sega Corp | 映像オブジェクト表現用データ構造、映像オブジェクト表現用データ構造生成プログラム、映像オブジェクト表現用データ構造生成方法、映像ソフト開発装置、画像処理プログラム、映像処理方法、映像処理装置、および、記録媒体 |
JP2011233737A (ja) * | 2010-04-28 | 2011-11-17 | Hitachi High-Tech Instruments Co Ltd | 電子部品装着方法、電子部品装着装置及びノズルデータ作成方法 |
JP2013011547A (ja) * | 2011-06-30 | 2013-01-17 | Mitsutoyo Corp | 円形状特性測定方法、装置及びプログラム |
CN103339466A (zh) * | 2011-03-15 | 2013-10-02 | 欧姆龙株式会社 | 图像处理装置及图像处理程序 |
US20160153894A1 (en) * | 2013-08-30 | 2016-06-02 | Korea Research Institute Of Standards And Science | Optical element rotation type mueller-matrix ellipsometer and method for measuring mueller-matrix of sample using the same |
CN105701467A (zh) * | 2016-01-13 | 2016-06-22 | 河海大学常州校区 | 一种基于人体形态特征的多人异常行为识别方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3678895B2 (ja) * | 1997-09-30 | 2005-08-03 | 株式会社日立ハイテクインスツルメンツ | 電子部品装着装置 |
JP5926881B2 (ja) | 2010-03-30 | 2016-05-25 | 富士機械製造株式会社 | 画像処理用部品データ作成方法及び画像処理用部品データ作成装置 |
JP5728878B2 (ja) * | 2010-10-13 | 2015-06-03 | オムロン株式会社 | 画像処理装置および画像処理方法 |
CA2906207C (en) * | 2013-05-30 | 2019-09-03 | Charles Anthony Smith | Hud object design and display method |
JP2015004641A (ja) * | 2013-06-24 | 2015-01-08 | 株式会社日立ハイテクノロジーズ | ウエハ外観検査装置 |
-
2016
- 2016-11-01 WO PCT/JP2016/082498 patent/WO2018083745A1/ja unknown
- 2016-11-01 EP EP16920499.7A patent/EP3537374B1/en active Active
- 2016-11-01 JP JP2018548492A patent/JP6802854B2/ja active Active
- 2016-11-01 US US16/345,782 patent/US10872405B2/en active Active
- 2016-11-01 CN CN201680090303.4A patent/CN109964247B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10135686A (ja) * | 1996-10-25 | 1998-05-22 | Sanyo Electric Co Ltd | データ処理装置及び電子部品装着装置 |
CN1490629A (zh) * | 2001-12-10 | 2004-04-21 | ������������ʽ���� | 校正方法、电子元件的质量检查方法及特性测量系统 |
JP2006309336A (ja) * | 2005-04-26 | 2006-11-09 | Sega Corp | 映像オブジェクト表現用データ構造、映像オブジェクト表現用データ構造生成プログラム、映像オブジェクト表現用データ構造生成方法、映像ソフト開発装置、画像処理プログラム、映像処理方法、映像処理装置、および、記録媒体 |
JP2011233737A (ja) * | 2010-04-28 | 2011-11-17 | Hitachi High-Tech Instruments Co Ltd | 電子部品装着方法、電子部品装着装置及びノズルデータ作成方法 |
CN103339466A (zh) * | 2011-03-15 | 2013-10-02 | 欧姆龙株式会社 | 图像处理装置及图像处理程序 |
JP2013011547A (ja) * | 2011-06-30 | 2013-01-17 | Mitsutoyo Corp | 円形状特性測定方法、装置及びプログラム |
US20160153894A1 (en) * | 2013-08-30 | 2016-06-02 | Korea Research Institute Of Standards And Science | Optical element rotation type mueller-matrix ellipsometer and method for measuring mueller-matrix of sample using the same |
CN105701467A (zh) * | 2016-01-13 | 2016-06-22 | 河海大学常州校区 | 一种基于人体形态特征的多人异常行为识别方法 |
Non-Patent Citations (4)
Title |
---|
HIEU NGUYEN等: "Real-time,high-accuracy 3D imaging and shape measurement", 《APPLIED OPTICS》 * |
KIEU VIET HIEN等: "Accurate 3D shape measurement of multiple separate objects with stereo vision", 《MEASUREMENT SCIENCE AND TECHNOLOGY》 * |
严慧敏等: "机械零件二维几何尺寸和形状检测系统研究与开发", 《测量与检测技术》 * |
王建: "基于图像处理的颗粒度测量方法研究", 《中国优秀硕士学位论文全文数据库 工程科技II辑》 * |
Also Published As
Publication number | Publication date |
---|---|
EP3537374B1 (en) | 2024-06-12 |
US10872405B2 (en) | 2020-12-22 |
EP3537374A1 (en) | 2019-09-11 |
JPWO2018083745A1 (ja) | 2019-07-04 |
EP3537374A4 (en) | 2019-10-23 |
WO2018083745A1 (ja) | 2018-05-11 |
CN109964247B (zh) | 2023-05-05 |
US20200058120A1 (en) | 2020-02-20 |
JP6802854B2 (ja) | 2020-12-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106462515B (zh) | 用于附件设备的可逆连接器 | |
CN111932664B (zh) | 图像渲染方法、装置、电子设备及存储介质 | |
CN104615538B (zh) | 一种基于手机界面控件元素的手机应用测试方法 | |
KR20160075550A (ko) | 모바일 디바이스 테스트 시스템 | |
AU2016278358A1 (en) | Method and terminal for locking target in game scene | |
CN111693147A (zh) | 温度补偿的方法、装置、电子设备及计算机可读存储介质 | |
CN109308205A (zh) | 应用程序的显示适配方法、装置、设备及存储介质 | |
US20130027544A1 (en) | Electronic device and method for regulating coordinates of probe measurement system | |
CN108668086B (zh) | 自动对焦方法、装置、存储介质及终端 | |
CN110555838A (zh) | 基于图像的零件故障检测方法及装置 | |
CN112489102A (zh) | 三维重建方法、装置、设备以及存储介质 | |
CN108369639A (zh) | 使用多相机和深度相机阵列的基于图像的图像渲染方法和系统 | |
CN107809581A (zh) | 图像处理方法、装置、终端设备及无人机 | |
CN105554579A (zh) | 视频帧选择辅助方法、装置以及能够播放视频的计算设备 | |
CN110532024A (zh) | 一种应用程序的版本优化方法、装置、服务器及存储介质 | |
CN108304148B (zh) | 一种多屏拼接显示的方法和装置 | |
KR20150063953A (ko) | 이미지들을 표시하기 위한 방법 및 장치 | |
CN109964247A (zh) | 图像处理用元件形状数据生成系统及图像处理用元件形状数据生成方法 | |
CN105528762A (zh) | 从眼图确定ber(比特错误率)的方法 | |
CN115097975A (zh) | 用于控制视角转换的方法、装置、设备和存储介质 | |
CN107507248A (zh) | 图像校正方法及装置 | |
CN105892865A (zh) | 一种应用程序的操控模式设置方法、装置及智能终端 | |
CN115702443A (zh) | 将存储的数字化妆增强应用于数字图像中的已辨识面部 | |
CN110673737B (zh) | 基于智能家居操作系统的显示内容的调整方法及装置 | |
CN110779460B (zh) | 离线指导装置、测量控制装置和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |