CN103140872A - 图像处理装置以及图像处理方法 - Google Patents

图像处理装置以及图像处理方法 Download PDF

Info

Publication number
CN103140872A
CN103140872A CN2011800479631A CN201180047963A CN103140872A CN 103140872 A CN103140872 A CN 103140872A CN 2011800479631 A CN2011800479631 A CN 2011800479631A CN 201180047963 A CN201180047963 A CN 201180047963A CN 103140872 A CN103140872 A CN 103140872A
Authority
CN
China
Prior art keywords
subject area
processing
setting
image
processing subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800479631A
Other languages
English (en)
Other versions
CN103140872B (zh
Inventor
山本佳英
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Publication of CN103140872A publication Critical patent/CN103140872A/zh
Application granted granted Critical
Publication of CN103140872B publication Critical patent/CN103140872B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/0008Industrial image inspection checking presence/absence
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/001Industrial image inspection using an image reference approach
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20092Interactive image processing based on input by user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20092Interactive image processing based on input by user
    • G06T2207/20104Interactive definition of region of interest [ROI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30128Food products

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Chemical & Material Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Image Analysis (AREA)

Abstract

某实施方式的图像处理装置(100),接受与要对多个处理对象区域中的各区域执行的共通的图像处理相关的设定(S11),接受用于在输入图像上规定多个处理对象区域的基准区域的设定(S12),接受用于以基准区域为基准有规则地规定出多个处理对象区域的设定(S13)。按照针对共通的图像处理的设定,分别对多个处理对象区域中的各区域执行图像处理,输出反映出对多个处理对象区域的各图像处理的结果的整体处理结果(S26)。

Description

图像处理装置以及图像处理方法
技术领域
本发明涉及一种对在输入图像上所规定的多个处理对象区域中的每个区域进行图像处理的图像处理装置以及图像处理方法。
背景技术
以往,在FA(Factory Automation:工业自动化)领域等中,广泛用于这样的图像处理装置:通过对计测对象物(下面也称为“工件”)进行拍摄而生成输入图像,对该输入图像内的规定处理对象区域进行图像处理。作为这样的图像处理的典型例子,有基于预先登录的图案(pattern)(下面也称为“模型”(model))的匹配处理(下面也称为“图案匹配处理”)。通过这样的图案匹配处理,能够检测出工件上显现的损伤、灰尘等的缺陷,或能够找出与模型类似的工件上的区域。下面,将利用这样的图像处理结果来对工件进行检查、识别等的处理,总称为“计测处理”。
在JP特开2009-111886号公报(专利文献1)中公开了图案匹配处理的一例。在该专利文献1所公开的图像处理装置中,能够实现在输入图像内检索与预先登录的模型一致的区域的处理。
然而,作为FA领域中的应用例子,有时要对规则配置的多个工件的各组(set,套)进行检查。此时,在对各个工件逐一按顺序进行拍摄来取得输入图像的方法中,光学系统以及/或者工件的移动、定位、输入图像的取得这一系列动作要执行多次,需要很多时间。
因此,在不需要提高分辨率的计测处理等中,一般采用如下方法:将包含多个工件的全部组(套)收入到一个拍摄范围内,从而取得输入图像,在该取得的输入图像中,对存在其中的各工件进行计测处理。
例如,在JP特开平07-078257号公报(专利文献2)中,公开了在一个探索区域内检索多个工件的方法。另外,在JP特开2009-300431号公报(专利文献3)中,公开了在表示重复图案的图像的图案间存在噪声的情况下也能够进行正确的缺陷检查的形状检查方法。
现有技术文献
专利文献
专利文献1:JP特开2009-111886号公报
专利文献2:JP特开平07-078257号公报
专利文献3:JP特开2009-300431号公报
发明内容
发明要解决的问题
即使有上述的现有技术,在多个工件规则配置的情况下,也无法实现恰当的计测处理。即,在使用专利文献1所公开的检索处理的情况下,常常针对同一工件而检测出多个判断为与模型一致(匹配)的位置,例如,存在如下问题:难以判断某封装体内是否含有应该内置的个数的产品(工件)。另外还存在这样的问题:针对同一输入图像,需要分别独立设定要检测的数目的模型,因设定作业而需要很多时间。
另外,专利文献2所公开的方法对各个工件进行评价,存在用于评价全部多个工件的处理复杂的问题。
另外,在专利文献3所公开的方法中,虽然能够自动分割具有重复图案的检查区域,但自动分割耗时间,并且,也存在自动分割失败的可能性。如果自动分割失败,则即使产品配置的位置以及数目已知,计测处理仍会中断,成为阻碍生产性的要因。另外,例如存在如下问题:在不存在应该包含在同一封装体内的产品(工件)的情况下,必须对此进行检测,但是,其不是自动分割的对象,无法进行检测。进而,专利文献3所公开的方法并不能评价全部多个工件。
本发明的目的在于,提供一种图像处理装置以及图像处理方法,在输入图像内,针对成为图像处理对象的多个对象(object)规则配置的工件,能够进行恰当的计测处理。
用于解决问题的手段
根据本发明的一个方面,提供一种图像处理装置,能够对在输入图像上所规定的多个处理对象区域中的每个区域执行图像处理。图像处理装置接受与对多个处理对象区域中的各区域执行的共通的图像处理有关的设定,接受基准区域的设定,该基准区域用于在输入图像上规定多个处理对象区域,接受以基准区域为基准有规则地规定出多个处理对象区域的设定,按照针对共通的图像处理的设定,对多个处理对象区域中的各区域执行图像处理,输出整体处理结果,该整体处理结果反映出分别对多个处理对象区域进行的各图像处理的结果。
优选地,图像处理包括用于判断是否满足预先设定的条件的处理。图像处理装置进而接受判断条件的设定,该判断条件是与多个处理对象区域中的具有特定判断结果的处理对象区域的数目有关的判断条件。输出表示多个处理对象区域各自的判断结果是否满足判断条件的信息,来作为整体处理结果。
更加优选地,以使输入图像上的显示状态不同的方式,来输出多个处理对象区域各自的判断结果。
优选地,图像处理装置还接受与有效或无效有关的设定,所述与有效或无效有关的设定用于将多个处理对象区域中的各处理对象区域分别设定成作为图像处理的执行对象有效或无效。针对在多个处理对象区域中被设为无效而不能成为图像处理的执行对象的处理对象区域,跳过图像处理。
更加优选地,图像处理装置还显示输入图像以及针对输入图像所设定的多个处理对象区域。响应于与显示单元中的显示位置相对应关联的输入设备上的输入,来确定在多个处理对象区域中被选择的处理对象区域,并且决定是否将该处理对象区域设为有效而使其成为图像处理的执行对象。
优选地,图像处理装置以使相邻的处理对象区域满足所接受的设定的方式,在输入图像上规定出多个处理对象区域。
更加优选地,在接受了基准区域的新的设定的情况以及在接受了用于有规则地规定出多个处理对象区域的新的设定的情况中的至少一个情况下,在输入图像上再次规定出多个处理对象区域。
更加优选地,针对方形的基准区域,将多个处理对象区域规定为矩阵状。
或者更加优选地,将多个处理对象区域规定为曲折交错状。或者更加优选地,以使多个处理对象区域互不重叠的方式规定出多个处理对象区域,并且使多个处理对象区域内切于被设定为任意形状的基准区域。
或者更加优选地,以基准区域内的点为中心,将多个处理对象区域规定为放射状。
优选地,图像处理包括使用了预先登录的单一模型的匹配处理。
根据该发明的其它方面,提供一种图像处理方法,对在输入图像上所规定的多个处理对象区域中的每个区域执行图像处理。该方法包括:接受与要对多个处理对象区域中的各区域执行的共通的图像处理有关的设定的步骤;接受基准区域的设定的步骤,该基准区域用于在输入图像上规定多个处理对象区域;接受用于以基准区域为基准有规则地规定出多个处理对象区域的设定的步骤;按照针对共通的图像处理的设定,对多个处理对象区域中的各区域执行图像处理的步骤;输出整体处理结果的步骤,该整体处理结果反映出分别对多个处理对象区域进行的各图像处理的结果。
发明的效果
通过本发明,能够针对在输入图像内规则地配置的成为图像处理的对象的工件,进行恰当的计测处理。
附图说明
图1是表示本发明的实施方式的包括图像处理装置的视觉传感器系统的整体结构的示意图。
图2是表示本发明的实施方式的包括图像处理装置的视觉传感器系统成为对象的工件的例子的示意图。
图3是表示本发明的实施方式的图像处理装置的概略结构图。
图4是表示本发明的实施方式的图像处理装置所执行的全部处理的步骤的流程图。
图5是表示本发明的实施方式的图像处理装置所提供的模型登录处理中的用户接口画面的一例的图。
图6是表示本发明的实施方式的图像处理装置所提供的区域设定处理中的用户接口画面的一例的图。
图7是表示本发明的实施方式的图像处理装置所提供的矩阵(matrix)设定处理中的用户接口画面的一例的图。
图8是表示本发明的实施方式的图像处理装置所提供的矩阵设定处理中的用户接口画面的一例的图。
图9是表示本发明的实施方式的图像处理装置所提供的矩阵设定处理中的用户接口画面的一例的图。
图10是表示本发明的实施方式的图像处理装置所提供的计测参数设定处理中的用户接口画面的一例的图。
图11是表示本发明的实施方式的图像处理装置所提供的输出参数设定处理中的用户接口画面的一例的图。
图12是表示在本发明的实施方式的图像处理装置的“工作模式”中执行的处理的概要的示意图。
图13是表示本实施方式的图像处理装置在“工作模式”中提供的用户接口画面的一例的图。
图14是表示本发明的实施方式的第一变形例的图像处理装置所提供的与处理对象区域的设定有关的用户接口画面的一例的图。
图15是表示本发明的实施方式的第二变形例的图像处理装置成为对象的工件的一例的示意图。
图16是表示本发明的实施方式的第二变形例的图像处理装置所提供的与处理对象区域的设定有关的用户接口画面的一例的图。
图17是表示本发明的实施方式的第三变形例的图像处理装置所提供的与处理对象区域的设定有关的用户接口画面的一例的图。
图18是表示本发明的实施方式的第四变形例的图像处理装置所提供的与处理对象区域的设定有关的用户接口画面的一例的图。
具体实施方式
针对本发明的实施方式,参照附图来详细说明。此外,针对图中的相同或者相当部分,标注相同附图标记而不重复其说明。
《A.概要》
在本实施方式的图像处理装置中,针对输入图像设定多个处理对象区域。图像处理装置分别对所设定的多个处理对象区域中的每个区域,执行图像处理(计测处理),并且,输出反映出针对各处理对象区域的图像处理结果的整体处理结果。
本实施方式的图像处理装置,响应于基准区域的设定,以该基准区域作为基准,按规则来规定多个处理对象区域。这样,能够同时设定针对与多个工件相关的图像处理的条件,并且,例如能够相互独立地对与多个工件分别对应关联的处理对象区域进行图像处理。因此,能够简化条件设定,并且能够恰当地进行计测处理。
《B.整体装置结构》
图1是表示本发明的实施方式的包括图像处理装置100的视觉传感器系统1的整体结构的示意图。图2是表示本发明的实施方式的包括图像处理装置100的视觉传感器系统1成为对象的工件的例子的示意图。
参照图1,视觉传感器系统1安装在生产线等中,对工件组(set of work,成套的工件)2执行计测处理。本实施方式的视觉传感器系统1,适合对多个工件规则配置的工件组进行的计测处理。
作为本实施方式的图像处理装置100所执行的计测处理,典型的多包括检索处理、贴标处理。在检索处理中,预先将工件的特征部分登录为图像图案(模型),在输入图像中,从输入图像搜索出与该预先登录的模型最类似的部分。此时,计算出与模型最类似的部分的位置、倾斜度、旋转角度等,即,计算出表示相对于模型类似到何种程度的相关值等。另外,在贴标处理中,从输入图像中搜索出与预先登录的模型或者显示属性(颜色等)一致的部分,对该搜索出的部分附加标签(编号)。利用这些编号,来响应编号的指定,计算出所指定的部分的面积、重心位置等。
作为典型的一例,图1示出封装了药片等的塑料泡罩包装(Press ThroughPackage:下面也称为“PTP”)的检查线的例子。在这样的检查线中,作为工件组2的一例的PTP所包装的各个药片,相当于工件。并且,判断在各PTP2内是否包装了规定数的药片(工件),是否混入了不同的药片。例如,在图1中示出如下状态:各PTP正确包装了4×6个药片,但有1个药片为次品。在本实施方式的视觉传感器系统1中,在所进行的拍摄中,一个输入图像中至少包括与1个PTP对应的像,并且,对该输入图像进行计测处理,从而检测图1所示的药片的次品。
图2表示其它应用例子。即,在图2所示的例子中,以密封了饮品的多个瓶子装入各筐体3而构成的工件组作为计测对象。例如,适用于这样的流水线:在出厂前,针对各筐体3检查是否装入了规定数的啤酒瓶。图2表示纸面右侧的筐体3中1个瓶是次品的状态。本实施方式的视觉传感器系统1,针对这样的次品,也按照后述的逻辑进行检测。
这样,本实施方式的图像处理装置100,针对输入图像,对规定的多个处理对象区域(即,对象)中的每个区域执行图像处理(计测处理),并输出整体处理结果,该整体处理结果反映出针对多个处理对象区域(对象)的各图像处理(计测处理)的结果。
接着,说明视觉传感器系统1及其所含的图像处理装置100的具体的装置结构。
再次参照图1,在视觉传感器系统1中,工件组2被传送带等的搬送机构6搬送,拍摄装置8在规定时间(时机)对被搬送的工件组2进行拍摄。作为一例,拍摄装置8除了包括透镜(镜头)等的光学系统之外,还包括CCD(Coupled Charged Device:电荷耦合器件)或CMOS(Complementary MetalOxide Semiconductor:互补型金属氧化物半导体)传感器这样的划分多像素的拍摄元件。此外,还可以设置照明机构,对由拍摄装置8拍摄的工件组2照射光。
拍摄装置8拍摄而得到的图像(输入图像)被传输至图像处理装置100。图像处理装置100对从该拍摄装置8接收的输入图像执行图案匹配处理,将处理结果显示在所连接的显示器102上,或将处理结果输出至外部装置。
由配置在搬送机构6两端的光电传感器4来检测工件组2(是否)已到达拍摄装置8的视场内。具体而言,光电传感器4包括配置在同一光轴上的受光部4a和投光部4b,受光部4a检测出从投光部4b出射的光被工件组2遮挡,从而检测出工件组2到达。该光电传感器4的触发信号向PLC(Programmable Logic Controller:可编程序逻辑控制器)5输出。
PLC5从光电传感器4等接收触发信号,并且对搬送机构6进行控制。
图像处理装置100具有:计测模式,用于对工件组2执行各种图像处理;设定模式,用于进行后述的模型登录处理等。这些模式能够由用户通过操作鼠标104等进行切换。
就图像处理装置100而言,典型的是具有通用结构的计算机,通过执行预先安装的程序(指令代码),从而提供后述的各种功能。就这样的程序而言,典型的以装在存储卡106等中的状态流通。
在使用这样的通用的计算机的情况下,除了安装用于提供本实施方式的功能的应用程序之外,还可以安装有用于提供计算机基本功能的OS(Operating System:操作系统)。此时,可以在作为OS的一部分而提供的程序模块中,按规定排列方式在规定时间(时机)调用所需的模块,从而执行本实施方式的程序。即,本实施方式的程序本身也可以不包含上述的模块,而是与OS联动执行处理。作为本实施方式的程序。也可以是这样一部分的不含模块的形式。
进而,本实施方式的程序也可以嵌入其它程序的一部分中来提供。此时,在程序本身中,并不含有上述那样组合的其它程序内的模块,而是与该其它程序联动而执行处理的。即,作为本实施方式的程序,也可以是这样嵌入其它程序的形式。通过执行程序而提供的功能的一部分或全部,也可以安装为专用的硬件电路。
图3是本发明的实施方式的图像处理装置100的概略结构图。参照图3,图像处理装置100包括:作为计算处理部的CPU(Central Processing Unit:中央处理器)110、作为存储部的主存储器112以及硬盘114、摄像机接口116、输入接口118、显示控制器120、PLC接口122、通信接口124、数据读写器126。这些各部件通过总线128而连接,能够相互进行数据通信。
CPU110将存储在硬盘114中的程序(代码)展开在主存储器112中,按规定顺序执行这些程序,从而实施各种计算。主存储器112典型的是DRAM(Dynamic Random Access Memory:动态随机存取存储器)等的易失性的存储装置,除了保存从硬盘114读取的程序之外,还保存由拍摄装置8取得的图像数据、工件数据、与模型相关的信息等。进而,硬盘114也可以存储各种设定值等。此外,也可以在硬盘114的基础上,或者取代硬盘114,而采用闪存器等的半导体存储装置。
摄像机接口116是CPU110与拍摄装置8之间的数据传送中介。即,摄像机接口116与拍摄装置8相连接,该拍摄装置8用于拍摄工件组2而生成图像数据。更具体而言,摄像机接口116能够连接一个以上的拍摄装置8,并且具有图像缓存116a,该图像缓存116a用于暂时蓄积存储来自拍摄装置8的图像数据。并且,如果图像缓存116a中蓄积了规定帧数的图像数据,则摄像机接口116将所蓄积的数据传送至主存储器112。另外,摄像机接口116按照CPU110产生的内部指令,对拍摄装置8发出拍摄指令。
输入接口118是CPU110与鼠标104、键盘、触摸板等的输入部之间的数据传送的中介。即,输入接口118接收用户操作输入部而发出的操作指令。
显示控制器120与作为显示装置的典型例子的显示器102相连接,将CPU110中的图像处理的结果等通知给用户。即,显示控制器120与显示器102连接,控制该显示器102上的显示。
PLC接口122是CPU110与PLC5之间的数据传送的中介。更具体而言,PLC接口122将由PLC5控制的生产线的状态信息、工件信息等传送至CPU110。
通信接口124是CPU110与控制台(或者,个人计算机、服务器装置)等之间的数据传送的中介。通信接口124典型的由以太网(注册商标)、USB(Universal Serial Bus:通用串行总线)等构成。此外,如后述,可以取代将存储在存储卡106中的程序安装到图像处理装置100的方式,而将通过通信接口124来从配信服务器等下载的程序安装到图像处理装置100中。
数据读写器126是CPU110与作为存储介质的存储卡106之间的数据传送的中介。即,在存储卡106中,用于图像处理装置100执行的程序等以被存储的状态流通,数据读写器126从该存储卡106读取程序。另外,数据读写器126响应于CPU110的内部指令,将由拍摄装置8取得的图像数据以及/或者图像处理装置100中的处理结果等写入存储卡106。此外,存储卡106由CF(Compact Flash:快闪存储)卡、SD(Secure Digital:安全数字)卡等的通用的半导体存储设备、软盘(Flexible Disk)等的磁存储介质、CD-ROM(Compact Disk Read Only Memory:只读光盘)等的光学存储介质等构成。
另外,图像处理装置100也可以根据需要而与打印机等的其它输出装置连接。
《C.全部处理步骤》
首先,说明在本实施方式的图像处理装置100中执行的全部处理的概要。此外,本实施方式的图像处理装置100具有“工作模式”和“设定模式”,在“工作模式”中,实际针对各工件组2取得输入图像,并且对所取得的输入图像执行计测处理,在“设定模式”中进行各种设定,以此在该“工作模式”中实现用户所希望的动作。该“设定模式”和“工作模式”能够根据用户操作而适当切换。
图4是表示本发明的实施方式的图像处理装置100所执行的全部处理的步骤的流程图。图4所示的各步骤,是图像处理装置100的CPU110执行预先准备的程序(指令代码)而提供的。此外,在图4中,包括“设定模式”以及“工作模式”两者的处理步骤,初始模式为“设定模式”。
参照图4,CPU110接受模型登录(步骤S11)。利用在该模型登录处理中设定的模型,执行图案匹配处理(检索处理)。
如后述,分别针对在该输入图像上对规定的多个处理对象区域的每个区域,预先登录单一的模型,基于所登录的模型来执行针对一个输入图像的图案匹配处理。即,重复执行使用同一模型的图案匹配处理,所重复的次数等于针对输入图像所规定的处理对象区域的数目。在步骤S11中CPU110所接受的设定为,与要分别对多个处理对象区域执行的共通的图像处理相关的设定。
接下来,CPU110接受基准区域的设定,该基准区域用于在输入图像上规定多个处理对象区域(步骤S12)。进而,CPU110接受如下设定:以在步骤S12中设定的基准区域为基准,规则地将输入图像规定为多个处理对象区域的设定(矩阵设定)(步骤S13)。此时,以在步骤S12中设定的基准区域为基准,针对输入图像,按照在步骤S13中设定的设定值来规则地规定(划分)出多个处理对象区域。
此外,在步骤S12中接收到基准区域的新设定的情况下,或者,在步骤S13中接收到用于规则地规定出多个处理对象区域的新设定的情况下,CPU110在输入图像上再次规定多个处理对象区域。即,如果用户变更了基准区域或者用于规则地规定多个处理对象区域的设定,则CPU110响应于该变更,对所规定的多个处理对象区域也进行更新。
接下来,CPU110接受计测参数(步骤S14)。该计测参数包括:评价条件,用于针对各处理对象区域来评价所执行的计测处理的结果;输出条件,用于输出整体处理结果,该整体处理结果反映针对多个处理对象区域的各计测处理的结果。
典型的,作为前者的条件(评价条件),可以举出针对各处理对象区域执行了图案匹配处理的情况下所得的相关值所关联的阈值等。即,如果根据执行图案匹配处理的结果而得的相关值在规定阈值以上,则判断为该处理对象区域“OK”(合格,以下仅记为OK),如果该相关值小于规定阈值,则判断为“NG”(不合格,以下仅记为NG)。这样,针对各处理对象区域所执行的计测处理(图像处理),包括用于判断是否满足作为计测参数的一部分而预先设定的条件的处理。
另一方面,作为后者的条件(输出条件),可以举出,在多个处理对象区域中,针对具有特定判断结果的处理对象区域的数目的判断条件的设定。例如,如果针对一个输入图像所规定的多个处理对象区域,分别执行了图案匹配处理,结果判断为“OK”的处理对象区域的数目在规定阈值以上,则判断为该输入图像整体“OK”;如果判断为“OK”的处理对象区域的数目小于该阈值,则判断为整体“NG”。这样,来设定如下的条件,该条件用于,分别基于多个处理对象区域各自的判断结果,来评价输入图像整体,来作为整体处理结果。
另外,CPU110接受输出参数(步骤S15)。该输出参数包括输出在工作模式中执行的计测处理(图像处理)的结果时的条件。
然后,CPU110判断是否接收到向“工作模式”切换的指示(步骤S16)。如果没有向“工作模式”切换的指示(步骤S16中为“否”)。则重复执行步骤S11及其以下的处理。与此相对,如果有向“工作模式”切换的指示(步骤S16中为“是”),则执行步骤S21及其以下的处理。
此外,在图4所示的流程图中,为了方便,顺序记载了步骤S11~S15的处理,但这些处理可以并行执行,也可以适当切换执行顺序。
如果切换为“工作模式”,则CPU110等待输入图像的取得时机(时刻)(步骤S21)。典型的,根据来自图1所示的光电传感器4(受光部4a以及投光部4b)的传感器输出(信息),检测出工件组2已经到达拍摄装置8的视场范围,如果从PLC5传来该检测(信息),则CPU110判断为是输入图像的取得时机。
如果判断为是输入图像的取得时机(步骤S21中为“是”),则CPU110取得输入图像(步骤S22)。更具体而言,CPU110对拍摄装置8发送拍摄指令,从而使拍摄装置8执行拍摄处理。或者,在拍摄装置8连续重复(以规定帧周期)拍摄的情况下,将该时刻从拍摄装置8输出的图像数据保存为输入图像。另一方面,如果判为不是输入图像的取得时机(步骤S21中为“否”),则重复步骤S21的处理。
接下来,CPU110针对在步骤S22中取得的输入图像,规则地规定出多个处理对象区域(步骤S23)。此时,CPU110将表示输入图像的图像数据与各处理对象区域相对应关联,以此方式来分割输入图像。通过该分割而得的各处理对象区域所对应的图像数据的子(sub)工件组,成为图案匹配处理的对象。
在此,CPU110这样进行规定处理:在与输入图像对应关联设定的基准区域中,以使相邻的处理对象区域满足设定规则的方式,来在输入图像上规定出多个处理对象区域,所述设定规则是指,在步骤S13中设定的用于规则地规定出多个处理对象区域的设定(矩阵设定)(的内容)。
接下来,CPU110按照与在步骤S11中设定的共通的图像处理有关的设定(预先登录的模型),分别对多个处理对象区域执行图像处理(图案匹配处理)(步骤S24)。接下来,CPU110判断步骤S24的图像处理的执行结果是否满足在步骤S14中预先设定的条件(计测参数)(步骤S25)。
CPU110重复执行步骤S24以及S25的处理,所重复的次数等于对输入图像规定出的处理对象区域的数目。
然后,CPU110输出反映了针对多个处理对象区域的各图像处理结果的整体处理结果步骤S26)。此时,CPU110输出的整体处理结果是指,针对多个处理对象区域中的各区域的判断结果,判断该结果是否满足在步骤S14中预先设定的判断条件(计测参数)而得出的结果。然后,本次处理结束。
然后,CPU110判断是否有切换为“设定模式”的指示(步骤S27)。如果没有切换为“设定模式”的指示(步骤S27中为“否”),则重复步骤S21及其以下的处理。与此相对,如果有切换为“设定模式”的指示(步骤S27中为“是”),则执行步骤S11及其以下的处理。
此外,如果用户发出处理结束的指示,则中断/中止图4所示的流程图的执行。
《D.用户接口》
图5~图11以及图13表示本实施方式的图像处理装置100所提供的用户接口画面的一例。在设定模式中提供图5~图11所示的用户接口画面,在工作模式中提供图13所示的用户接口画面。
在图5~图11所示的用户接口画面中,显示由拍摄装置8取得的输入图像,并且,能够设定本实施方式的计测处理所需的各种参数。此外,在图5~图11所示的用户接口画面之间,能够通过选择标签来相互切换。另外,在图13所示的用户接口画面中,显示由拍摄装置8取得的输入图像,并且显示对该输入图像执行的计测处理的结果。
下面,参照这些用户接口画面,来说明图4所示的主要步骤中的详细处理/动作。
《E.模型登录处理》
首先,说明图4的步骤S11所示的模型登录处理。
图5表示本发明的实施方式的图像处理装置100所提供的模型登录处理中的用户接口画面201的一例。在用户接口画面201中,接受用于与对多个处理对象区域中的各区域执行的共通的图像处理有关的设定。
更具体而言,在用户接口画面201中,以可选择的方式示出模型登录标签210、区域设定标签212、矩阵设定标签214、计测参数标签216、输出参数标签218。图5所示的用户接口画面201提供了选择了模型登录标签210时的画面。
用户接口画面201含有:模型参数设定区220、模型登录图像区228、图像显示区250、全部显示区252、显示控制图标组254。
在图像显示区250中,显示通过拍摄装置8进行拍摄而生成的输入图像。在模型登录处理中,在拍摄装置8的视场范围内设置了成为基准的工件组(基准模型)。将拍摄该工件组而得的输入图像显示在图像显示区250内,并且,用户通过鼠标操作等,来设定想要登录为模型的范围,由此将其范围所含的图像登录为模型。
此外,在图5~图11所示的用户接口画面的例子中,设定了3行×3列的处理对象区域(9处)。在这些处理对象区域中示出了这样的例子:在7处配置有检测对象的工件OKW,在其它1处配置有不应该检测的对象的工件NGW,剩余1处没有配置任何工件。因此,本来针对7个工件OKW判断为“OK”,对剩余的处理对象区域判断为“NG”,或者,需要跳过计测处理。
首先,图5示出了登录圆形(包括正圆以及椭圆)的范围作为模型的例子。此时,用户使游标(鼠标)移动至应该登录为模型的中心位置(游标位置CRS1),接下来,按住按键而拖动至模型的外周位置(游标位置CRS2),由此设定模型区域262,将该模型区域262内的图像登录为模型。此外,还示出了模型区域262的中心位置260。
此外,登录为模型的形状能够由用户任意设定。即,用户如果选择了编辑按钮22,则显示用于选择模型形状的弹出画面(未图示),在该弹出画面中,能够选择长方形、多角(边)形等。此外,也能够针对同一输入图像来登录多个模型。在登录图像区227以表示形状的文字来一览显示所登录的模型。在图5所示的例子中,登录了圆形的模型,同时显示其为“椭圆”的文字。
此外,如果用户选择了显示控制图标组254中的任意一个按钮,则能够对应于所选择的按钮,改变在图像显示区250显示的图像的18显示范围/显示倍率等。另外,在全部显示区252,显示能够在图像显示区250中显示的全部图像。
这样一来,设定了用作模型的图像。在用户接口画面201中,还能够输入与使用了该模型的图案匹配处理相关的设定(信息)。
更具体而言,显示用于输入与图案匹配处理相关的设定的模型参数设定区220。在模型参数设定区220中,接受与图案匹配处理相关的设定(检索模式、稳定度、精度等)。
针对检索模式的设定,如果选择了单选按钮221,则能够设定“相关检索”或者“形状检索”中的任意检索。在“相关检索”中,基于模型与处理对象区域内的图像之间的相关值来执行检索处理(图案匹配处理)。与此相对,在“形状检索”中,基于表示模型与处理对象区域内的图像之间的形状的值(例如,表示边缘的矢量的边缘代码)来执行检索处理(图案匹配处理)。
另外,不仅能够对所登录的模型进行图案匹配处理,而且能够在旋转该模型的状态下进行图案匹配处理。在此,还假设在工件组2从本来位置开始旋转了的状态下由拍摄装置8进行拍摄。
更具体而言,如果激活旋转复选框223(使其有效),则使得上述的详细检索处理以及角度检索处理等变为有效。另外,如果使旋转复选框223无效,则不进行使模型旋转的图案匹配处理。
在旋转复选框223被置为有效的情况下,则使模型在用户于旋转参数设定区222内的数值输入框内设定的旋转范围内旋转,来执行检索处理。另外,也可以设定使该模型旋转的角度间隔(每个角度、角度刻度)。根据所设定的模型以及对象的处理对象区域,恰当地设定该旋转范围以及角度刻度,由此能够在保持检索精度的前提下提高处理速度。
另外,用户能够通过操作滑块224以及225,来分别设定与检索处理有关的稳定度和精度。通过提高稳定度的值,能够降低误检测的概率,但检索处理所需的时间相对长。另外,通过提高精度的值,能够提高所检测的坐标位置的精度,但检索处理所需的时间相对长。因此,用户可以考虑各工件组所允许的检查时间等,来设定这些参数。
此外,还能够针对所登录的模型进行编辑操作。更具体而言,在模型登录图像区228中,以可选择的方式显示以下按钮:用于显示所登录的模型的“登录图像显示”按钮、用于对所登录的模型重新登录的“模型再登录”按钮、以及用于删除所登录的模型的“删除”按钮。
通过以上步骤,来设定模型和使用了该模型的图案匹配处理所需的参数。
《F.区域设定处理》
接着,说明图4的步骤S12所示的区域设定处理。
图6表示本发明的实施方式的图像处理装置100所提供的区域设定处理中的用户接口画面202的一例。在用户接口画面202中,接受用于在输入图像上规定多个处理对象区域的基准区域的设定(信息)。通过选择区域设定标签212,来提供图6所示的用户接口画面202。
更具体而言,在用户接口画面202中,首先设定一个处理对象区域的大小。即,在输入图像上,重叠显示图5所示的模型登录处理中设定的模型区域262,并且,用户通过操作鼠标104等,来设定用于显示一个处理对象区域的单位区域264。
在图6所示的用户接口画面202中,作为一例,示出了用户设定长方形的单位区域264的状态。在该例子中,用户使游标移动至应该作为单位区域264的范围的左上位置(游标位置CRS3),接下来,按住按键而拖拽到应该作为单位区域264的范围的右下位置(游标位置CRS4),从而设定单位区域264。
在本实施方式的图像处理装置100中,利用该单位区域264,来设定用于在输入图像上规定多个处理对象区域的基准区域。利用图7来说明设定该基准区域的处理。
此外,用户能够任意设定单位区域264的形状。即,如果用户选择了编辑按钮232,则显示用于选择单位区域264的形状的弹出画面(未图示),在该弹出画面中,也能够选择长方形、多角(边)形等。在登录图像区230,由表示形状的文字来一览显示所设定的单位区域264。在图6所示的例子中,登录了长方形的模型,同时显示出其为“长方形”的文字。
在图6所示的用户接口画面202中,显示“自动更新矩阵设定”这样的复选框234。用户如果通过选择该复选框234而使其有效,则按照单位区域264的设定而规定出多个处理对象区域后,如果改变了该单位区域264的大小等,则按照该变更后的单位区域264的大小等,再次规定出多个处理对象区域。这样,复选框234用于使联动处理有效/无效,所述联动处理是指,使单位区域264的设定与针对输入图像的多个处理对象区域的设定相联动的处理。
《G.矩阵设定处理》
接着,说明图4的步骤S13所示的矩阵设定处理。
图7~图9表示本发明的实施方式的图像处理装置100所提供的矩阵设定处理中的用户接口画面203的一例。在用户接口画面203中,接受用于在输入图像上规定多个处理对象区域的基准区域的设定。通过选择矩阵设定标签214,来提供图7所示的用户接口画面203。
更具体而言,在用户接口画面203中,首先,利用在图6所示的用户接口画面202中设定的表示一个处理对象区域的单位区域264,来设定基准区域。具体而言,在用户接口画面203中,在输入图像上,重叠显示出在图6所示的区域设定处理中设定的单位区域264,并且,用户通过操作鼠标104等,分别在输入图像上的两个以上的位置配置单位区域264。并且,基于配置在输入图像上的多个单位区域264,来设定基准区域。
在本实施方式的图像处理装置100中,作为一例,在用户接口画面上移动单位区域264而配置两个单位区域(拷贝)266,将内切这两个单位区域(拷贝)266的范围设定为基准区域。
例如,如图7所示,用户使单位区域264左上移动,从而配置(从游标位置CRS5移动至游标位置CRS6)单位区域(拷贝)266_1;接下来,使单位区域264右下移动,从而配置(从游标位置CRS7移动至游标位置CRS8)单位区域(拷贝)266_2。此时,将特定的长方形的范围设定为基准区域,该特定的长方形,以单位区域(拷贝)266_1的左上的坐标点和单位区域(拷贝)266_2的右下的坐标点作为顶点。
即,用户使单位区域264移动,从而使其与输入图像所显现出来的工件组2中位于先头位置(左上部)的工件一致,并且,使其与位于最终位置(右下部)的工件一致。此外,也可以将选择矩阵设定标签214而显示出图7所示的用户接口画面203作为触发事件,基于单位区域264的设定,来生成单位区域(拷贝)266_1以及266_2,并且可选择地将它们显示在缺省位置。
当然,如后述,用户可以设定任意形状作为基准区域。
这样,在用户接口画面203中,接受用于在输入图像上规定多个处理对象区域的基准区域的设定。
此外,针对单位区域(拷贝)266_1以及266_2的形状,用户能够任意变更。即,用户如果选择了编辑按钮232,则显示用于选择单位区域264的形状的弹出画面(未图示),在该弹出画面中、能够变更其大小和形状等。在登录图像区230,利用表示形状的文字来一览显示设定在输入图像上的单位区域(拷贝)。在图7所示的例子中,由于设定了两个单位区域(拷贝),因此将它们与两个“长方形”的文字一起显示。
接下来,在用户接口画面203中,接受用于规则地规定出多个处理对象区域的设定。在本实施方式的图像处理装置100中,针对方形状的基准区域,按矩阵(matrix)状规定出多个处理对象区域。因此,在用户接口画面203中,接受用于这样将处理对象区域配置为矩阵状所需的参数。
更具体而言,在用户接口画面203中,含有矩阵设定区240。矩阵设定区240含有数值输入框241和242,这些数值输入框用于分别设定配置在基准区域内的处理对象区域的行方向的数目(行数)和列方向的数目(列数)。用户分别在数值输入框241和242中输入所希望的数,由此对基准区域设定多个处理对象区域。此外,在图7~图9所示的例子中,示出了设为规定出3行×3列的处理对象区域的状态。
这样,设定了单位区域264以及基准区域,进而,设定了配置在基准区域内的处理对象区域的行方向的数目(行数)和列方向的数目(列数),然后,如果按压“OK”按钮,则图像处理装置100在输入图像上规定出多个处理对象区域,以使相邻的处理对象区域满足在矩阵设定区240的数值输入框241和242中接受的设定(参数)。即,显示图8所示的用户接口画面203。
参照图8,在用户接口画面203中,针对输入图像,将多个处理对象区域267_1~267_9(也将它们总称为“处理对象区域267”)配置为矩阵状。在此,处理对象区域267_1~267_9的各自的大小,与在图6中设定的单位区域264的大小相同。
此外,如果基准区域的面积比多个处理对象区域(单位区域264)所占的范围更大,则能够不相互重叠地将多个处理对象区域配置为矩阵状。在该状态下,呈现恰好分割了基准区域(参照图8)的状态,因此,在图7~图9所示的用户接口画面203中,标注了“分割数”这样的名称。但是,在本实施方式的图像处理装置100中,也允许多个处理对象区域相互重叠配置的情况。在该的情况下,只要关注各处理对象区域中的共通部分(例如,中心点),就能够将多个处理对象区域配置为矩阵状。
矩阵设定区240进而包括:数值输入框243和244,用于调整基准区域的尺寸;数值输入框245和246,用于对以基准区域为基准而设定的多个处理对象区域的全部区域的位置进行调整。
用户通过分别在数值输入框243和244中输入所希望的数值,从而变更基准区域的尺寸。即,在数值输入框243中输入基准区域宽度的变更量,在数值输入框244输入基准区域高度的变更量。此外,在数值输入框243和244中输入的数值,优选是(相对于当前设定的基准区域)相对值。这样,通过变更基准区域的尺寸,来更新处理对象区域267_1~267_9的配置方式(即,相邻的处理对象区域267的间隔、处理对象区域267的位置等)。
另外,用户通过分别在数值输入框245和246中输入所希望的数值,从而变更基准区域的配置位置。即,在数值输入框245中,输入基准区域在X方向(纸面左右方向)上的移动量;在数值输入框246中,输入基准区域在Y方向(纸面上下方向)上的变更量。此外,在数值输入框245和246中输入的数值,优选是(相对于当前设定的基准区域)相对值。这样,通过变更基准区域的配置位置,能够针对输入图像来更新处理对象区域267_1~267_9的全部的位置关系。
当然,如果更新了处理对象区域的行数或者列数的值,即,如果在数值输入框241或者242中输入了新的值,则在输入图像上规定出的处理对象区域的数目、位置被更新。
这样,在本实施方式的图像处理装置100中,在接受到基准区域的新设定的情况下,或者,在接受到用于规则地规定出多个处理对象区域的新设定的情况下,在输入图像上规定出多个处理对象区域。
如上述,在图4的步骤S13所示的矩阵设定处理中,用户设定基准区域的先头位置以及最终位置,接下来,设定针对行方向(纸面上下方向)和列方向(纸面左右方向)的分割数,由此,规则地规定出多个处理对象区域。在此基础上,用户可以对基准区域的尺寸(宽度以及高度)以及基准区域的位置(X方向以及Y方向)进行调整。
这样,用户能够一边观察输入图像一边设定基准区域,由此,能够更加容易地规则配置处理对象区域。即,在应该针对输入图像设定的多个处理对象区域中,只要仅对分别位于左上以及右下(或者,右上以及左下)的处理对象区域进行设定,就能够自动设定剩余的处理对象区域,从而能够非常简便且在短时间内设定处理对象区域。
此外,在对象的工件组2中,也有不满足主要规则性的一部的情况。例如,如图8所示,在最左列的第2行不存在检测对象的工件。为了也适应这样的部分不满足规则性的工件组2,在本实施方式的图像处理装置100中,针对规定出的多个处理对象区域中的每个区域设定有效或者无效,从而设定计测处理(图像处理)的执行对象。
即,如果用户利用鼠标等对在输入图像上规定出的多个处理对象区域267_1~267_9的某个区域进行了点击,则显示图9所示的下拉式菜单279。在下拉式菜单279中,能够选择“有效”或者“无效”。如果选择了“有效”,则所对应的处理对象区域267成为计测处理(图像处理)的对象。另一方面,如果选择了“无效”,则跳过所对应的处理对象区域267的计测处理(图像处理)。
这样,在用户接口画面203中,响应于来自输入设备的输入,在多个处理对象区域中确定所选择的处理对象区域,并且决定将该处理对象区域设定为有效或者无效,从而决定计测处理(图像处理)的执行对象,该输入设备是指,与显示器102上的显示位置相对应关联的鼠标(或者,触摸板)这样的输入设备。
此外,为了能够一目了然地把握各处理对象区域有效或无效,可以根据有效/无效的状态来使显示方式不同。例如,对于设定为无效的处理对象区域,以灰色显示(显示为灰蒙蒙的状态)。
《H.计测参数设定处理》
接着,说明图4的步骤S14所示的计测参数设定处理。
图10表示本发明的实施方式的图像处理装置100所提供的计测参数设定处理中的用户接口画面204的一例。在用户接口画面204中,接受如下条件:用于评价的条件,其用于评价针对各处理对象区域267执行的计测处理(图像处理)的结果;用于生成结果的条件,其用于生成整体处理结果,该整体处理结果反映出针对多个处理对象区域的各图像处理的评价结果。通过选择计测参数标签216,来提供图10所示的在用户接口画面204。
首先,在用户接口画面204中,含有计测条件区以及提取条件区。这些区接受用于评价的条件,该条件用于评价针对各处理对象区域267执行的计测处理(图像处理)的结果。
即,在计测条件区中显示有:亚像素处理复选框271,用于设定是否以亚像素(subpixel)为单位执行图案匹配处理;数值输入框272,用于设定执行亚像素处理时的候选点等级的值。如果亚像素处理复选框271被置为有效,则针对与预先登录的模型间一致度(一致程度)的高的候補点(像素单位)执行亚像素处理。作为提取执行该亚像素处理的候補点的条件(阈值),采用在数值输入框272中输入的值(相关值)。
另外,在提取条件区中接受用于判断的条件(阈值),该条件(阈值)用于,在与预先登录的模型一致的区域中,判断哪个区域为“OK”。更具体而言,在提取条件区中显示有:数值输入框274,用于设定针对相关值的阈值,该相关值是用于判断为“OK”对象的相关值;数值输入框275,用于设定阈范围,该阈范围是针对用于判断为“OK”对象的旋转角度的阈范围。
在图案匹配处理中,计算出相关值,来作为表示与预先登录的模型间的一致度的值,并且,使模型图像在规定范围内旋转,以使一致度最大。因此,图案匹配处理的结果包括相关值以及旋转角度。因此,在根据图案匹配处理的结果而得的相关值大于等于在数值输入框274中设定的值,并且,根据图案匹配处理的结果而得的旋转角度落入在数值输入框275中设定的范围内的情况下,判断为所对应的处理对象区域为“OK”。
接着,在用户接口画面204中,包括计测参数区以及判断条件区。这些区接受用于生成整体处理结果的条件,该整体处理结果反映出针对多个处理对象区域的各图像处理的评价结果。
在计测参数区中显示单选按钮273,该单选按钮273用于进行如下设定:为了生成整体处理结果,是使用判断为“OK”的处理对象区域的数目,还是使用判断为“NG”的处理对象区域的数目。
如果选择了与“OK”区域数对应的单选按钮,则“OK区域数”被选择为计测模式。在该计测模式中,在针对多个处理对象区域分别执行的计测处理的结果中,如果判断为“OK”的数目与后述的判断条件一致,则判断为整体处理结果为“OK”。即,输出表示对象的工件组2为“OK”的结果。该“OK区域数”的计测模式,适用于检查工件组2内是否含有规定数的工件的处理。
与此相对,如果选择了与“NG”区域数对应的单选按钮,则“NG区域数”被选择为计测模式。在该计测模式中,在针对多个处理对象区域分别执行的计测处理的结果中,如果判断为“NG”的数目与后述的判断条件一致,则判断为整体处理结果为“OK”。该“NG区域数”的计测模式,适用于检查工件组2所含的不合格品的数目是否在规定数以下的处理。
在判断条件区,接受针对多个处理对象区域中满足预先设定的条件的处理对象区域的数目的判断条件的设定。更具体而言,在判断条件区中,显示用于设定针对特定的处理对象数目的判断条件的数值输入框276,该特定的处理对象具有根据在单选按钮273中设定的计测模式而指定的特定的判断结果(即,“OK”或者“NG”)。
在图10所示的例子中,区域数的下限值为“0”,并且,上限值为“9”,进而,选择“OK区域数”作为计测模式,因此,只要针对输入图像(工件组2)的计测处理的结果判断为“OK”的处理对象区域的数目落入0个~9个的范围,则输出“OK”来作为整体处理结果。否则,输出“NG”来作为整体处理结果。
进而,在用户接口画面204中,设有用于预执行计测处理的计测按钮277。如果按压该计测按钮277,则与“工作模式”同样地,针对当前输入的输入图像,设定多个处理对象区域,并且对各处理对象区域分别执行图案匹配处理。
在图10中,示出了预执行了该计测处理的状态的一例。即,在处理对象区域267_1~267_9中,在成功进行了图案匹配处理的处理对象区域,显示用于表示各坐标位置的十字(+)标记269_1、269_2、269_3、269_5、269_6、22969_7,269_8。进而,与该十字标记一起显示区域标记268_1、268_2、268_3、268_5、268_6、268_7、268_8,该区域标记268_1、268_2、268_3、268_5、268_6、268_7、268_8表示与根据图案匹配处理的结果而得的模型图像一致的区域的外形。
此外,在处理对象区域267_4内不存在任何工件,因此,没有显示十字标记以及区域标记。另外,在处理对象区域267_9中,配置有不应该检测的对象的工件NGW,因此,同样也不显示十字标记以及区域标记。
此外,在用户接口画面204中含有显示设定区278。在该显示设定区278中,显示用于对重叠显示在输入图像上的信息进行选择的单选按钮。即,如果选择了“相关值”的单选按钮,则将通过执行图案匹配处理而计算出的相关值与所对应的处理对象区域对应关联地进行显示,如果选择了“角度”的单选按钮,则将通过执行图案匹配处理而计算出的角度与所对应的处理对象区域相对应关联地进行显示。
此外,在图10所示的用户接口画面204中,通过使输入图像上的显示状态不同,由此能够显示多个处理对象区域各自的判断结果。例如,就针对各处理对象区域的图案匹配处理的结果而判断为“OK”的处理对象区域(在图10的例子中,处理对象区域267_1、267_2、267_3、267_5、267_6、267_7、267_8)而言,其外框用“绿色”显示;针对判断为“NG”的处理对象区域(图10的例子中,处理对象区域267_9),其外框用“红色”显示。进而,针对没有成为计测处理对象的处理对象区域(处理对象区域267_4),其外框用“灰色”显示。
这样,在用户接口画面204中,输出表示多个处理对象区域各自的判断结果是否判断条件的信息,来作为整体处理结果。即,所输出的整体处理结果,反映出针对多个处理对象区域分别进行的图像处理的结果。另外,通过使输入图像上的显示状态不同,能够输出多个处理对象区域各自的判断结果。
《I.输出参数设定处理》
接着,说明图4的步骤S15所示的输出参数设定处理。
图11表示本发明的实施方式的图像处理装置100所提供的输出参数设定处理中的用户接口画面205的一例。在用户接口画面205中,接受与输出方法相关的设定,该输出方法用于输出针对在输入图像上分别规定出的多个处理对象区域执行的计测处理的结果。通过选择输出参数标签218来提供图11所示的用户接口画面205。
用户接口画面205含有输出坐标区281、校验区282、综合判断反映区283。
在输出坐标区281中显示的按钮,用于设定将位置偏差修正前的值作为计测坐标输出,还是将位置偏差修正后的值作为计测坐标输出。该位置偏差修正的处理,包括针对由拍摄装置8拍摄而取得的输入图像进行的前处理等。即,为了对拍摄装置8的光学的特性等进行修正,能够预先针对输入图像,进行放大/缩小/旋转等的前处理,从而,能够选择将通过图案匹配处理而得的结果,作为在进行该前处理前的坐标系的值输出,还是作为进行前处理后的坐标系的值输出。
在校验区282中显示的单选按钮,用于设定将校验处理前的值作为计测坐标输出,还是将校验处理后的值作为计测坐标输出。在该校验处理中,为了修正因拍摄装置8的设置环境导致的误差,以预先拍摄基准而得的输入图像为基准进行修正。在该校验区282中,选择输出应用校验处理前的坐标值,还是输出应用了校验处理后的坐标值。
在综合判断反映区283显示的单选按钮,用于设定在综合判断结果中是否含有针对各处理对象区域的判断结果。
《J.工作模式》
接着,说明图4的步骤S21~26所示的“工作模式”中的处理。
图12是表示在本发明的实施方式的图像处理装置100的“工作模式”中执行的处理概要的示意图。
参照图12,在“工作模式”中,按照以下步骤,对多个处理对象区域中的各区域执行图案匹配处理。
(1)对于针对输入图像设定的基准区域(从配置在左上的单位区域(拷贝)的先头位置到配置在右下的单位区域(拷贝)的最终位置的范围),按照所指定的规则,来设定多个处理对象区域。
(2)针对位于最前面的处理对象区域,对预先登录的模型执行图案匹配处理。
(3)判断根据图案匹配处理结果而得的相关值以及角度是否都满足预先设定的条件,从而判断该处理对象区域是“OK”的区域还是“NG”的区域。
(4)针对全部处理对象区域执行(2)和(3)的处理。
(5)根据所设定的计测模式,基于判断为“OK”的处理对象区域的数目或者判断为“NG”的处理对象区域的数目,输出整体处理结果。即,在计测模式为“OK区域数”的情况下,计算出判断为“OK”的处理对象区域的数目,如果该计算出的数值在作为判断条件设定的范围内,则输出“OK”来作为整体处理结果,否则输出“NG”。另一方面,在计测模式为“NG区域数”的情况下,计算出判断为“NG”的处理对象区域的数目,如果该计算出的数值在作为判断条件而设定的范围内,则输出“OK”来作为整体处理结果,否则输出“NG”。
图13是本实施方式的图像处理装置100在“工作模式”中提供的用户接口画面301的一例的图。
参照图13,在用户接口画面301中,在拍摄装置8的视场内存在包括多个工件的工件组2的情况下,针对在该情况下生成的输入图像,显示通过执行上述计测处理而得的计测结果。
在该图13所示的用户接口画面301中,使各处理对象区域中的图案匹配处理的结果(“OK”或者“NG”)所对应的显示状态(用于规定各处理对象区域的外框的颜色)各不相同,以此方式来向用户通知该结果(“OK”或者“NG”)。同时,在用户接口画面301中,在其左上显示出表示整体处理结果的文字“OK”或者“NG”。
这样,在用户接口画面301中,将针对各处理对象区域执行的图案匹配处理的结果,与整体处理结果引起显示在同一画面上,该整体处理结果是对各处理对象区域的图案匹配处理的结果进行归纳总结而成的。
此外,还显示出通过各计测处理而得的相关值、位置以及角度等的信息(附图标记302)。
《K.作用/效果》
通过本实施方式的图像处理装置,在成为计测处理对象的工件多的情况下,也能够一次就完成计测处理所需的条件设定。特别,作为用于规定多个处理对象区域的设定,只要指定了规则(分割方法)即可,该规则(分割方法)用于设定基准区域(整体范围)和处理对象区域。因此,能够简化计测处理开始前所要求的设定处理。
另外,采用本实施方式的图像处理装置,通过手动对输入图像设定处理对象区域,因此,与自动分割基准区域的处理相比,本实施方式的图像处理装置省略了用于自动化的处理,因此能够缩短其处理时间,并且能够避免错误设定处理对象区域导致的时间消耗。
另外,通过本实施方式的图像处理装置,针对全部处理对象区域并行执行同一图案匹配处理(检索处理、贴标处理等),进而,对这些处理结果进行综合评价,因此,能够可靠地检查包括多个工件的工件组。
《L.变形例》
(l1:第一变形例)
在上述的实施方式中,如图7所示,通过在用户接口画面上上定义两个单位区域(拷贝)266,来自动设定基准区域。与此相对,在工件组2的角(端)上不存在检测对象的工件等的情况下,有时用户将基准区域设定为任意形状,对用户来说更加方便(user friend)。在本变形例中,示出了用户能够将任意形状设定为基准区域的用户接口的例子。
图14表示本发明的实施方式的第一变形例的图像处理装置所提供的与处理对象区域的设定有关的用户接口画面203A的一例。在图14所示的用户接口画面203A中,用户通过操作鼠标等,针对显示在图像显示区250中的输入图像,能够将任意形状设定为基准区域280。
例如,如图14所示,用户从游标位置CRS9到游标位置CRS10进行(按住按键的)拖拽操作,从而设定长方形的基准区域280。如果设定了该基准区域280,则通过与上述同样的处理,规则地规定出多个处理对象区域。
关于其它处理,与上述实施方式相同,因此不重复详细说明。
(l2:第二变形例)
在上述的实施方式以及第一变形例中,作为规则地规定出多个处理对象区域的一例,示出了多个处理对象区域配置为矩阵状的例子。与此相对,在第二变形例中,说明将多个处理对象区域规定为曲折交错状的例子。
图15是表示将本发明的实施方式的第二变形例的图像处理装置作为对象的工件的一例的示意图。在图15中,示出了在各列安装了多个LED的照明装置的一例。在这样的照明装置中,有时为了提高所安装的LED的密度,在相邻的列之间,使安装LED的位置相互错开。典型的采用如下结构:使奇数编号的列中的LED的安装位置与偶数编号的列中的LED的安装位置互不相同。在这样的情况下,优选不像上述那样全部形成为矩阵状,而是将处理对象区域配置为曲折交错状。
图16表示本发明的实施方式的第二变形例的图像处理装置所提供的处理对象区域的设定涉及的用户接口画面203B的一例。与图7~图9所示的用户接口画面203相比,在图16所示的用户接口画面203B中,设有包括更多的设定项目的矩阵设定区240B。
矩阵设定区240B含有:单选按钮247,其用于选择相对于图7~图9所示的矩阵设定区240而进一步配置为曲折交错状所需的错位的对象;数值输入框248,其用于设定为了配置为曲折交错状而错位的对象的周期;数值输入框249,其用于设定位置偏差量,该位置偏差量用于配置为曲折交错状。
通过选择单选按钮247,能够设定“行”或者“列”。如果选择了“行”,则以在纸面上下方向上的各排列为单位,在纸面上下方向上发生错位。另一方面,如果选择了“列”,则以在纸面左右方向上的各排列为单位,在纸面左右方向上发生错位。
在数值输入框248中,针对通过单选按钮247选择的方向,来设定相错位的列的数目(空间的周期)。如图16所示,在将“位置偏差间隔”设为“1”的情况下,在相隔一排的列之间,即针对在奇数编号的列与偶数编号的列之间被设置相对的位置偏差。
在数值输入框249中,设置用于产生位置偏差的位移量(X方向以及Y方向)。
按照这些设定参数,以基准区域为基准,来规定出多个处理对象区域。换言之,以满足这些设定参数的方式,在输入图像上规定出相邻的处理对象区域。
关于其它处理,与上述实施方式相同,因此不重复详细说明。
通过本变形例,不仅能够检查全部配置为矩阵状的多个工件,而且能够一并检查配置为曲折交错状的多个工件。
(l3:第三变形例)
在上述的实施方式以及第一变形例中,例示出了针对方形状的基准区域而指定了行方向和列方向的数目的处理对象区域。与此相对,在第三变形例中,举例说明针对用户任意设定的基准区域来规定最大数目的处理对象区域的方法。更具体而言,在本变形例中,使规则地规定出的多个处理对象区域内切于设定为任意形状的基准区域,并且多个处理对象区域互不重叠。
图17表示本发明的实施方式的第三变形例的图像处理装置所提供的与处理对象区域的设定有关的用户接口画面203C的一例。在图17所示的用户接口画面203C中例示出如下情况:针对图像显示区250所显示的输入图像,设定了圆形的基准区域296。但是,基准区域296并非仅限于此,而能够设定为任意形状。这样,在基准区域296被设定为任意形状的情况下,本变形例的图像处理装置将互不重叠的多个处理对象区域配置为矩阵状,并使它们内切于设定为任意形状的基准区域。
这样的处理对象区域的设定处理,例如适用于在具有各种各样的剖面的容器中尽可能装满有某些工件的情况。
关于其它处理,与上述实施方式相同,因此不重复详细说明。
通过本变形例,不仅能够恰当地对具有固定形状的工件组进行检查,而且能够恰当地对具有任意形状的工件组进行检查。
(l4:第四变形例)
在上述的实施方式中,示出了将处理对象区域规定为矩阵状的例子。与此相对,在第四变形例中说明如下例子:以基准区域内的点为中心,将多个处理对象区域规定为放射状。
图18表示本发明的实施方式的第四变形例的图像处理装置所提供的与处理对象区域的设定有关的用户接口画面203D的一例。在图18所示的用户接口画面203D中,针对在图像显示区250显示的输入图像,设定同心圆或者圆的基准区域。并且,在半径方向分割该基准区域,并且分别针对分割所得的圆或者同心圆,设定规定规则的数目的处理对象区域。
更具体而言,与图7~图9所示的用户接口画面203相比,在图18所示的用户接口画面203D中,设有包括更多的设定项目的矩阵设定区240D。
在矩阵设定区240D中含有用于设定半径方向分割数的数值输入框294,该半径方向分割数用于,相对于图7~图9所示的矩阵设定区240,进一步将处理对象区域规定为放射状。
通过在数值输入框294中输入数值,将所设定的基准区域在半径方向上分割为所输入的份数。在图18中,在数值输入框294中设定为“3”,因此,基准区域被分割为3份。如果这样在半径方向上分割基准区域,则能够使单个设定区290的显示和设定有效。
更具体而言,单个设定区290含有数值输入框291、292、293,分别用于设定对各分割的同心圆(或圆)分配的处理对象区域的数目。按照在这些数值输入框291、292、293中设定的值,针对各分割的区域,设定处理对象区域。在数值输入框291中设定组编号,即,设定用于在半径方向上分割的每个分割数的组的识别编号。在数值输入框292中,针对每组来设定圆周方向的分割数。在该数值输入框292中输入的分割数,被设定为针对与在数值输入框291中设定的数值对应的编号的组的分割数。在数值输入框293中,针对每组设定开始区域设定的角度。在该数值输入框293中输入的开始角度,被设定为与在数值输入框291中设定的数值对应的编号的组的分割数。因此,在圆周方向分割数(数值输入框292)以及开始角度(数值输入框293)中,输入与在数值输入框294中设定的半径方向分割数的数目对应的数目的数值组。
关于其它处理,与上述实施方式相同,因此不重复详细说明。
通过本变形例,能够检查将工件配置为放射状的工件组,例如,能够恰当地检查将多个LED安装为放射状的LED照明等。
本次公开的实施方式皆为例示,并非限制。本发明的范围不在于上述说明,而是由权利要求书示出,包括与权利要求等价的意义及范围内的全部变更。
附图标记的说明
1  视觉传感器系统
2  工件组
3  筐体
4  光电传感器
4a  受光部
4b  投光部
6  搬送机构
8  拍摄装置
100  图像处理装置
102  显示器
104  鼠标
106  存储卡
112  主存储器
114  硬盘
116  摄像机接口
116a  图像缓存
118  输入接口
120  显示控制器
122  接口
124  通信接口
126  数据读写器
128  总线

Claims (13)

1.一种图像处理装置,对在输入图像上所规定的多个处理对象区域中的每个区域执行图像处理,其特征在于,具有:
第一设定输入单元,其用于接受针对共通的图像处理的设定,该共通的图像处理是指,要对多个所述处理对象区域中的各区域执行的共通的图像处理,
第二设定输入单元,其用于接受基准区域的设定,该基准区域用于在所述输入图像上规定多个所述处理对象区域,
第三设定输入单元,其用于接受以所述基准区域为基准有规则地规定出多个所述处理对象区域的设定,
处理执行单元,其用于按照针对所述共通的图像处理的设定,对多个所述处理对象区域中的各区域执行图像处理,
输出单元,其用于输出整体处理结果,该整体处理结果反映出分别对多个所述处理对象区域进行的各图像处理的结果。
2.如权利要求1所述的图像处理装置,其特征在于,
所述图像处理,包括用于判断是否满足预先设定的条件的处理,
所述图像处理装置还具有第四设定输入单元,该第四设定输入单元用于接受判断条件的设定,该判断条件,是与多个所述处理对象区域中的具有特定判断结果的处理对象区域的数目相关的判断条件,
所述输出单元,输出表示多个所述处理对象区域各自的判断结果是否满足所述判断条件的信息,来作为所述整体处理结果。
3.如权利要求2所述的图像处理装置,其特征在于,
所述输出单元,以使所述输入图像上的显示状态不同的方式,输出多个所述处理对象区域各自的判断结果。
4.如权利要求1~3中任意一项所述的图像处理装置,其特征在于,
还具有第五设定输入单元,该第五设定输入单元用于接受与有效或无效有关的设定,所述与有效或无效有关的设定用于将多个所述处理对象区域中的各所述处理对象区域分别设定成作为所述图像处理的执行对象有效或无效,
所述处理执行单元,针对在多个所述处理对象区域中被设为无效而不能成为所述图像处理的执行对象的处理对象区域,跳过所述图像处理。
5.如权利要求4所述的图像处理装置,其特征在于,
还具有显示单元,该显示单元用于显示所述输入图像以及针对所述输入图像所设定的多个所述处理对象区域,
所述第五设定输入单元,响应于与所述显示单元中的显示位置相对应关联的输入设备上的输入,来确定在多个所述处理对象区域中被选择的处理对象区域,并且决定是否将该处理对象区域设为有效而使其成为所述图像处理的执行对象。
6.如权利要求1~3中任意一项所述的图像处理装置,其特征在于,
还具有区域规定单元,该区域规定单元用于以使相邻的处理对象区域满足由所述第三设定输入单元接受的设定的方式,在所述输入图像上规定出多个所述处理对象区域。
7.如权利要求6所述的图像处理装置,其特征在于,
所述区域规定单元,在第一情况和第二情况中的至少一个情况下,在所述输入图像上再次规定出多个所述处理对象区域,
所述第一情况是指,由所述第二设定输入单元接受了所述基准区域的新的设定的情况,
所述第二情况是指,由所述第三设定输入单元接受了用于有规则地规定出多个所述处理对象区域的新的设定的情况。
8.如权利要求6所述的图像处理装置,其特征在于,
所述区域规定单元,针对方形的所述基准区域,将多个所述处理对象区域规定为矩阵状。
9.如权利要求6所述的图像处理装置,其特征在于,
所述区域规定单元,将多个所述处理对象区域规定为曲折交错状。
10.如权利要求6所述的图像处理装置,其特征在于,
所述区域规定单元,以使多个所述处理对象区域互不重叠的方式规定出多个所述处理对象区域,并且使多个所述处理对象区域内切于被设定为任意形状的所述基准区域。
11.如权利要求6所述的图像处理装置,其特征在于,
所述区域规定单元,以所述基准区域内的点为中心,将多个所述处理对象区域规定为放射状。
12.如权利要求1所述的图像处理装置,其特征在于,
所述图像处理,包括使用了预先登录的单一模型的匹配处理。
13.一种图像处理方法,对在输入图像上所规定的多个处理对象区域中的每个区域执行图像处理,其特征在于,包括:
接受针对共通的图像处理的设定的步骤,该共通的图像处理是指,要对多个所述处理对象区域中的各区域执行的共通的图像处理,
接受基准区域的设定的步骤,该基准区域用于在所述输入图像上规定多个所述处理对象区域,
接受用于以所述基准区域为基准有规则地规定出多个所述处理对象区域的设定的步骤,
按照针对所述共通的图像处理的设定,对多个所述处理对象区域中的各区域执行图像处理的步骤,
输出整体处理结果的步骤,该整体处理结果反映出分别对多个所述处理对象区域进行的各图像处理的结果。
CN201180047963.1A 2010-10-13 2011-10-11 图像处理装置以及图像处理方法 Active CN103140872B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010230519A JP5728878B2 (ja) 2010-10-13 2010-10-13 画像処理装置および画像処理方法
JP2010-230519 2010-10-13
PCT/JP2011/073301 WO2012050074A1 (ja) 2010-10-13 2011-10-11 画像処理装置および画像処理方法

Publications (2)

Publication Number Publication Date
CN103140872A true CN103140872A (zh) 2013-06-05
CN103140872B CN103140872B (zh) 2016-08-31

Family

ID=45938303

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180047963.1A Active CN103140872B (zh) 2010-10-13 2011-10-11 图像处理装置以及图像处理方法

Country Status (6)

Country Link
US (1) US20130177250A1 (zh)
EP (1) EP2629262B1 (zh)
JP (1) JP5728878B2 (zh)
KR (2) KR20130065712A (zh)
CN (1) CN103140872B (zh)
WO (1) WO2012050074A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108375586A (zh) * 2018-02-08 2018-08-07 湘潭大学 具有多个检测模式的缺陷检测装置及其方法
CN112088395A (zh) * 2018-06-07 2020-12-15 欧姆龙株式会社 图像处理装置、图像处理方法以及图像处理程序

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014228412A (ja) * 2013-05-23 2014-12-08 富士通周辺機株式会社 ワークの検査装置及びワークの検査方法
JP6427332B2 (ja) * 2014-04-08 2018-11-21 株式会社ミツトヨ 画像測定機
KR101712857B1 (ko) * 2015-06-01 2017-03-07 주식회사 웰탑테크노스 병렬 처리 기반의 비파괴 검사를 위한 장치 및 이를 위한 방법
MX2017015363A (es) * 2015-06-17 2018-03-23 Jinan Doublewin Automobile Equipment Eng Co Ltd Sistema y metodo de embalaje automatico de todas las partes en el final de la linea de estampado.
JP6333871B2 (ja) * 2016-02-25 2018-05-30 ファナック株式会社 入力画像から検出した対象物を表示する画像処理装置
KR102584696B1 (ko) * 2016-04-26 2023-10-06 삼성디스플레이 주식회사 표시 패널의 광학 검사 방법
DE102016215144A1 (de) * 2016-08-15 2018-02-15 Ifm Electronic Gmbh Verfahren zur Vollständigkeitsprüfung
CN109964247B (zh) * 2016-11-01 2023-05-05 株式会社富士 图像处理用元件形状数据生成系统及图像处理用元件形状数据生成方法
US11336831B2 (en) * 2018-07-06 2022-05-17 Canon Kabushiki Kaisha Image processing device, control method, and program storage medium
CN111768393A (zh) * 2020-07-01 2020-10-13 上海商汤智能科技有限公司 图像处理方法及装置、电子设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101424645A (zh) * 2008-11-20 2009-05-06 上海交通大学 基于机器视觉的焊球表面缺陷检测装置与方法
US20090169117A1 (en) * 2007-12-26 2009-07-02 Fujitsu Limited Image analyzing method
CN201436584U (zh) * 2009-07-23 2010-04-07 沈阳天嘉科技有限公司 滚针轴承缺针检测装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3362191B2 (ja) * 1994-09-30 2003-01-07 オムロン株式会社 円形検査対象領域の座標指示方法及び装置並びにその装置を用いた検査装置
US6141009A (en) * 1997-07-16 2000-10-31 Cognex Corporation Interface for model definition
US6349144B1 (en) * 1998-02-07 2002-02-19 Biodiscovery, Inc. Automated DNA array segmentation and analysis
CA2416966C (en) * 2003-01-22 2007-12-11 Centre De Recherche Industrielle Du Quebec Method and apparatus for testing the quality of reclaimable waste paper matter containing contaminants
US8020601B2 (en) * 2004-01-19 2011-09-20 Krones Ag Machine for equipping articles with labels
DE102010033549A1 (de) * 2010-08-05 2012-02-09 Krones Aktiengesellschaft Verfahren und Vorrichtung zur Bildung von Gruppen zu verpackender Artikel und profilierte Schubleiste zur Verwendung hierbei

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090169117A1 (en) * 2007-12-26 2009-07-02 Fujitsu Limited Image analyzing method
CN101424645A (zh) * 2008-11-20 2009-05-06 上海交通大学 基于机器视觉的焊球表面缺陷检测装置与方法
CN201436584U (zh) * 2009-07-23 2010-04-07 沈阳天嘉科技有限公司 滚针轴承缺针检测装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108375586A (zh) * 2018-02-08 2018-08-07 湘潭大学 具有多个检测模式的缺陷检测装置及其方法
CN112088395A (zh) * 2018-06-07 2020-12-15 欧姆龙株式会社 图像处理装置、图像处理方法以及图像处理程序
CN112088395B (zh) * 2018-06-07 2024-01-16 欧姆龙株式会社 图像处理装置、图像处理方法以及计算机可读存储介质

Also Published As

Publication number Publication date
JP5728878B2 (ja) 2015-06-03
JP2012084000A (ja) 2012-04-26
KR20150020723A (ko) 2015-02-26
EP2629262A4 (en) 2015-06-03
KR101525759B1 (ko) 2015-06-09
EP2629262B1 (en) 2024-03-20
KR20130065712A (ko) 2013-06-19
WO2012050074A1 (ja) 2012-04-19
EP2629262A1 (en) 2013-08-21
US20130177250A1 (en) 2013-07-11
CN103140872B (zh) 2016-08-31

Similar Documents

Publication Publication Date Title
CN103140872A (zh) 图像处理装置以及图像处理方法
US10303495B2 (en) Robot system including CNC and robot controller connected through communication network
CN107031938B (zh) 传送系统的致动
US20190243344A1 (en) Sorting support methods, sorting systems, and flatbed machine tools
US20070192707A1 (en) Numerical controller
US11409257B2 (en) Setting device that sets a programmable logic controller and PLC system that collects control data and a dashboard for displaying control data
CN105137887A (zh) 基于编程板的实物化编程方法及其在机器人领域的应用
CN107924180A (zh) 用于将图转换成应用工程元素的方法和装置
EP2375381A1 (en) Image processing apparatus
US20210182101A1 (en) Program generating device, program generating method, and information storage medium
CN101286068A (zh) 用于管理过程设备告警的方法及设备
US10814489B1 (en) System and method of integrating robot into warehouse management software
JPWO2015029676A1 (ja) 試料分析システム
US5475797A (en) Menu driven system for controlling automated assembly of palletized elements
WO2018022717A1 (en) Hmi-based pattern modification for robotic palletizing
EP3185094B1 (en) Process control system and development system for human machine interface
Kumar et al. Machine Vision in Industry 4.0: Applications, Challenges and Future Directions
CN202224843U (zh) 整幅识别切割机
CN102411459B (zh) 光学触控模块与其加载数据方法
Nissanka et al. IoT based automatic storing and retrieval system
CN117011532A (zh) 图像处理方法、装置、设备、存储介质及程序产品
CN113465505A (zh) 一种视觉检测定位系统和方法
TWI811001B (zh) 菇類太空包塞蓋缺陷檢出之菇籃不間斷輸送系統
US11520315B2 (en) Production system, production method, and information storage medium
EP3425893B1 (en) Methods for changing a configuration of a device for reading machine-readable code

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant