CN116897282A - 图像显示装置、图像显示方法及程序 - Google Patents
图像显示装置、图像显示方法及程序 Download PDFInfo
- Publication number
- CN116897282A CN116897282A CN202280017009.6A CN202280017009A CN116897282A CN 116897282 A CN116897282 A CN 116897282A CN 202280017009 A CN202280017009 A CN 202280017009A CN 116897282 A CN116897282 A CN 116897282A
- Authority
- CN
- China
- Prior art keywords
- image
- judged
- defect
- images
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 25
- 230000007547 defect Effects 0.000 claims abstract description 176
- 238000007689 inspection Methods 0.000 claims abstract description 143
- 238000012360 testing method Methods 0.000 claims description 32
- 239000000284 extract Substances 0.000 claims description 27
- 238000010191 image analysis Methods 0.000 claims description 10
- 230000001174 ascending effect Effects 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 9
- 230000002950 deficient Effects 0.000 claims description 8
- 230000002093 peripheral effect Effects 0.000 claims description 5
- 230000005855 radiation Effects 0.000 description 30
- 238000003384 imaging method Methods 0.000 description 29
- 238000010586 diagram Methods 0.000 description 18
- 230000004048 modification Effects 0.000 description 12
- 238000012986 modification Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/001—Industrial image inspection using an image reference approach
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/532—Query formulation, e.g. graphical querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/0008—Industrial image inspection checking presence/absence
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
- G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
- G01N23/06—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption
- G01N23/18—Investigating the presence of flaws defects or foreign matter
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30164—Workpiece; Machine component
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Mathematical Physics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Image Processing (AREA)
Abstract
本发明提供一种与缺陷的呈现方式无关地容易判断检验对象图像的缺陷的图像显示装置、图像显示方法及程序。从数据库中提取拍摄到第2检验对象物且赋予了缺陷的判断结果的已判断图像,将拍摄到第1检验对象物的检验对象图像及基于所提取的已判断图像的至少2个以上的已判断图像显示于显示器。至少2个以上的已判断图像包括:第2检验对象物的缺陷以第1呈现方式被视觉辨认的第1已判断图像、及第2检验对象物的缺陷以与第1呈现方式不同的第2呈现方式被视觉辨认且判断结果与第1已判断图像相同的第2已判断图像。
Description
技术领域
本发明涉及一种图像显示装置、图像显示方法及程序,尤其涉及一种根据检验对象物的图像来判断检验对象物的缺陷的技术。
背景技术
已知有一种装置,其在显示参考图像和比较图像时,进行校正以使参考图像的位置及倍率与比较图像相同,由此以能够与比较图像进行比较的方式显示于显示装置(专利文献1)。
以往技术文献
专利文献
专利文献1:日本特开2004-78690号公报
发明内容
发明要解决的技术课题
专利文献1中记载的技术是以判断印刷物的伪造等为目的的技术,其在将分别在相同的拍摄条件下拍摄的印刷物的检验对象图像与印刷物的参考图像以1对1的方式进行比对来判断是否一致时是有效的。然而,在判断缺陷的有无、缺陷的程度的目的中要求的规格不同,无法适用专利文献1中记载的技术。
在非破坏性检验及基础设施检查等中,为了判断缺陷的有无、缺陷的程度而比较检验对象物的图像与参考图像时,两个图像并不一定能够在相同的拍摄条件下拍摄相同的对象物、相同的位置。而且,若拍摄条件、对象物及拍摄位置等不同,则即使是原本应判断为相同程度的缺陷,有时所呈现的缺陷的程度也会不同,存在难以判断的情况。
本发明是鉴于此类情况而完成的,其目的在于提供一种与缺陷的呈现方式无关地容易判断检验对象图像的缺陷的图像显示装置、图像显示方法及程序。
用于解决技术课题的手段
用于实现上述目的的图像显示装置的一方式为如下一种图像显示装置,其具备:至少1个处理器;及至少1个存储器,存储用于使至少1个处理器执行的命令,至少1个处理器进行如下处理:获取拍摄到第1检验对象物的检验对象图像,从数据库中提取已判断图像,该数据库中存储有分别拍摄到与第1检验对象物分别不同的多个第2检验对象物且分别赋予了多个第2检验对象物的缺陷的判断结果的多个已判断图像,将检验对象图像及基于所提取的已判断图像的至少2个以上的已判断图像显示于显示器,至少2个以上的已判断图像包括:第2检验对象物的缺陷以第1呈现方式被视觉辨认的第1已判断图像、及第2检验对象物的缺陷以与第1呈现方式不同的第2呈现方式被视觉辨认且判断结果与第1已判断图像相同的第2已判断图像。根据本方式,能够与缺陷的呈现方式无关地容易判断检验对象图像的缺陷。
优选的是,至少1个处理器从数据库中提取第1已判断图像及第2已判断图像。
优选的是,至少1个处理器从数据库中提取第1已判断图像,并根据第1已判断图像来生成第2已判断图像。
优选的是,至少1个处理器根据所提取的已判断图像来生成第1已判断图像及第2已判断图像。
优选的是,在数据库中仅存储有多个拍摄到具有缺陷的第2检验对象物的已判断图像。
优选的是,在数据库中存储有多个赋予了第2检验对象物有无缺陷的判断结果的已判断图像,第1已判断图像及第2已判断图像分别被赋予具有缺陷的判断结果。
优选的是,在数据库中存储有多个赋予了第2检验对象物的缺陷的种类或程度的判断结果的已判断图像,第1已判断图像及第2已判断图像各自的缺陷的种类或程度的判断结果相同。
优选的是,至少1个处理器接收检验对象图像的关注区域,并提取包括与接收到的关注区域相关联的区域的至少2个以上的已判断图像。
优选的是,至少1个处理器接收由使用者输入的关注区域、或者根据检验对象图像的图像分析结果获得的关注区域。
优选的是,至少1个处理器接收字符信息及数值信息中的至少1个信息,并提取与接收到的字符信息及数值信息中的至少1个信息相关联的至少2个以上的已判断图像。
优选的是,至少1个处理器接收由使用者输入的字符信息及数值信息中的至少1个信息、或者根据检验对象图像的图像分析结果获得的字符信息及数值信息中的至少1个信息。
优选的是,在将检验对象图像的对比度、锐度、明度、背景的亮度及使用者所设定的独立项中的至少1个项目的显示参数设定为第1基准值时,第1已判断图像针对至少1个项目的显示参数具有比第1基准值相对小且缺陷以第1呈现方式被视觉辨认的第1值,第2已判断图像针对至少1个项目的显示参数具有比第1基准值相对大且缺陷以第2呈现方式被视觉辨认的第2值。
优选的是,至少1个处理器将基于所提取的已判断图像的至少3个以上的已判断图像按照至少1个项目的显示参数的值的升序或降序进行配置而显示于显示器。
优选的是,在将检验对象图像的使用者所设定的独立项即判断缺陷的难易度的等级设定为第2基准值时,第1已判断图像针对判断缺陷的难易度的等级具有比第2基准值相对低且缺陷以第1呈现方式被视觉辨认的第3值,第2已判断图像针对判断缺陷的难易度的等级具有比第3基准值相对高且缺陷以第2呈现方式被视觉辨认的第4值。
优选的是,至少1个处理器根据缺陷候补区域与缺陷候补区域以外的背景区域之间的亮度的对比度的值来确定第2基准值、第3值及第4值。
优选的是,至少1个处理器根据缺陷候补区域的像素值、形状及面积中的至少1个来确定第2基准值、第3值及第4值。
优选的是,至少1个处理器根据缺陷候补区域彼此的重叠方式及缺陷候补区域的周边区域的纹理中的至少1个来确定第2基准值、第3值及第4值。
优选的是,至少1个处理器根据判定员的技能、判定员的可信度、多个判定员的判断结果有无偏差、判断所需的时间中的至少1个来确定第2基准值、第3值及第4值。
优选的是,预先对存储于数据库中的已判断图像赋予了难易度的等级值。
优选的是,至少1个处理器从数据库中提取针对难易度分别具有不同等级值的3个以上的已判断图像,并将3个以上的已判断图像按照等级值的升序或降序进行配置而显示于显示器。
用于实现上述目的的图像处理方法的一方式为如下一种图像处理方法,其包括:检验对象图像获取工序,获取拍摄到第1检验对象物的检验对象图像;已判断图像提取工序,从数据库中提取已判断图像,该数据库中存储有分别拍摄到与第1检验对象物分别不同的多个第2检验对象物且分别赋予了多个第2检验对象物的缺陷的判断结果的多个已判断图像;以及显示控制工序,将检验对象图像及基于所提取的已判断图像的至少2个以上的已判断图像显示于显示器,至少2个以上的已判断图像包括:第2检验对象物的缺陷以第1呈现方式被视觉辨认的第1已判断图像、及第2检验对象物的缺陷以与第1呈现方式不同的第2呈现方式被视觉辨认的第2已判断图像。根据本方式,能够与缺陷的呈现方式无关地容易判断检验对象图像的缺陷。
用于实现上述目的的程序的一方式是用于使计算机执行以上记载的图像显示方法的程序。记录有该程序的计算机可读取的非暂时性存储介质也包括在本方式中。
发明效果
根据本发明,能够与缺陷的呈现方式无关地容易判断检验对象图像的缺陷。
附图说明
图1是表示缺陷检验系统的方块图。
图2是表示拍摄系统的一例的方块图。
图3是表示图像显示方法的工序的流程图。
图4是表示显示有检验对象图像的显示器的画面的一例的图。
图5是表示使用者输入关注区域的例子的图。
图6是表示显示有已判断图像的显示器的画面的一例的图。
图7是表示用于让使用者选择分级显示项目的显示器的画面的一例的图。
图8是表示显示有已判断图像的显示器的画面的一例的图。
图9是表示使用者用于输入字符信息的显示器的画面显示的一例的图。
图10是表示使用者用于输入数值信息的显示器的画面显示的一例的图。
具体实施方式
以下,按照附图,对本发明的优选实施方式进行详细说明。
〔图像显示装置〕
本实施方式所涉及的图像显示装置在非破坏性检验的缺陷检验系统中使用。缺陷检验系统是使用者根据拍摄到作为检验对象物的工业产品的图像来判断检验对象物的缺陷的系统。在此,对同时显示使用者拍摄到检验对象物的图像和为了判断检验对象物的缺陷而参考的图像的例子进行说明。在此,对检验对象物的检验对象图像为工业产品的放射线图像的情况进行说明,但也可以是其他对象物及其他判读对象图像。并且,作为检验对象物的工业产品为金属制、树脂制等,材质并没有特别限定,可以是加工前或加工后,也可以是零件或组装品。
图1是表示本实施方式所涉及的缺陷检验系统10的方块图。如图1所示,缺陷检验系统10具备拍摄系统12、显示器14、图像显示装置16、输入装置18及图像数据库20。
拍摄系统12是拍摄第1检验对象物即检验对象物OBJ的图像的系统。关于拍摄系统12的详细内容,在后面进行说明。
显示器14是用于让使用者视觉辨认出拍摄到检验对象物OBJ的检验对象图像等的显示装置。显示器14显示输入装置18中的操作所需的画面,作为实现GUI(Graphical UserInterface:图形用户界面)的部分发挥功能。
图像显示装置16是用于将由拍摄系统12拍摄到的检验对象物OBJ的图像显示于显示器14的画面的控制装置。图像显示装置16具备处理器16A及存储器16B。
处理器16A执行存储于存储器16B中的命令。可以具备多个处理器16A。
处理器16A的硬件结构是以下所示的各种处理器(processor)。各种处理器包括通过执行软件(程序)作为各种功能部发挥作用的通用处理器即CPU(CentralProcessingUnit:中央处理器)、专门用于图像处理的处理器即GPU(Graphics Processing Unit:图形处理器)、FPGA(Field Programmable Gate Array:现场可编程门阵列)等制造后可变更电路结构的处理器即PLD(Programmable Logic Device:可编程逻辑设备)、ASIC(Application Specific Integrated Circuit:专用集成电路)等具有为了执行特定处理而专门设计的电路结构的处理器即专用电路等。
一个处理部可以由这些各种处理器中的1个构成,也可以由相同种类或不同种类的2个以上的处理器(例如,多个FPGA、或CPU与FPGA的组合、或CPU与GPU的组合)构成。并且,也可以由一个处理器构成多个功能部。作为由一个处理器构成多个功能部的例子,首先有如下方式:如以客户端或服务器等计算机为代表,由1个以上的CPU与软件的组合构成一个处理器,使该处理器作为多个功能部起到作用。其次有如下方式:如以SoC(System OnChip:单片系统)等为代表,使用通过一个IC(Ihtegrated Circuit:集成电路)芯片实现包括多个功能部的系统整体功能的处理器。如此,各种功能部使用一个以上的上述各种处理器来构成为硬件结构。
而且,更具体而言,这些各种处理器的硬件结构为组合半导体元件等电路元件而成的电路(circuitry)。
存储器16B存储用于使处理器16A执行的命令。存储器16B包括未图示的RAM(Random Access Memory:随机存取存储器)及ROM(Read Only Memory:只读存储器)。处理器16A以RAM为作业区域,使用包括存储于ROM中的图像显示程序的各种程序及参数执行软件,且通过使用存储于ROM等中的参数执行图像显示装置16的各种处理。
输入装置18是接收来自使用者的操作输入的界面。输入装置18包括用于输入字符的键盘、显示于显示器14的画面的指针、用于操作图标等的点击设备。输入装置18可以是与显示器14一体化的触屏显示器。
图像数据库20由大容量存储装置构成。图像数据库20中存储有分别在过去拍摄到分别不同的多个第2检验对象物的多个已判断图像。各已判断图像分别与第2检验对象物的缺陷的判断结果建立有关联。第2检验对象物是不同于检验对象物OBJ的物品,多个第2检验对象物是彼此不同的物品。第2检验对象物例如可以是与检验对象物OBJ相同的标准件,也可以是与检验对象物OBJ不同形状的物品。
存储于图像数据库20中的第2检验对象物的缺陷的判断结果可以是有无缺陷的判断结果,也可以是第2检验对象物的缺陷的种类或程度的判断结果。并且,图像数据库20中可以仅存储有多个拍摄到具有缺陷的第2检验对象物的已判断图像。此时,可以理解为存储于图像数据库20中的已判断图像与具有缺陷这一判断结果建立有关联。
拍摄系统12、图像显示装置16及图像数据库20经由网络NW可通信地连接。网络NW例如为LAN(Local Area Network:局域网)、WAN(Wide AreaNetwork:广域网)、互联网连接。拍摄系统12、图像显示装置16及图像数据库20可以通过USB(Universal Serial Bus:通用串行总线)电缆等可通信地连接,也可以通过使用红外线等的近距离无线通信可通信地连接。拍摄系统12、图像显示装置16及图像数据库20分别可以通过可拆卸且可读取的存储介质进行包括图像的数据的交换。
〔拍摄系统〕
图2是表示拍摄系统12的一例的方块图。如图2所示,拍摄系统12具备拍摄室22、拍摄控制部24、拍摄操作部26、图像记录部28、放射线检测器30及放射线源34。
拍摄室22通过X射线防护材料(例如铅、混凝土等)在与外部之间的隔壁及出入口实施X射线防护。在拍摄室22的内部除了配置有放射线检测器30及放射线源34以外,还配置有成为拍摄对象的检验对象物OBJ。
拍摄控制部24包括控制拍摄系统12的各部的动作的CPU。拍摄控制部24经由拍摄操作部26接收来自拍摄者的操作输入,并将与接收到的操作输入相应的控制信号发送到拍摄系统12的各部以控制各部的动作。
拍摄操作部26是接收来自拍摄者的操作输入的输入装置。拍摄者经由拍摄操作部26,能够进行与检验对象物OBJ有关的信息的输入、针对放射线检测器30的拍摄执行的命令的输入(包括曝光时间、焦距、光圈等拍摄条件、拍摄角度、拍摄部位等的设定)、针对放射线源34的放射线照射的命令的输入(包括照射开始时间、照射持续时间、照射角度、照射强度等的设定)、将所获取的图像记录于图像记录部28的命令的输入。
图像记录部28记录由放射线检测器30拍摄到的检验对象物OBJ的图像(受光图像数据)。用于确定检验对象物OBJ的信息与图像建立关联地记录在图像记录部28中。
放射线源34例如为X射线源。放射线源34按照来自拍摄控制部24的命令,对拍摄室22内的检验对象物OBJ照射放射线。另外,在对检验对象物OBJ照射可见光来进行拍摄时,无需使用实施了防护的拍摄室22。
放射线检测器30按照来自拍摄控制部24的拍摄执行的命令,接收从放射线源34照射到检验对象物OBJ并透射检验对象物OBJ的放射线来拍摄检验对象物OBJ。检验对象物OBJ通过未图示的保持部件(例如,机械手、载置台、可动式载置台)被保持在拍摄室22内,检验对象物OBJ相对于放射线检测器30、放射线源34的距离及角度是可调的。操作者能够经由拍摄控制部24对检验对象物OBJ、放射线检测器30、放射线源34的相对位置进行控制,并能够拍摄检验对象物OBJ的所希望的部位。
同步于放射线检测器30结束执行拍摄,放射线源34结束对检验对象物OBJ的放射线照射。
另外,在图2所示的例子中,放射线检测器30配置于拍摄室22的内部,但放射线检测器30只要能够拍摄到拍摄室22内的检验对象物OBJ,则也可以配置于拍摄室22的外部。
并且,在图2所示的例子中,设置有1台放射线检测器30、1台放射线源34,但放射线检测器及放射线源的台数并不限定于此。例如,放射线检测器及放射线源分别可以是多台。
〔图像显示方法〕
对使用图像显示装置16的图像显示方法进行说明。图像显示方法通过处理器16A执行存储于存储器16B中的图像显示程序来实现。图像显示程序可以由计算机可读取的非暂时性存储介质提供。此时,图像显示装置16可以从非暂时性存储介质读取图像显示程序,并将其存储于存储器16B。
图3是表示图像显示方法的工序的流程图。在本实施方式所涉及的图像显示方法中,为了让使用者容易判断检验对象物OBJ的缺陷,同时显示拍摄到检验对象物OBJ的图像和为了判断检验对象物OBJ的缺陷而参考的图像。
图像显示装置16的处理器16A获取拍摄到第1检验对象物的检验对象图像(步骤S1:检验对象图像获取工序的一例)。在此,处理器16A经由网络NW从图像数据库20中获取拍摄到检验对象物OBJ的检验对象图像100(参考图4)。检验对象图像100是在拍摄系统12中拍摄到检验对象物OBJ的图像。
接着,处理器16A将获取到的检验对象图像显示于显示器(步骤S2)。图4是表示显示有检验对象图像100的显示器14的画面的一例的图。使用者可以观察该画面的同时判断检验对象物OBJ的缺陷。
接着,处理器16A接收由使用者输入的检验对象图像的关注区域(步骤S3)。使用者使用输入装置18输入显示于显示器14的检验对象图像100的任意区域作为关注区域。
图5是表示使用者输入关注区域的例子的图。在此,使用者通过未图示的点击设备的拖动操作,用光标102指定范围104,由此输入包括在范围104内的关注区域AX。使用者输入关注区域并不限定于点击设备的拖动操作,可以是触屏的触摸操作,还可以是通过键盘等进行的坐标输入操作。
另外,在步骤S3中接收到的关注区域可以是根据检验对象图像100的图像分析结果获得关注区域。此时,处理器16A对检验对象图像100进行图像分析,提取检验对象物OBJ的缺陷候补区域,并将缺陷候补区域设定为关注区域。通过图像分析提取多个缺陷候补区域时,处理器16A可以让使用者选择将哪一个缺陷候补区域设定为关注区域。处理器16A可以通过已学习模型提取缺陷候补区域,该已学习模型在给出检验对象图像作为输入时,输出缺陷候补的区域。该已学习模型能够适用卷积神经网络(CNN:Convolution NeuralNetwork)。
接着,处理器16A从数据库中提取至少2个以上的已判断图像(步骤S4:已判断图像提取工序的一例)。在此,处理器16A从图像数据库20中提取包括步骤S3中接收到的与关注区域AX相关联的区域的至少2个以上的已判断图像。与关注区域AX相关联的区域例如是指缺陷的种类、缺陷的尺寸及缺陷的密度中的至少1个与关注区域AX所包括的缺陷候补类似的区域。
在此,至少2个以上的已判断图像包括:第2已判断检验对象物的第1缺陷以第1呈现方式被视觉辨认的第1已判断图像、及第2已判断检验对象物的第2缺陷以与第1呈现方式不同的第2呈现方式被视觉辨认的第2已判断图像。检验对象物OBJ、第1已判断图像的第2已判断检验对象物及第2已判断图像的第2已判断检验对象物可以是分别相同的形状,也可以是分别不同的形状。
并且,对第1已判断图像赋予的判断结果及对第2已判断图像赋予的判断结果相同。例如,图像数据库20中仅存储有多个拍摄到具有缺陷的第2检验对象物的已判断图像时,处理器16A无论提取哪一个图像作为第1已判断图像及第2已判断图像,对第1已判断图像赋予的判断结果及对第2已判断图像赋予的判断结果都相同。
并且,在图像数据库20中存储有多个赋予了第2检验对象物有无缺陷的判断结果的已判断图像时,作为第1已判断图像及第2已判断图像,处理器16A提取均为有缺陷的判断结果或无缺陷的判断结果的图像。
而且,在图像数据库20中存储有多个赋予了第2检验对象物的缺陷的种类或程度的判断结果的已判断图像时,作为第1已判断图像及第2已判断图像,处理器16A提取缺陷的种类或程度的判断结果均相同的图像。
在此,处理器16A获取4个已判断检验对象物OBJA、OBJB、OBJC及OBJD的已判断图像106A、106B、106C及106D(参考图6)。已判断图像106A、106B、106C及106D分别包括步骤S3中接收到的与关注区域AX相关联的区域即缺陷DA、DB、DC及DD(参考图6)。
最后,处理器16A将在步骤S1中获取的检验对象图像100及在步骤S4中提取的至少2个以上的已判断图像即已判断图像106A、106B、106C及106D显示于显示器14(步骤S5:显示控制工序的一例)。通过以上步骤,本流程图的处理结束。
图6是表示显示有已判断图像106A、106B、106C及106D的显示器14的画面的一例的图。如图6所示,显示器14中同时显示有检验对象图像100和已判断图像106A、106B、106C及106D。使用者通过利用该画面比较检验对象图像的关注区域AX与缺陷DA、DB、DC及DD,能够适当地进行针对关注区域AX的缺陷的判断。
〔被显示的图像〕
在本实施方式中,显示于显示器14中的至少2个以上的已判断图像中作为对比度、锐度、明度、背景的亮度及使用者所设定的独立项中的至少1个项目的分级显示项目的显示参数值分别不同。在此,将检验对象图像100的分级显示项目的显示参数值作为第1基准值。
映射于图6所示的已判断图像106A的已判断检验对象物OBJA的缺陷DA是以第1呈现方式被视觉辨认的缺陷。已判断图像106A针对分级显示项目的显示参数具有比第1基准值相对小且缺陷DA以第1呈现方式被视觉辨认的第1值。
映射于已判断图像106B的已判断检验对象物OBJB的缺陷DB是以第2呈现方式被视觉辨认的缺陷。已判断图像106B针对分级显示项目的显示参数具有比基准值相对大且缺陷DB以第2呈现方式被视觉辨认的第2值。
映射于已判断图像106C的已判断检验对象物OBJC的缺陷DC是以第3呈现方式被视觉辨认的缺陷。已判断图像106C针对分级显示项目的显示参数具有比第2值相对大且缺陷DC以第3呈现方式被视觉辨认的第5值。
映射于已判断图像106D的已判断检验对象物OBJD的缺陷DD是以第4呈现方式被视觉辨认的缺陷。已判断图像106D针对分级显示项目的显示参数具有比第5值相对大且缺陷DD以第4呈现方式被视觉辨认的第6值。
如此,在本实施方式中,处理器16A将针对分级显示项目的显示参数具有分别不同的值的3个以上的已判断图像即已判断图像106A、106B、106C及106D显示于显示器14。并且,处理器16A获取检验对象图像100的分级显示项目的显示参数的第1基准值,在显示的多个已判断图像中,将针对分级显示项目的显示参数至少1个具有比第1基准值相对小的值且至少1个具有比第1基准值相对大的值的已判断图像显示于显示器14。
而且,处理器16A将3个以上的已判断图像按照分级显示项目的显示参数值的升序或降序进行配置而显示于显示器14。在图16所示的例子中,从画面左侧向右侧以升序配置有已判断图像106A、106B、106C及106D。
如此,通过提示与显示参数值相应的分级图像,防止不经意地看漏检验对象物OBJ,能够更统一且适当地判断缺陷。
〔已判断图像的生成〕
至此,对处理器16A将显示于显示器14的至少2个以上的已判断图像均从图像数据库20中提取的例子进行了说明,但显示于显示器14的已判断图像只要是基于从图像数据库20中提取的已判断图像的图像即可。
例如,处理器16A可以从图像数据库20中提取已判断图像106B,并根据已判断图像106B生成分级显示项目的显示参数值分别不同的已判断图像106A、已判断图像106C及已判断图像106D。并且,处理器16A还可以根据从图像数据库20中提取的已判断图像来生成分级显示项目的显示参数值分别不同的已判断图像106A、已判断图像106B、已判断图像106C及已判断图像106D。如此生成的已判断图像的缺陷的判断结果与从图像数据库20中提取的成为基础的已判断图像相同。
〔分级显示项目的选择〕
分级显示项目可以构成为能够由使用者做出选择。图7是表示用于让使用者选择重新排列参考图像的项目即已判断图像的分级显示项目的显示器14的画面的一例的图。图7的1000显示使用者做出选择前的画面。在此,“对比度”、“明度”、“判断的难易度”、“锐度”、“背景的亮度”及“自定义设定”的按钮108分别以可选择的方式显示。使用者利用未图示的点击设备选择这些项目中的至少1个按钮108,由此能够将“对比度”、“明度”、“判断的难易度”、“锐度”、“背景的亮度”及“自定义设定”中的至少1个设定为分级显示项目。
另外,“判断的难易度”及“自定义设定”为“使用者所设定的独立项”的一例。使用者在选择了“自定义设定”时,能够设定所希望的项目。关于“判断的难易度”,在后面进行说明。
图7的1002显示使用者选择分级显示项目后的画面。在此,示出选择了“明度”的例子,突出显示被选择的“明度”的项目的按钮108。
此时,处理器16A获取检验对象图像的明度的显示参数值即第1基准值,在所显示的多个已判断图像中,将至少1个设定为针对明度具有比第1基准值相对小的值的已判断图像,将至少1个设定为针对明度具有比第1基准值相对大的值的已判断图像。
图8是表示显示有这样选择的已判断图像的显示器14的画面的一例的图。在此,在显示器14中同时显示检验对象图像100和3个已判断检验对象物OBJE、OBJF及OBJG的已判断图像110A、110B及110C。已判断图像110A、110B及110C分别包括与关注区域AX相关联的区域即缺陷DE、DF及DG。
已判断图像110A针对明度的显示参数具有比第1基准值相对小且缺陷DE以第1呈现方式被视觉辨认的第1值。
已判断图像110B针对明度的显示参数具有比第1基准值相对大且缺陷DF以第2呈现方式被视觉辨认的第2值。
已判断图像110C针对明度的显示参数具有比第2值相对大且缺陷DG以第3呈现方式被视觉辨认的第7值。
〔判断的难易度〕
使用者所设定的独立项包括判断缺陷的难易度。在图7的1000中,在选择了“判断的难易度”时,处理器16A获取检验对象图像的判断缺陷的难易度的等级值即第2基准值,在所显示的多个已判断图像中,将至少1个设定为针对判断缺陷的难易度的等级具有比第2基准值相对低且缺陷以第1呈现方式被视觉辨认的第3值的已判断图像,将至少1个设定为针对判断缺陷的难易度的等级具有比第2基准值相对高且缺陷以第2呈现方式被视觉辨认的第4值的已判断图像。
在此,处理器16A根据缺陷候补区域与缺陷候补区域以外的背景区域之间的亮度的对比度的值确定第2基准值、第3值及第4值。另外,缺陷候补区域包括被判断为缺陷的缺陷区域。
处理器16A根据缺陷候补区域的像素值、形状及面积中的至少1个确定第2基准值、第3值及第4值。例如,缺陷候补区域的像素值越是相对小(亮度低),缺陷候补区域的形状越是宽度相对窄的形状,且缺陷候补区域的面积越是相对小,越是会赋予相对高的等级。
并且,处理器16A可以根据缺陷候补区域彼此的重叠方式及缺陷候补区域的周边区域的纹理中的至少1个确定第2基准值、第3值及第4值。例如,缺陷候补区域彼此的重叠方式越是相对大,缺陷候补区域的周边区域的纹理越是与缺陷候补区域相对相似,越是会赋予相对高的等级。
而且,处理器16A可以根据判定员的技能、判定员的可信度、多个判定员的判断结果有无偏差、判断所需的时间中的至少1个确定第2基准值、第3值及第4值。例如,多个判定员的判断结果的偏差相对大的缺陷被认为是判断的难易度高于判断结果的偏差相对小的缺陷,因此被赋予相对高的等级。处理器16A在评价多个判定员的判断结果的偏差时,根据各判定员的技能及判定员的可信度,对判断结果进行加权,由此能够赋予更合适的等级。判定员的技能及判定员的可信度可以预先存储于存储器16B中。
并且,判断所需的时间相对长时,认为判断的难易度高于判断所需的时间相对短的情况,因此会赋予相对高的等级。同样地,在评价判断所需的时间时,处理器16A也能够根据各判定员的技能及可信度,对时间进行加权来赋予更合适的等级。
可以对存储于图像数据库20中的已判断图像预先赋予判断缺陷的难易度的等级值。
并且,处理器16A可以从数据库中提取针对判断缺陷的难易度的等级分别具有不同的值的3个以上的已判断图像,并按照等级值的升序或降序进行配置而显示于显示器14。
〔字符信息及数值信息的接收〕
至此,处理器16A接收检验对象图像的关注区域,并提取包括与接收到的关注区域相关联的区域的至少2个以上的已判断图像,但也可以接收字符信息及数值信息中的至少1个信息,并提取与接收到的字符信息及数值信息中的至少1个信息相关联的至少2个以上的已判断图像。
处理器16A接收由使用者输入的字符信息及数值信息中的至少1个信息。使用者使用未图示的点击设备能够输入字符信息及数值信息。
字符信息及数值信息是包括例如缺陷的种类、缺陷的形状、缺陷的大小及其他与缺陷相关的关键词中的至少1个的信息。并且,字符信息及数值信息也可以是缺陷是否产生于零件的边缘等边界附近这一缺陷产生位置信息。此时,使用者能够通过缺陷周边的纹理即对比度等特征量指定。而且,字符信息及数值信息还可以是缺陷的周边是否产生了其他缺陷即缺陷是孤立的还是集合中的一个这一信息。
图9是表示使用者用于输入字符信息的显示器14的画面显示的一例的图。在此,示出选择输入缺陷的种类的例子。如图9所示,在显示器14中显示有多个复选框112及文本框114。
在图9所示的例子中,作为选项,显示有“异物(黑)”、“异物(白)”、“气泡”、“气体”及“自由词”。使用者通过使用未图示的点击设备在这些选项的至少1个复选框112中打勾,能够选择缺陷的种类。在此,选择了“异物(黑)”及“异物(白)”。
另外,欲选择“异物(黑)”、“异物(白)”、“气泡”及“气体”以外的缺陷的种类时,使用者在“自由词”的复选框112中打勾,而且通过使用未图示的键盘在文本框114中输入字符,能够对选项中不存在的缺陷的种类进行自由词搜索。
并且,图10是表示使用者用于输入数值信息的显示器14的画面显示的一例的图。在此,作为缩小条件,示出输入缺陷的面积范围的例子。如图10所示,显示器14中显示有文本框116及118、滑动条120及箭头122。
文本框116用于指定缺陷的面积最小值,文本框118用于指定缺陷的面积最大值。在此,在文本框116中输入有“10px”,在文本框118中输入有“70px”。“px”表示像素。即,在此,输入有10像素以上且70像素以下的数值信息。面积单位并不限定于像素,也可以是平方毫米等。
并且,在文本框116及118的上侧显示有滑动条120。滑动条120与输入于文本框116及118中的值联动,输入值的相应范围的亮度显示为暗。
在滑动条120的上侧显示有用于缩小缺陷的面积范围的箭头122,通过利用点击设备左右移动箭头122,能够改变滑动条120所显示的范围。此时,与变更范围相应地,显示于文本框116及118中的值会改变。
如此,使用者能够输入字符信息及数值信息中的至少1个信息。另外,处理器16A可以接收从检验对象图像的图像分析结果获得的字符信息及数值信息中的至少1个信息。
〔其他〕
本发明的技术范围并不限定于上述实施方式中记载的范围。各实施方式中的结构等能够在不脱离本发明的主旨的范围内,在各实施方式之间进行适当的组合。
符号说明
10-缺陷检验系统,12-拍摄系统,14-显示器,16一图像显示装置,16A-处理器,16B-存储器,18-输入装置,20-图像数据库,22-拍摄室,24-拍摄控制部,26-拍摄操作部,28-图像记录部,30-放射线检测器,34-放射线源,100-检验对象图像,102-光标,104-范围,106A-已判断图像,106B-已判断图像,106C-已判断图像,106D-已判断图像,108-按钮,110A-已判断图像,110B-已判断图像,110C-已判断图像,112-复选框,114-文本框,116-文本框,118-文本框,120-滑动条,122-箭头,AX-关注区域,DA-缺陷,DB-缺陷,DC-缺陷,DD-缺陷,DE-缺陷,DF-缺陷,DG-缺陷,NW-网络,OBJ-检验对象物,OBJA-已判断检验对象物,OBJB-已判断检验对象物,OBJC-已判断检验对象物,OBJD-已判断检验对象物,OBJE-已判断检验对象物,OBJF-已判断检验对象物,OBJG-已判断检验对象物,S1~S5-图像显示方法的各步骤。
权利要求书(按照条约第19条的修改)
1.一种图像显示装置,具备:
至少1个处理器;及
至少1个存储器,存储用于使所述至少1个处理器执行的命令,
所述至少1个处理器进行如下处理:
获取拍摄到第1检验对象物的检验对象图像,
从数据库中提取已判断图像,所述数据库中存储有分别拍摄到与所述第1检验对象物分别不同的多个第2检验对象物且分别赋予了所述多个第2检验对象物的缺陷的判断结果的多个已判断图像,
将所述检验对象图像及基于所提取的所述已判断图像的至少2个以上的已判断图像显示于显示器,
所述至少2个以上的已判断图像包括:所述第2检验对象物的缺陷以第1呈现方式被视觉辨认的第1已判断图像、及所述第2检验对象物的缺陷以与所述第1呈现方式不同的第2呈现方式被视觉辨认且所述判断结果与所述第1已判断图像相同的第2已判断图像。
2.根据权利要求1所述的图像显示装置,其中,
所述至少1个处理器从所述数据库中提取所述第1已判断图像及所述第2已判断图像。
3.根据权利要求1所述的图像显示装置,其中,
所述至少1个处理器从所述数据库中提取所述第1已判断图像,并根据所述第1已判断图像来生成所述第2已判断图像。
4.根据权利要求1所述的图像显示装置,其中,
所述至少1个处理器根据所提取的所述已判断图像来生成所述第1已判断图像及所述第2已判断图像。
5.根据权利要求1至4中任一项所述的图像显示装置,其中,
在所述数据库中仅存储有多个拍摄到具有缺陷的所述第2检验对象物的已判断图像。
6.根据权利要求1至4中任一项所述的图像显示装置,其中,
在所述数据库中存储有多个赋予了所述第2检验对象物有无缺陷的判断结果的已判断图像,
所述第1已判断图像及所述第2已判断图像分别被赋予具有缺陷的判断结果。
7.根据权利要求1至4中任一项所述的图像显示装置,其中,
在所述数据库中存储有多个赋予了所述第2检验对象物的缺陷的种类或程度的判断结果的已判断图像,
所述第1已判断图像及所述第2已判断图像各自的缺陷的所述种类或所述程度的判断结果相同。
8.根据权利要求1至7中任一项所述的图像显示装置,其中,
所述至少1个处理器接收所述检验对象图像的关注区域,并提取包括与所接收到的所述关注区域相关联的区域的所述至少2个以上的已判断图像。
9.根据权利要求8所述的图像显示装置,其中,
所述至少1个处理器接收由使用者输入的所述关注区域、或者根据所述检验对象图像的图像分析结果获得的所述关注区域。
10.根据权利要求1至9中任一项所述的图像显示装置,其中,
所述至少1个处理器接收字符信息及数值信息中的至少1个信息,并提取与所接收到的所述字符信息及数值信息中的至少1个信息相关联的至少2个以上的已判断图像。
11.根据权利要求10所述的图像显示装置,其中,
所述至少1个处理器接收由使用者输入的所述字符信息及所述数值信息中的至少1个信息、或者根据所述检验对象图像的图像分析结果获得的所述字符信息及所述数值信息中的至少1个信息。
12.(修改后)根据权利要求1至11中任一项所述的图像显示装置,其中,
所述第1呈现方式及所述第2呈现方式各自的所述检验对象图像的缺陷的呈现方式不同。
13.(修改后)根据权利要求12所述的图像显示装置,其中,
在将所述检验对象图像的对比度、锐度、明度、背景的亮度及使用者所设定的独立项中的至少1个项目的显示参数设定为第1基准值时,
所述第1已判断图像针对所述至少1个项目的显示参数具有比所述第1基准值相对小且缺陷以所述第1呈现方式被视觉辨认的第1值,
所述第2已判断图像针对所述至少1个项目的显示参数具有比所述第1基准值相对大且缺陷以所述第2呈现方式被视觉辨认的第2值。
14.(修改后)根据权利要求13所述的图像显示装置,其中,
所述至少1个处理器将基于所提取的所述已判断图像的至少3个以上的已判断图像按照所述至少1个项目的显示参数的值的升序或降序进行配置而显示于所述显示器。
15.(修改后)根据权利要求13或14所述的图像显示装置,其中,
在将所述检验对象图像的所述使用者所设定的独立项即判断缺陷的难易度的等级设定为第2基准值时,
所述第1已判断图像针对所述判断缺陷的难易度的等级具有比所述第2基准值相对低且缺陷以所述第1呈现方式被视觉辨认的第3值,
所述第2已判断图像针对所述判断缺陷的难易度的等级具有比所述第2基准值相对高且缺陷以所述第2呈现方式被视觉辨认的第4值。
16.(修改后)根据权利要求15所述的图像显示装置,其中,
所述至少1个处理器根据缺陷候补区域与所述缺陷候补区域以外的背景区域之间的亮度的对比度的值来确定所述第2基准值、所述第3值及所述第4值。
17.(修改后)根据权利要求15或16所述的图像显示装置,其中,
所述至少1个处理器根据缺陷候补区域的像素值、形状及面积中的至少1个来确定所述第2基准值、所述第3值及所述第4值。
18.(修改后)根据权利要求15至17中任一项所述的图像显示装置,其中,
所述至少1个处理器根据缺陷候补区域彼此的重叠方式及所述缺陷候补区域的周边区域的纹理中的至少1个来确定所述第2基准值、所述第3值及所述第4值。
19.(修改后)根据权利要求15至18中任一项所述的图像显示装置,其中,
所述至少1个处理器根据判定员的技能、所述判定员的可信度、多个所述判定员的判断结果有无偏差、判断所需的时间中的至少1个来确定所述第2基准值、所述第3值及所述第4值。
20.(修改后)根据权利要求15所述的图像显示装置,其中,
预先对存储于所述数据库中的已判断图像赋予了所述难易度的等级值。
21.(修改后)根据权利要求15至20中任一项所述的图像显示装置,其中,
所述至少1个处理器从数据库中提取针对所述难易度分别具有不同等级值的3个以上的已判断图像,并将所述3个以上的已判断图像按照所述等级值的升序或降序进行配置而显示于所述显示器。
22.(修改后)一种图像显示方法,包括:
检验对象图像获取工序,获取拍摄到第1检验对象物的检验对象图像;
已判断图像提取工序,从数据库中提取已判断图像,所述数据库中存储有分别拍摄到与所述第1检验对象物分别不同的多个第2检验对象物且分别赋予了所述多个第2检验对象物的缺陷的判断结果的多个已判断图像;以及
显示控制工序,将所述检验对象图像及基于所提取的所述已判断图像的至少2个以上的已判断图像显示于显示器,
所述至少2个以上的已判断图像包括:所述第2检验对象物的缺陷以第1呈现方式被视觉辨认的第1已判断图像、及所述第2检验对象物的缺陷以与所述第1呈现方式不同的第2呈现方式被视觉辨认的第2已判断图像。
23.(修改后)一种程序,用于使计算机执行权利要求22所述的图像显示方法。
24.(追加)一种记录介质,为非暂时性且计算机可读取的记录介质,并且记录有权利要求23所述的程序。
说明或声明(按照条约第19条的修改)
权利要求12是基于申请时的说明书第0072-0073段记载的内容而新追加的权利要求。
权利要求13-24是将申请时的权利要求12-23的编号向下顺延而得到的。
Claims (23)
1.一种图像显示装置,具备:
至少1个处理器;及
至少1个存储器,存储用于使所述至少1个处理器执行的命令,
所述至少1个处理器进行如下处理:
获取拍摄到第1检验对象物的检验对象图像,
从数据库中提取已判断图像,所述数据库中存储有分别拍摄到与所述第1检验对象物分别不同的多个第2检验对象物且分别赋予了所述多个第2检验对象物的缺陷的判断结果的多个已判断图像,
将所述检验对象图像及基于所提取的所述已判断图像的至少2个以上的已判断图像显示于显示器,
所述至少2个以上的已判断图像包括:所述第2检验对象物的缺陷以第1呈现方式被视觉辨认的第1已判断图像、及所述第2检验对象物的缺陷以与所述第1呈现方式不同的第2呈现方式被视觉辨认且所述判断结果与所述第1已判断图像相同的第2已判断图像。
2.根据权利要求1所述的图像显示装置,其中,
所述至少1个处理器从所述数据库中提取所述第1已判断图像及所述第2已判断图像。
3.根据权利要求1所述的图像显示装置,其中,
所述至少1个处理器从所述数据库中提取所述第1已判断图像,并根据所述第1已判断图像来生成所述第2已判断图像。
4.根据权利要求1所述的图像显示装置,其中,
所述至少1个处理器根据所提取的所述已判断图像来生成所述第1已判断图像及所述第2已判断图像。
5.根据权利要求1至4中任一项所述的图像显示装置,其中,
在所述数据库中仅存储有多个拍摄到具有缺陷的所述第2检验对象物的已判断图像。
6.根据权利要求1至4中任一项所述的图像显示装置,其中,
在所述数据库中存储有多个赋予了所述第2检验对象物有无缺陷的判断结果的已判断图像,
所述第1已判断图像及所述第2已判断图像分别被赋予具有缺陷的判断结果。
7.根据权利要求1至4中任一项所述的图像显示装置,其中,
在所述数据库中存储有多个赋予了所述第2检验对象物的缺陷的种类或程度的判断结果的已判断图像,
所述第1已判断图像及所述第2已判断图像各自的缺陷的所述种类或所述程度的判断结果相同。
8.根据权利要求1至7中任一项所述的图像显示装置,其中,
所述至少1个处理器接收所述检验对象图像的关注区域,并提取包括与所接收到的所述关注区域相关联的区域的所述至少2个以上的已判断图像。
9.根据权利要求8所述的图像显示装置,其中,
所述至少1个处理器接收由使用者输入的所述关注区域、或者根据所述检验对象图像的图像分析结果获得的所述关注区域。
10.根据权利要求1至9中任一项所述的图像显示装置,其中,
所述至少1个处理器接收字符信息及数值信息中的至少1个信息,并提取与所接收到的所述字符信息及数值信息中的至少1个信息相关联的至少2个以上的已判断图像。
11.根据权利要求10所述的图像显示装置,其中,
所述至少1个处理器接收由使用者输入的所述字符信息及所述数值信息中的至少1个信息、或者根据所述检验对象图像的图像分析结果获得的所述字符信息及所述数值信息中的至少1个信息。
12.根据权利要求1至11中任一项所述的图像显示装置,其中,
在将所述检验对象图像的对比度、锐度、明度、背景的亮度及使用者所设定的独立项中的至少1个项目的显示参数设定为第1基准值时,
所述第1已判断图像针对所述至少1个项目的显示参数具有比所述第1基准值相对小且缺陷以所述第1呈现方式被视觉辨认的第1值,
所述第2已判断图像针对所述至少1个项目的显示参数具有比所述第1基准值相对大且缺陷以所述第2呈现方式被视觉辨认的第2值。
13.根据权利要求12所述的图像显示装置,其中,
所述至少1个处理器将基于所提取的所述已判断图像的至少3个以上的已判断图像按照所述至少1个项目的显示参数的值的升序或降序进行配置而显示于所述显示器。
14.根据权利要求12或13所述的图像显示装置,其中,
在将所述检验对象图像的所述使用者所设定的独立项即判断缺陷的难易度的等级设定为第2基准值时,
所述第1已判断图像针对所述判断缺陷的难易度的等级具有比所述第2基准值相对低且缺陷以所述第1呈现方式被视觉辨认的第3值,
所述第2已判断图像针对所述判断缺陷的难易度的等级具有比所述第2基准值相对高且缺陷以所述第2呈现方式被视觉辨认的第4值。
15.根据权利要求14所述的图像显示装置,其中,
所述至少1个处理器根据缺陷候补区域与所述缺陷候补区域以外的背景区域之间的亮度的对比度的值来确定所述第2基准值、所述第3值及所述第4值。
16.根据权利要求14或15所述的图像显示装置,其中,
所述至少1个处理器根据缺陷候补区域的像素值、形状及面积中的至少1个来确定所述第2基准值、所述第3值及所述第4值。
17.根据权利要求14至16中任一项所述的图像显示装置,其中,
所述至少1个处理器根据缺陷候补区域彼此的重叠方式及所述缺陷候补区域的周边区域的纹理中的至少1个来确定所述第2基准值、所述第3值及所述第4值。
18.根据权利要求14至17中任一项所述的图像显示装置,其中,
所述至少1个处理器根据判定员的技能、所述判定员的可信度、多个所述判定员的判断结果有无偏差、判断所需的时间中的至少1个来确定所述第2基准值、所述第3值及所述第4值。
19.根据权利要求14所述的图像显示装置,其中,
预先对存储于所述数据库中的已判断图像赋予了所述难易度的等级值。
20.根据权利要求14至19中任一项所述的图像显示装置,其中,
所述至少1个处理器从数据库中提取针对所述难易度分别具有不同等级值的3个以上的已判断图像,并将所述3个以上的已判断图像按照所述等级值的升序或降序进行配置而显示于所述显示器。
21.一种图像显示方法,包括:
检验对象图像获取工序,获取拍摄到第1检验对象物的检验对象图像;
已判断图像提取工序,从数据库中提取已判断图像,所述数据库中存储有分别拍摄到与所述第1检验对象物分别不同的多个第2检验对象物且分别赋予了所述多个第2检验对象物的缺陷的判断结果的多个已判断图像;以及
显示控制工序,将所述检验对象图像及基于所提取的所述已判断图像的至少2个以上的已判断图像显示于显示器,
所述至少2个以上的已判断图像包括:所述第2检验对象物的缺陷以第1呈现方式被视觉辨认的第1已判断图像、及所述第2检验对象物的缺陷以与所述第1呈现方式不同的第2呈现方式被视觉辨认的第2已判断图像。
22.一种程序,用于使计算机执行权利要求21所述的图像显示方法。
23.一种记录介质,为非暂时性且计算机可读取的记录介质,并且记录有权利要求22所述的程序。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021-031133 | 2021-02-26 | ||
JP2021031133 | 2021-02-26 | ||
PCT/JP2022/007786 WO2022181746A1 (ja) | 2021-02-26 | 2022-02-25 | 画像表示装置、画像表示方法及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116897282A true CN116897282A (zh) | 2023-10-17 |
Family
ID=83049137
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280017009.6A Pending CN116897282A (zh) | 2021-02-26 | 2022-02-25 | 图像显示装置、图像显示方法及程序 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20230401696A1 (zh) |
EP (1) | EP4300084A4 (zh) |
JP (1) | JPWO2022181746A1 (zh) |
CN (1) | CN116897282A (zh) |
WO (1) | WO2022181746A1 (zh) |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001041068A1 (fr) * | 1999-11-29 | 2001-06-07 | Olympus Optical Co., Ltd. | Systeme de detection de defaut |
JP2004078690A (ja) | 2002-08-20 | 2004-03-11 | Olympus Corp | 画像比較装置、画像比較方法および画像比較をコンピュータにて実行させるためのプログラム |
US7561753B2 (en) * | 2004-01-09 | 2009-07-14 | The Boeing Company | System and method for comparing images with different contrast levels |
JP6140255B2 (ja) * | 2015-11-13 | 2017-05-31 | 株式会社キーエンス | 画像処理装置及び画像処理方法 |
JP6612685B2 (ja) * | 2016-06-20 | 2019-11-27 | 富士フイルム株式会社 | 計測支援装置及び計測支援方法 |
BR112018076406A2 (pt) * | 2016-06-24 | 2019-04-09 | Beckman Coulter Inc | sistemas e métodos para um atlas de imagens |
JP2019053050A (ja) * | 2017-09-13 | 2019-04-04 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP2020042053A (ja) * | 2019-12-23 | 2020-03-19 | 株式会社キーエンス | 画像検査装置および画像検査方法 |
-
2022
- 2022-02-25 EP EP22759780.4A patent/EP4300084A4/en active Pending
- 2022-02-25 WO PCT/JP2022/007786 patent/WO2022181746A1/ja active Application Filing
- 2022-02-25 CN CN202280017009.6A patent/CN116897282A/zh active Pending
- 2022-02-25 JP JP2023502523A patent/JPWO2022181746A1/ja active Pending
-
2023
- 2023-08-23 US US18/454,751 patent/US20230401696A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2022181746A1 (ja) | 2022-09-01 |
US20230401696A1 (en) | 2023-12-14 |
JPWO2022181746A1 (zh) | 2022-09-01 |
EP4300084A1 (en) | 2024-01-03 |
EP4300084A4 (en) | 2024-08-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200043157A1 (en) | Inspection Apparatus, Inspection Method, And Program | |
US11176650B2 (en) | Data generation apparatus, data generation method, and data generation program | |
JP7004145B2 (ja) | 欠陥検査装置、欠陥検査方法、及びそのプログラム | |
US8139847B2 (en) | Defect inspection tool and method of parameter tuning for defect inspection tool | |
CN111539908B (zh) | 对样本的缺陷检测的方法及其系统 | |
KR102062433B1 (ko) | 결함 정량화 방법, 결함 정량화 장치 및 결함 평가값 표시 장치 | |
US8660336B2 (en) | Defect inspection system | |
JP5956814B2 (ja) | 外観検査装置、外観検査方法及びコンピュータプログラム | |
JP6767490B2 (ja) | 欠陥検査装置、欠陥検査方法、およびプログラム | |
JP6078234B2 (ja) | 荷電粒子線装置 | |
JP2019114116A (ja) | データ生成装置、データ生成方法及びデータ生成プログラム | |
JP2011214903A (ja) | 外観検査装置、外観検査用識別器の生成装置及び外観検査用識別器生成方法ならびに外観検査用識別器生成用コンピュータプログラム | |
JP6754155B1 (ja) | 教師データ生成装置、検査装置およびコンピュータプログラム | |
US11769248B2 (en) | Image processing device, image processing method, and image processing non-transitory computer readable medium for verifying detectable range of defect image | |
JPWO2020003917A1 (ja) | 欠陥表示装置及び方法 | |
KR20210024767A (ko) | 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체 | |
WO2020079694A1 (en) | Optimizing defect detection in an automatic visual inspection process | |
Mutiargo et al. | Defect detection using trainable segmentation | |
JP2018091771A (ja) | 検査方法、事前画像選別装置及び検査システム | |
CN116897282A (zh) | 图像显示装置、图像显示方法及程序 | |
WO2020053866A1 (en) | Streamlining an automatic visual inspection process | |
KR20220111214A (ko) | 인공지능 기반 제품 결함 검사 방법, 장치 및 컴퓨터 프로그램 | |
JP5374225B2 (ja) | ウェハ検査条件決定方法、ウェハ検査条件決定システム及びウェハ検査システム | |
KR102608709B1 (ko) | 하전 입자선 장치 | |
KR20220040466A (ko) | 하전 입자선 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |