CN117074411A - 图像处理设备、图像处理方法和存储介质 - Google Patents

Abstract

本发明涉及图像处理设备、图像处理方法和存储介质。该图像处理设备包括：获取单元，用于获取检验对象的摄像图像；检测单元，用于基于获取单元所获取的图像来检测一个或多于一个缺陷信息；以及控制单元，其被配置为将检测单元所检测到的缺陷信息叠加显示在以预定透射率所显示的图像上。

Description

图像处理设备、图像处理方法和存储介质

技术领域

本发明涉及图像处理设备、图像处理方法和存储介质，特别涉及用于从检验对象的拍摄图像中检测缺陷并显示所检测到的缺陷的技术。

背景技术

存在通过计算机设备对诸如混凝土结构的壁面等的检验对象的拍摄图像进行图像分析来检测诸如裂纹等的缺陷的方法。对作为图像分析的结果而获得的缺陷信息进行显示以供专家检查。日本专利6569002公开了一种方法，在该方法中，将作为图像分析的结果而获得的缺陷信息叠加显示在经过图像分析的图像上。

然而，因为在日本专利6569002中将缺陷信息简单叠加显示在经过图像分析的图像上，所以如果将小的缺陷叠加显示在该图像上，则缺陷信息的可视性降低。此外，如果缺陷信息被显示的颜色和与缺陷信息重叠的图像区域的颜色类似，则缺陷信息的可视性也降低。缺陷信息的可视性的降低可能导致专家忽略缺陷信息，并且导致没有充分地进行结构的检验。

发明内容

考虑到上述问题而做出本发明，并且与根据传统技术的缺陷信息的可视性相比，本发明实现了用于提高作为图像分析的结果而获得的、并被叠加显示在经过图像分析的图像上的缺陷信息的可视性的技术。

为了解决上述问题，本发明提供了一种图像处理设备，包括：获取部件(201)，其被配置为获取检验对象的拍摄图像；检测部件(203)，其被配置为基于所述获取部件所获取的图像来检测一个或多于一个缺陷信息；以及控制部件(101、205)，其被配置为将所述检测部件所检测到的缺陷信息叠加显示在以预定透射率所显示的图像上。

为了解决上述问题，本发明提供了一种图像处理方法，包括：用于获取检验对象的拍摄图像的步骤(S302)；用于基于所获取的图像来检测一个或多于一个缺陷信息的步骤(S304)；以及用于将所检测到的缺陷信息叠加显示在以预定透射率所显示的图像上的步骤(S306)。

为了解决上述问题，本发明提供了一种计算机可读存储介质，其存储有程序，所述程序用于使计算机执行如上所述的图像处理方法。

根据本发明，与根据传统技术的缺陷信息的可视性相比，可以提高作为图像分析的结果而获得的、并被叠加显示在经过图像分析的图像上的缺陷信息的可视性。

通过(参考附图)对以下示例性实施例的描述，本发明的进一步特征将变得明显。

附图说明

图1是示出根据第一实施例的图像处理设备的硬件配置的框图。

图2是根据第一实施例的图像处理设备的功能框图。

图3是示出根据第一实施例的图像分析处理的流程图。

图4是示出图3中的步骤S306中的用于显示图像分析的结果的处理的流程图。

图5A至图5E是示出根据第一实施例的图像分析的结果的显示的示例的图。

图6A至图6C是示出根据第一实施例的用于设置突出显示设置的GUI的示例的图。

图7是示出图3中的步骤S305中的用于根据缺陷趋势来确定图像可视透射率的处理的流程图。

图8是示出图7中的步骤S704中的用于确定图像可视透射率的处理的流程图。

图9是示出根据第一实施例的用于设置图像可视透射率的GUI的示例的图。

图10是示出根据第二实施例的用于根据缺陷趋势来确定图像可视透射率的处理的流程图。

图11是示出图10中的步骤S1007中的用于确定图像可视透射率的处理的流程图。

图12是示出根据第二实施例的用于显示图像分析的结果的处理的流程图。

图13A和图13B是示出根据第二实施例的用于设置层显示设置的GUI的示例的图。

图14是示出根据第二实施例的缺陷信息层列表的示例的图。

图15A至图15G是示出根据第二实施例的图像分析结果的显示的示例的图。

具体实施方式

在下文中，将参考附图详细描述实施例。注意，以下实施例不旨在限制所要求保护的发明的范围。在实施例中描述了多个特征，但是不限制为需要全部这样的特征的发明，并且可以适当地组合多个这样的特征。此外，在附图中，相同的附图标记被赋予相同或类似的配置，并且省略其冗余描述。

[第一实施例]

在下面，将描述将根据本发明的图像处理设备应用于用于检验诸如混凝土结构等的基础设施的计算机设备的实施例。

在第一实施例中，将描述如下示例，在该示例中，计算机设备作为图像处理设备操作，并且进行控制，使得通过对拍摄检验对象的图像而获得的分析图像进行图像分析所获得的缺陷信息被叠加显示在以预定的图像可视透射率显示的分析图像上。

注意，在本实施例中，“检验对象”是诸如高速公路、桥梁、隧道或水坝等的检验对象混凝土结构。图像处理设备使用用户所拍摄的检验对象的图像来进行用于检测诸如裂纹等的缺陷的存在/不存在以及缺陷的状态的缺陷检测处理。此外，在混凝土结构的情况下，例如，“缺陷”包括混凝土的裂纹、裂缝和剥落。除此之外，“缺陷”包括风化(盐的结晶沉积)、钢筋暴露、生锈、泄漏、滴水、腐蚀、损伤(缺损)、冷缝、沉积物和砾石穴等。

＜硬件配置＞

首先，将参考图1描述根据第一实施例的图像处理设备100的硬件配置。

图1是示出根据第一实施例的用作图像处理设备的计算机设备100的硬件配置的框图。

注意，以下描述的第一实施例以及稍后描述的第二实施例的处理可以根据需要通过使用单个计算机设备或者通过在多个计算机设备中分配功能来实现。将多个计算机设备连接以便能够彼此进行通信。

计算机设备100包括控制单元101、非易失性存储器102、工作存储器103、存储装置104、输入接口105、输出接口106、网络接口107、以及系统总线108。

控制单元101包括诸如CPU或MPU等的一体地控制整个计算机设备100的运算处理器。非易失性存储器102是用于存储控制单元101的处理器所执行的参数和程序的ROM。这里，该程序是用于执行稍后描述的第一实施例和第二实施例中的处理的程序。工作存储器103是用于临时存储从外部装置等供给的数据和程序的RAM。存储装置104是诸如硬盘或存储卡等的内置在计算机设备100中的内部装置，或者是诸如硬盘或存储卡等的可拆卸地连接到计算机设备100的外部装置。存储装置104的示例包括由半导体存储器或磁盘等构成的存储卡或硬盘等。存储装置104的示例还包括由用于向诸如CD、DVD或盘等的光盘写入数据、并且从这些光盘读取数据的盘驱动器构成的存储介质。

输入接口105接受在诸如鼠标、键盘和/或触摸面板等的输入装置109上进行的用户操作，并且将操作指令输出到控制单元101。输出接口106显示计算机设备100所处理的数据、以及从外部装置供给到诸如LCD或有机EL显示器或监视器等的输出装置110的数据。网络接口107可以通信地连接到诸如因特网或局域网(LAN)等的通信线路111。系统总线108连接计算机设备100的构成要素101至107，以便能够彼此交换数据。

在非易失性存储器102或存储装置104中，记录了作为由控制单元101执行的基本软件的操作系统(OS)以及与OS协作实现实际功能的应用。此外，在本实施例中，在非易失性存储器102或存储装置104中，存储了用于实现稍后描述的图像处理设备100从检验对象的拍摄图像中检测缺陷的图像分析处理的应用。

通过加载应用所提供的软件来实现根据本实施例的图像处理设备100的处理。注意，该应用包括用于使用图像处理设备100中所安装的OS的基本功能的软件。注意，可以是包括用于实现本实施例中的处理的软件的图像处理设备100的OS。

＜功能配置＞

接下来，将参考图2描述根据第一实施例的图像处理设备100的功能块。

图2是根据第一实施例的图像处理设备100的功能框图。

图像处理设备100包括图像获取单元201、分析参数获取单元202、图像分析单元203、缺陷信息分析单元204和分析结果显示单元205。图像处理设备100的各个功能由硬件和软件构成。注意，图像处理设备100可以被配置为各个功能单元由一个或多于一个计算机和/或服务器装置构成的系统，并且这些功能单元经由网络连接。

基于用户指定的信息，图像获取单元201获取作为检验对象的拍摄图像的分析图像。

分析参数获取单元202获取用户操作所指定的分析参数，以便对分析图像进行图像分析处理。

图像分析单元203使用分析参数获取单元202所获取的分析参数，对图像获取单元201所获取的分析图像执行图像分析处理。

缺陷信息分析单元204对图像分析单元203作为图像分析的结果所获得的缺陷信息的趋势进行分析，并且确定用于显示缺陷信息和分析图像的显示条件。

分析结果显示单元205进行如下控制，该控制用于基于缺陷信息分析单元204所确定的显示条件来显示图像获取单元201所获取的分析图像以及图像分析单元203作为图像分析的结果所获取的缺陷信息。

＜图像分析处理＞

图3是示出根据第一实施例的图像处理设备的图像分析处理的流程图。

注意，图3中的处理被作为图1中所示的图像处理设备100的控制单元101通过将存储在非易失性存储器102中的程序解压缩到工作存储器103上并执行该程序而控制构成要素、并执行图2中所示的功能的结果来实现。这类似地适用于稍后描述的图7、图8和图10至图12。

在步骤S301中，控制单元101经由输入装置109接受用于从检验对象结构的多个拍摄图像中指定分析图像的用户操作以及用于指定分析参数的用户操作。

在步骤S302中，图像获取单元201从存储装置104中读取在步骤S301中指定的分析图像，或者经由网络接口107获取分析图像。

在步骤S303中，分析参数获取单元202获取在步骤S301中指定的分析参数。

在步骤S304中，图像分析单元203使用在步骤S303中获取的分析参数对在步骤S302中获取的分析图像执行图像分析处理。

在步骤S305中，缺陷信息分析单元204对作为步骤S304中的图像分析的结果而获得的一个或多于一个缺陷信息的趋势进行分析，并且确定显示步骤S302中获取的分析图像时所要应用的图像可视透射率。稍后将参考图7详细描述用于确定图像可视透射率的处理。注意，图像可视透射率是用于指示在缺陷信息被叠加显示在分析图像上的状态下分析图像透过缺陷信息的可视性水平的值。例如，如果将仅使用具有与显示图像相同的宽度和高度并且具有0％的透明度的白色所绘制的白色图像叠加在显示图像上，则仅白色图像将是可见的并且显示图像将是完全不可见的。在这样的状态下，图像可视透射率将为0％。作为图像可视透射率是0％的情况的其他示例，还存在通过使显示图像本身100％透明来将显示图像以透明状态显示的方法。此外，图像可视透射率是30％的情况对应于在使白色图像30％透明的状态下将白色图像叠加在显示图像上的情况或者在使显示图像70％透明的状态下对图像进行显示的情况。

在步骤S306中，基于在步骤S305中确定的图像可视透射率，分析结果显示单元205对在步骤S302中获取的分析图像以及作为步骤S304中的图像分析的结果而获得的缺陷信息彼此叠加显示。

图4是示出图3中的步骤S306中的用于显示图像分析的结果的处理的流程图。

在步骤S401中，为了显示分析图像，分析结果显示单元205生成包括分析图像的分析图像层。图5A示出分析图像层的示例。在图5A的示例中，分析图像是检验对象混凝土结构的墙面的拍摄图像，并且在墙面上形成诸如裂纹等的缺陷。

在步骤S402中，分析结果显示单元205对在步骤S401中生成的分析图像层进行显示。

在步骤S403中，分析结果显示单元205判断缺陷信息突出显示设置是否有效。如果判断的结果是突出显示设置有效，则将处理前进到步骤S404，并且如果判断的结果是突出显示设置无效，则处理前进到步骤S409。此外，突出显示设置是用于在将缺陷信息叠加显示在分析图像上时使缺陷信息易于可见的设置，并且通过用户使用如图6A至图6C所示的根据本实施例的应用所提供的图形用户界面(GUI)来设置。稍后将参考图6A至图6C详细描述突出显示设置处理。

在步骤S404中，分析结果显示单元205生成用于调整分析图像的透射水平的透射率调整层。图5B示出透射率调整层的示例。例如，透射率调整层是具有与分析图像层相同大小并且仅包括白色的背景颜色的层，并且被叠加显示在分析图像层上。可以通过以这样的方式改变透射率调整层的背景颜色的透明度，来调节分析图像的透射率。

在步骤S405中，分析结果显示单元205判断是否已经通过用户操作指定了图像可视透射率。如果判断的结果是已经指定了图像可视透射率，则将处理前进到步骤S406，并且如果判断的结果是尚未指定图像可视透射率，则将处理前进到步骤S407。稍后将参考图6A至图6C描述用于指定图像可视透射率的方法。

在步骤S406中，分析结果显示单元205将用户操作所指定的图像可视透射率设置为透射率调整层的背景颜色的透明度。

在步骤S407中，分析结果显示单元205将缺陷信息分析单元204所确定的图像可视透射率设置为透射率调整层的背景颜色的透明度。

在步骤S408中，分析结果显示单元205将透射率调整层叠加显示在分析图像层上。图5C示出在分析图像层上显示透射率调整层的状态的示例。在图5C的示例中，作为透射率调整层被叠加显示在分析图像层上的结果，图像可视透射率由于半透明过滤器被应用到分析图像层中所包括的分析图像而降低。因而，通过将缺陷信息进一步叠加显示在图5C中所示的图像上，与缺陷信息被简单地叠加在分析图像上的情况相比，提高了缺陷信息的可视性。

在步骤S409中，分析结果显示单元205生成包括图像分析单元203作为图像分析的结果所获得的缺陷信息的缺陷信息层。图5D示出缺陷信息层的示例。在图5D的示例中，将裂纹信息示出为缺陷信息。此外，背景颜色是透明的。注意，尽管在图5D中的示例中使用虚线来示出裂纹信息，但是虚线用于附图中的例示以阐明与图5A中的分析图像中所包括的裂纹的差异，并且并未表示裂纹是间断的。

在步骤S410中，分析结果显示单元205将步骤S409中生成的缺陷信息层叠加显示在图5C中所示的图像上。图5E示出将缺陷信息层叠加显示在图5C中所示的图像上的状态。以这样的方式，作为缺陷信息层通过透射率调整层叠加在分析图像层上的结果，提高了缺陷信息层中所包括的缺陷信息的可视性。

接下来，将参考图6A至图6C描述图4中的步骤S403中的缺陷信息突出显示设置方法。

尽管在下面的使用根据本实施例的应用所提供的GUI来进行设置的方法中将描述示例，但是不限于此。例如，可以使用通过将设置信息的描述包括在文本文件中而获得的文件。图6A示出缺陷信息突出显示设置对话框600的示例。

突出显示设置对话框600包括缺陷信息突出显示设置复选框610、图像可视透射率指定复选框620、图像可视透射率指定滑块621、图像可视透射率指定文本框622、取消按钮630和OK按钮640。如果在缺陷信息突出显示设置复选框610中输入了复选，则突出显示设置有效。相反，如果在缺陷信息突出显示设置复选框610中未输入复选，则突出显示设置无效。用户进行图像可视透射率指定复选框620的设置以指定图像可视透射率。如果在图像可视透射率指定复选框620中输入了复选，则采用用户所指定的图像可视透射率，而不是自动调整图像可视透射率。用户使用图像可视透射率指定滑块621或图像可视透射率指定文本框622来指定图像可视透射率。使图像可视透射率指定滑块621和图像可视透射率指定文本框622的值联动，并且当一个值被改变为其他值时，另一值也被改变为相同的值。使用取消按钮630来取消处理，而无需确认在突出显示设置对话框600中改变的任何设置。当操作取消按钮630时，即使突出显示设置对话框600中的设置已经改变，也在无需确认任何改变的情况下关闭突出显示设置对话框600。使用OK按钮640来确认在突出显示设置对话框600中改变的设置。当操作OK按钮640时，如果突出显示设置对话框600中的设置已被改变，则确认改变之后的设置，并且关闭突出显示设置对话框600。注意，如果在缺陷信息突出显示设置复选框610中未输入复选，也就是说，如果突出显示设置无效，则不能指定图像可视透射率。在图6A至图6C的GUI中，例如，如图6B中所示，图像可视透射率指定复选框620、图像可视透射率指定滑块621和图像可视透射率指定文本框622无效。此外，如果在缺陷信息突出显示设置复选框610中输入了复选但在图像可视透射率指定复选框620中没有输入复选，则图像可视透射率指定滑块621和图像可视透射率指定文本框622无效。图6C示出在图像可视透射率指定复选框620中未输入复选的情况下的GUI的示例。

接下来，将参考图7描述缺陷信息分析单元204分析缺陷信息的趋势并且确定分析图像的图像可视透射率的处理。

图7是示出图3中的步骤S305中的用于根据缺陷趋势来确定图像可视透射率的处理的流程图。

在步骤S701中，缺陷信息分析单元204根据从图像获取单元201获取的分析图像的宽度和高度来计算分析图像的面积。

在步骤S702中，缺陷信息分析单元204从分析结果显示单元205获取分析结果显示单元205为了对图像分析单元203作为图像分析的结果所获得的缺陷信息进行显示所用的显示条件。此外，缺陷信息分析单元204对缺陷信息被绘制时的缺陷信息的总面积进行计算。例如，要用于显示缺陷信息的显示条件包括裂纹显示的厚度、是否填充已发生了风化的区域等。

在步骤S703中，缺陷信息分析单元204对用于指示步骤S702中计算出的缺陷信息绘制面积与步骤S701中计算出的分析图像面积的比率的缺陷信息面积比率进行计算。缺陷信息面积比率以百分比表示，并且可以通过将缺陷信息绘制面积除以分析图像面积并将商乘以100来计算。

在步骤S704中，缺陷信息分析单元204基于在步骤S703中计算出的缺陷信息面积比率来计算图像可视透射率。将参考图8详细描述用于计算图像可视透射率的处理。注意，尽管描述了将分析图像面积和缺陷信息绘制面积之间的比率用作缺陷信息的趋势的示例，但是缺陷信息的趋势不限于此。例如，可以使用缺陷信息的数量、缺陷信息的类型、缺陷信息的显示位置、缺陷信息的绘制颜色和与缺陷信息的显示位置相对应的分析图像的颜色之间的差等。

接下来，将参考图8描述图7的步骤S704中的用于确定图像可视透射率的处理。

在下面，将描述用户已经设置了3个阈值的情况的示例。注意，该3个阈值按照如下彼此相关：第一阈值大于第二阈值，并且第二阈值大于第三阈值(第一阈值＞第二阈值＞第三阈值)。

在步骤S801中，缺陷信息分析单元204判断在步骤S703中计算出的缺陷信息面积比率是否大于或等于第一阈值。如果判断的结果是缺陷信息面积比率大于或等于第一阈值，则将处理前进到步骤S804，并且如果判断的结果是缺陷信息面积比率小于第一阈值，则将处理前进到步骤S802。这里，通过用户使用图9中所示的自动设置对话框900来设置第一阈值。

图9中所示的自动设置对话框900包括用于在缺陷信息突出显示设置有效时指定图像可视透射率的上限和下限的区域、用于设置阈值的区域、取消按钮940和OK按钮950。用于指定图像可视透射率的上限和下限的区域包括图像可视透射率上限文本框910和图像可视透射率下限文本框920。

用于设置阈值的区域包括阈值列表930、阈值添加按钮934和阈值删除按钮935。阈值列表930包括用于指示用户是否选择了阈值的选择状态列931、用于指示阈值编号的阈值编号列932、以及用于指示被设置为阈值的缺陷信息面积比率的缺陷信息面积比率值列933。

在通过缺陷信息分析单元204计算出图像可视透射率的情况下，图像可视透射率上限文本框910中所设置的值以及图像可视透射率下限文本框920中所设置的值用作图像可视透射率的上限和下限。图像可视透射率的上限是图像以最高透明度显示时的上限值，并且图像可视透射率的下限是图像以最低透明度显示时的下限值。

在阈值列表930中，基于缺陷信息面积比率值列933中的值按降序排序的方式对用户所设置的阈值进行显示。如果用户想要添加阈值，则用户操作阈值添加按钮934。当操作了阈值添加按钮934时，新的记录被添加到阈值列表930中。用户可以通过将值输入到缺陷信息面积比率值列933的新添加的记录中来设置阈值。在这种情况下，阈值编号列932的值将被自动地确定为使用缺陷信息面积比率值列933中的值来进行排序的结果。具体地，在缺陷信息面积比率值列933中具有最大值的记录总是作为阈值编号1所指示的阈值。此外，第一阈值是阈值编号1所指示的阈值。因而，第一阈值在阈值中具有最大的缺陷信息面积比率值。

此外，如果用户想要删除现有阈值，则用户在向选择状态列931的相应记录中的复选框输入复选的状态下操作阈值删除按钮935。

如果已经使用阈值添加按钮934和阈值删除按钮935改变了阈值设置，则操作OK按钮950和取消按钮940以分别确认设置以及丢弃设置。

在下面，将提供用户已经设置了3个阈值的情况的描述。

在步骤S802中，缺陷信息分析单元204判断在步骤S703中计算出的缺陷信息面积比率是否大于或等于第二阈值。如果判断的结果是缺陷信息面积比率大于或等于第二阈值，则将处理前进到步骤S805，并且如果判断的结果是缺陷信息面积比率小于第二阈值，则将处理前进到步骤S803。

在步骤S803中，缺陷信息分析单元204判断在步骤S703中计算出的缺陷信息面积比率是否大于或等于第三阈值。如果判断的结果是缺陷信息面积比率大于或等于第三阈值，则将处理前进到步骤S806，并且如果判断的结果是缺陷信息面积比率小于第三阈值，则将处理前进到步骤S807。

在步骤S804中，缺陷信息分析单元204将图像可视透射率设置为与图像可视透射率上限文本框910中所设置的上限值相同的值。因为在图9中的示例中指定了100％，所以将图像可视透射率设置为100％。

在步骤S805中，缺陷信息分析单元204计算如下的值作为调整值，该值是通过从图像可视透射率上限文本框910中所设置的上限值中减去图像可视透射率下限文本框920中所设置的下限值、并将差除以阈值总数而获得的值。然后，缺陷信息分析单元204确定用于指示从上限值中减去调整值的次数的减法计数。减法计数是通过从步骤S802的判断中所使用的阈值的阈值编号中减去1而获得的数量。最后，缺陷信息分析单元204将通过将从上限值中减去调整值进行了与减法计数相对应的次数而获得的值设置为图像可视透射率。在图9的示例中，因为上限值是100％、下限值是40％、以及阈值总数是3，所以将上限值和下限值之间的差(60％)除以3，并且将调整值计算为20％。此外，因为在步骤S802的判断中使用的阈值的阈值编号是2，所以通过从2减去1来将减法计数计算为1。因此，将作为从100％上限值减去20％调整值一次的结果而获得的80％设置为图像可视透射率。

在步骤S806中，缺陷信息分析单元204以与步骤S805类似的方式计算调整值，并且基于在步骤S803中的判断中使用的阈值的阈值编号来计算图像可视透射率。在图9中的示例中，将调整值计算为与在步骤S805中计算出的值相同的20％，并且因为在步骤S803中的判断中使用的阈值的阈值编号是3，所以通过从3减去1来将减法计数计算为2。因此，将作为从100％上限值减去20％调整值两次的结果而获得的60％设置为图像可视透射率。

在步骤S807中，缺陷信息分析单元204将图像可视透射率设置为与图像可视透射率下限文本框920中所设置的下限值相同的值。

如上所述，根据第一实施例，在将缺陷信息叠加显示在分析图像上时，通过将缺陷信息的背景中的分析图像的图像可视透射率设置为低于100％，可以相对提高缺陷信息的可视性。此外，通过根据作为图像分析的结果而获得的缺陷信息的趋势来改变分析图像的图像可视透射率的值，可以在用户更可能忽略缺陷信息的状况下将图像可视透射率设置得更低。因此，能够降低专家忽略缺陷信息的可能性、以及没有充分地进行结构的检验的可能性。

[第二实施例]

根据第二实施例的图像处理设备具有与图1中的硬件结构类似的硬件结构，并且具有在图2的配置中的缺陷信息分析单元204和分析结果显示单元205的功能方面有所不同的功能配置。

首先，将参考图10描述缺陷信息分析单元204分析缺陷信息的趋势并确定图像可视透射率的处理。

图10是示出图3中的步骤S305中的用于根据缺陷趋势来确定图像可视透射率的处理的流程图。

在步骤S1001中，缺陷信息分析单元204根据从图像获取单元201获取的分析图像的宽度和高度来计算分析图像的面积。

在步骤S1002中，缺陷信息分析单元204根据缺陷信息项的特性将图像分析单元203作为图像分析的结果所获得的缺陷信息进行分组。注意，例如，缺陷信息的特性是诸如裂纹和风化等的缺陷信息的类型、缺陷信息的面积、或显示缺陷信息的坐标等。此外，也可以使用与缺陷信息的特定类型相对应的特性。例如，如果缺陷信息包括裂纹，则可以使用裂纹的宽度、长度、形状等作为特性。此外，如果在改变分析参数时已经多次执行图像分析处理，则可以使用分析参数作为缺陷信息的特性。

在步骤S1003中，缺陷信息分析单元204将用于对步骤S1002中所生成的组进行计数的组计数器i设置为0。

在步骤S1004中，缺陷信息分析单元204判断组计数器i的值是否小于在步骤S1002中进行分组得到的组的数量。如果判断的结果是组计数器i小于组的数量，则将处理前进到步骤S1005，并且如果判断的结果是组计数器i大于或等于组的数量，则处理终止。

在步骤S1005中，缺陷信息分析单元204从分析结果显示单元205获取分析结果显示单元205为了显示组i中所包括的缺陷信息所要使用的显示条件，其中，组i指示步骤S1002中进行分组得到的组中的第i组(i是组计数器值)。此外，缺陷信息分析单元204对缺陷信息被绘制时的缺陷信息的总面积进行计算。例如，要用于显示缺陷信息的显示条件包括裂纹显示的厚度、是否填充已发生了风化的区域等。

在步骤S1006中，缺陷信息分析单元204对用于指示步骤S1005中计算出的组i中所包括的缺陷信息的面积与步骤S1001中计算出的分析图像面积的比率的缺陷信息面积比率进行计算。缺陷信息面积比率以百分比表示，并且可以通过将缺陷信息绘制面积除以分析图像面积并将商乘以100来计算。

在步骤S1007中，缺陷信息分析单元204基于在步骤S1006中计算出的组i的面积比率来计算组i的图像可视透射率。稍后将参考图11详细描述用于计算单个组的图像可视透射率的处理。注意，尽管已经描述了使用缺陷信息绘制面积与分析图像面积的比率作为缺陷信息的趋势的示例，但是缺陷信息的趋势不限于此。例如，可以使用缺陷信息的数量、缺陷信息的类型、缺陷信息的显示位置、缺陷信息的绘制颜色和与缺陷信息的显示位置相对应的分析图像的颜色之间的差等。

在步骤S1008中，缺陷信息分析单元204将组计数器i递增1，并且处理前进到步骤S1004。

接下来，将参考图11描述图10的步骤S1007中的用于确定各个缺陷信息组的图像可视透射率的处理。

尽管将参考图11描述针对一个缺陷信息组的处理，但是如果存在多个缺陷信息组，则图11中的处理将被重复与缺陷信息组的数量相对应的次数。此外，以下将提供对已经由用户设置了两个阈值的情况的描述。注意，该两个阈值按照如下彼此相关：第一阈值大于第二阈值(第一阈值＞第二阈值)。

在步骤S1101中，缺陷信息分析单元204判断步骤S1006中计算出的缺陷信息组的缺陷信息面积比率是否大于或等于第一阈值。如果判断的结果是缺陷信息面积比率大于或等于第一阈值，则将处理前进到步骤S1103，并且如果判断的结果是缺陷信息面积比率小于第一阈值，则将处理前进到步骤S1102。这里，通过用户使用图9中所示的自动设置对话框900来设置第一阈值。

在步骤S1102中，缺陷信息分析单元204判断步骤S1006中计算出的缺陷信息组的缺陷信息面积比率是否大于或等于第二阈值。如果判断的结果是缺陷信息面积比率大于或等于第二阈值，则将处理前进到步骤S1104，并且如果判断的结果是缺陷信息面积比率小于第二阈值，则将处理前进到步骤S1105。

在步骤S1103中，缺陷信息分析单元204将缺陷信息组的图像可视透射率设置为与图像可视透射率上限文本框910中所设置的上限值相同的值。因为在图9中的示例中指定了100％，所以将缺陷信息组的图像可视透射率设置为100％。在图像可视透射率是100％时，在将缺陷信息叠加显示在分析图像上的情况下，分析图像以透过缺陷信息完全可见的方式显示。这与将缺陷信息简单叠加显示在分析图像上的情况等同。

在步骤S1104中，缺陷信息分析单元204计算如下的值作为调整值，该值是通过从图像可视透射率上限文本框910中所设置的上限值中减去图像可视透射率下限文本框920中所设置的下限值、并将差除以阈值总数而获得的值。然后，缺陷信息分析单元204确定用于指示从上限值中减去调整值的次数的减法计数。减法计数是通过从步骤S1102的判断中所使用的阈值的阈值编号中减去1而获得的数量。最后，缺陷信息分析单元204通过将从上限值中减去调整值进行了与减法计数相对应的次数来设置图像可视透射率。在图9的示例中，因为上限值是100％、下限值是40％、以及阈值总数是2，所以将上限值和下限值之间的差(60％)除以2，并且将调整值计算为30％。此外，因为步骤S1102的判断中使用的阈值的阈值编号为2，所以通过从2中减去1来将减法计数计算为1。因此，将作为从100％上限值中减去30％调整值一次的结果而获得的70％设置为缺陷信息组的图像可视透射率。

在步骤S1105中，缺陷信息分析单元204将缺陷信息组的图像可视透射率设置为与图像可视透射率下限文本框920中所设置的下限值相同的值。

接下来，将参考图12描述用于将分析图像和作为图像分析结果而获得的缺陷信息彼此叠加显示的处理。

在步骤S1201中，为了显示分析图像，分析结果显示单元205生成包括分析图像的分析图像层。

在步骤S1202中，分析结果显示单元205显示步骤S1201中生成的分析图像层。

在步骤S1203中，分析结果显示单元205判断缺陷信息突出显示设置是否有效。如果判断的结果是突出显示设置有效，则将处理前进到步骤S1207，并且如果判断的结果是突出显示设置无效，则将处理前进到步骤S1204。注意，例如，通过用户使用如图13A和图13B所示的根据本实施例的应用所提供的GUI来设置突出显示设置。稍后将参考图13A和图13B详细描述突出显示设置处理。

在步骤S1204中，分析结果显示单元205生成包括图像分析单元203作为图像分析的结果所获得的所有缺陷信息的所有缺陷信息层。

在步骤S1205中，分析结果显示单元205将步骤S1204中生成的所有缺陷信息层的背景颜色的透明度设置为100％。因此，所有缺陷信息层的背景颜色变成透明的。

在步骤S1206中，分析结果显示单元205将步骤S1204中生成的并在步骤S1205中配置的所有缺陷信息层叠加显示在分析图像层上。在该情况下，因为所有缺陷信息层的背景颜色的透明度为100％，所以将缺陷信息简单叠加显示在分析图像上，并且在不突出显示缺陷信息的状态下进行显示。

在步骤S1207中，分析结果显示单元205判断缺陷信息层显示设置是否有效。如果判断的结果是缺陷信息层显示设置有效，则将处理前进到步骤S1211，并且如果判断的结果是缺陷信息层显示设置无效，则将处理前进到步骤S1208。注意，例如，通过用户使用如图13A和图13B中所示的GUI来设置缺陷信息层显示设置。稍后将参考图13A和图13B详细描述缺陷信息层显示设置方法。

在步骤S1208中，分析结果显示单元205生成包括图像分析单元203作为图像分析的结果所获得的所有缺陷信息的所有缺陷信息层。

在步骤S1209中，分析结果显示单元205将如参考图7所述使用所有缺陷信息计算出的图像可视透射率设置为所有缺陷信息层的背景颜色的透明度，而不是如参考图10所述对缺陷信息进行分组。

在步骤S1210中，分析结果显示单元205将步骤S1208中生成的并在步骤S1209中配置的所有缺陷信息层叠加显示在分析图像层上。因此，由于分析图像被显示成具有在不对缺陷信息进行分组的情况下根据所有缺陷信息的趋势所确定的图像可视透射率，因而如第一实施例所述，缺陷信息以相对突出显示的方式进行显示，并且可以降低专家忽略缺陷信息的可能性、以及没有充分地进行结构的检验的可能性。

在步骤S1211中，分析结果显示单元205针对图10中所述的各个缺陷信息组生成缺陷信息组层。

在步骤S1212中，分析结果显示单元205将针对缺陷信息组层中所包括的各个缺陷信息组所计算出的图像可视透射率中的相应图像可视透射率设置为各个缺陷信息组层的背景颜色的透明度。

在步骤S1213中，分析结果显示单元205将步骤S1212中生成的一个或多于一个缺陷信息组层叠加显示在分析图像层上，使得具有更高优先级的层被配置在更高位置。稍后将参考图14和图15A至图15G描述用于以叠加状态显示缺陷信息组层的处理。使用将缺陷信息分组时所使用的指标作为评价值来确定层的优先级。例如，如果使用层中所包括的缺陷信息在被显示时所占据的面积作为分组指标，则对于包括被显示时占据更大面积的缺陷信息的层，将优先级设置得更高。除此之外，如果基于裂纹宽度来进行分组，则对于包括更宽裂纹的层，将优先级设置得更高。注意，用于确定优先级的这些指标仅是示例，并且不限于这些指标。

接下来，将参考图13A和图13B描述缺陷信息层突出显示设置方法。注意，尽管在下面将描述使用GUI来进行设置的示例，但不限于此。例如，可以使用通过将设置信息的描述包括在文本文件中而获得的文件。

图13A示出缺陷信息层突出显示设置对话框1300的示例。缺陷信息层突出显示设置对话框1300包括缺陷信息突出显示设置复选框1310、缺陷信息层显示设置复选框1320、取消按钮1330和OK按钮1340。如果在缺陷信息突出显示设置复选框1310中输入了复选，则突出显示设置有效。相反，如果在缺陷信息突出显示设置复选框1310中未输入复选，则突出显示设置无效。进行缺陷信息层显示设置复选框1320的设置以显示针对各个缺陷信息进行分组的层。如果在缺陷信息层显示设置复选框1320中输入了复选，则层显示设置有效。相反，如果在缺陷信息层显示设置复选框1320中未输入复选，则层显示设置无效。使用取消按钮1330来取消处理，而无需确认在缺陷信息层突出显示设置对话框1300中改变的任何设置。当操作取消按钮1330时，即使已经改变缺陷信息层突出显示设置对话框1300中的设置，也在无需确认任何改变的情况下关闭缺陷信息层突出显示设置对话框1300。使用OK按钮1340来确认在缺陷信息层突出显示设置对话框1300中改变的设置。当操作OK按钮1340时，如果已经改变缺陷信息层突出显示设置对话框1300中的设置，则确认改变之后的设置，并且关闭缺陷信息层突出显示设置对话框1300。注意，如果在缺陷信息突出显示设置复选框1310中没有输入复选，也就是说，如果突出显示设置无效，则不能设置层显示设置。在GUI中，例如如图13B所示，缺陷信息层显示设置复选框1320无效。

接下来，将参考图14和图15A至图15G描述缺陷信息组层被叠加显示在分析图像上的示例。

图14示出缺陷信息层列表1400的示例。在图14的示例中，缺陷信息层列表1400包括4个层，并且将缺陷信息层1、缺陷信息层2、缺陷信息层3和分析图像层N分别配置在记录1410、1420、1430和1440中。缺陷信息层1、缺陷信息层2和缺陷信息层3各自包括裂纹作为缺陷信息的类型，并且缺陷信息层1、缺陷信息层2和缺陷信息层3是包括基于裂纹宽度而进行分组的缺陷信息的层。此外，将包括较宽裂纹的层设置为具有较高优先级的层。图15A示出分析图像层的示例。图15B示出缺陷信息层1的示例。图15C示出缺陷信息层2的示例。图15D示出缺陷信息层3的示例。

图15E示出缺陷信息层中具有最低优先级的缺陷信息层3被叠加显示在分析图像层上的示例。根据图14所示的缺陷信息层列表1400的记录1430，根据缺陷信息层3中所包括的缺陷信息组而计算出的图像可视透射率是80％。因此，将图15E中的分析图像以80％的图像可视透射率显示。图15F示出具有缺陷信息层3之后的次低优先级的缺陷信息层2被叠加显示在图15E中的分析图像上的状态的示例。根据图14所示的缺陷信息层列表1400的记录1420，根据缺陷信息层2中所包括的缺陷信息组而计算出的图像可视透射率是60％。因此，图15F中的分析图像是在分析图像受到缺陷信息层3的80％的图像可视透射率以及缺陷信息层2的60％的图像可视透射率影响的状态下显示的。具体地，将分析图像以通过将60％的图像可视透射率和80％的图像可视透射率相乘而获得的48％的图像可视透射率显示。此外，缺陷信息层3中所包括的缺陷信息也受到缺陷信息层2的影响，并且以60％的图像可视透射率显示。由此，不仅构成背景的分析图像，而且具有低优先级的缺陷信息也以过滤的状态显示；因此，可以迅速发现具有高优先级的缺陷信息。图15G示出具有缺陷信息层2之后的次低优先级的缺陷信息层1被叠加显示在图15F中所显示的状态上的状态的示例。图15G中的分析图像是在分析图像受到缺陷信息层3的80％的图像可视透射率、缺陷信息层2的60％的图像可视透射率、以及缺陷信息层1的80％的图像可视透射率影响的状态下显示的。具体地，将分析图像以通过将80％的图像可视透射率、60％的图像可视透射率和80％的图像可视透射率相乘而获得的38％的图像可视透射率显示。此外，如图15F中的情况那样，缺陷信息层中所包括的缺陷信息也受到叠加显示在其上的缺陷信息层的影响。具体地，将缺陷信息层3中所包括的缺陷信息以48％的图像可视透射率显示，并且将缺陷信息层2中所包括的缺陷信息以80％的图像可视透射率显示。因为不存在被叠加显示在缺陷信息层1中包括的缺陷信息上的层，所以缺陷信息层1中所包括的缺陷信息不受特别影响，并且以100％的图像可视透射率显示，或者换句话说，以未过滤状态显示。

根据第二实施例，可以通过将构成背景的分析图像的图像可视透射率设置为低于100％来相对提高缺陷信息的可视性，此外，如上所述，更高重要性的缺陷信息可以以相对突出显示的方式显示。因此，可以降低专家忽略缺陷信息的可能性以及没有充分地进行结构的检验的可能性。

其他实施例

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。

尽管参考示例性实施例描述了本发明，但是应当理解，本发明不限于所公开的示例性实施例。所附权利要求书的范围应符合最广泛的解释，以涵盖所有这样的修改以及等同的结构和功能。

Claims (18)

1.一种图像处理设备，包括：

获取部件(201)，其被配置为获取检验对象的拍摄图像；

检测部件(203)，其被配置为基于所述获取部件所获取的图像来检测一个或多于一个缺陷信息；以及

控制部件(101、205)，其被配置为将所述检测部件所检测到的缺陷信息叠加显示在以预定透射率所显示的图像上。

2.根据权利要求1所述的图像处理设备，还包括：

确定部件(204)，其被配置为基于所述检测部件所检测到的缺陷信息的趋势来确定所述预定透射率，

其中，所述控制部件将所述检测部件所检测到的缺陷信息叠加显示在以所述确定部件所确定的预定透射率所显示的图像上。

3.根据权利要求2所述的图像处理设备，

其中，所述控制部件：

生成包括所述图像的第一层；

生成设置了所述预定透射率的第二层；

生成包括所述缺陷信息的第三层；以及

将所述第一层、所述第二层和所述第三层彼此叠加显示，或者将所述第一层和所述第三层彼此叠加显示。

4.根据权利要求3所述的图像处理设备，

其中，所述控制部件：

判断用于以突出显示的状态显示所述缺陷信息的第一设置是否有效，并且在所述第一设置有效的情况下，生成所述第二层；

在所述第一设置无效的情况下，生成所述第三层而不生成所述第二层；以及

将所述第一层、所述第二层和所述第三层彼此叠加显示，或者将所述第一层和所述第三层彼此叠加显示。

5.根据权利要求4所述的图像处理设备，还包括：

第一设置部件(610)，其被配置为使所述第一设置有效或无效；以及

第二设置部件(620)，其被配置为设置所述图像的透射率，

其中，所述控制部件将所述第二层的预定透射率设置为使用所述第二设置部件所设置的透射率。

6.根据权利要求2至4中任一项所述的图像处理设备，

其中，所述缺陷信息的趋势是所述缺陷信息的面积与所述图像的面积的比率，以及

所述控制部件：

在所述比率大于或等于第一阈值的情况下，将所述预定透射率设置为上限；

在所述比率大于或等于第二阈值或第三阈值的情况下，将所述预定透射率设置在所述上限和下限之间，所述第二阈值和所述第三阈值小于所述第一阈值；以及

在所述比率小于所述第三阈值的情况下，将所述预定透射率设置为所述下限。

7.根据权利要求6所述的图像处理设备，还包括：

第三设置部件(910、920、930)，其被配置为设置所述预定透射率的上限和下限、以及所述第一阈值、所述第二阈值和所述第三阈值。

8.根据权利要求2所述的图像处理设备，

其中，所述确定部件根据所述缺陷信息的特性来将所述检测部件所检测到的缺陷信息分组为一个或多于一个组，并且确定所述缺陷信息的各个组的透射率。

9.根据权利要求8所述的图像处理设备，

其中，所述控制部件：

生成包括所述图像的第一层；

针对所述缺陷信息的各个组，生成设置了所述透射率的第二层；以及

将所述第一层和所述第二层彼此叠加显示。

10.根据权利要求9所述的图像处理设备，

其中，所述控制部件：

判断用于以突出显示的状态显示所述缺陷信息的第一设置是否有效，并且在所述第一设置有效以及用于针对所述缺陷信息的各个组显示层的第二设置有效的情况下，生成所述第二层；

在所述第一设置有效并且所述第二设置无效的情况下，或者在所述第一设置无效的情况下，生成包括所有缺陷信息并设置了所述预定透射率的第三层；以及

将所述第一层和所述第二层彼此叠加显示，或者将所述第一层和所述第三层彼此叠加显示。

11.根据权利要求10所述的图像处理设备，还包括：

第一设置部件(1310)，其被配置为使所述第一设置有效或无效；以及

第二设置部件(1320)，其被配置为使所述第二设置有效或无效。

12.根据权利要求9所述的图像处理设备，

其中，所述控制部件基于所述缺陷信息的各个组的趋势，来针对所述缺陷信息的该组设置所述第二层的透射率。

13.根据权利要求12所述的图像处理设备，

其中，所述缺陷信息的组的趋势是所述缺陷信息的该组的面积与所述图像的面积的比率，以及

所述控制部件：

在所述比率大于或等于第一阈值的情况下，将所述第二层的透射率设置为上限；

在所述比率大于或等于第二阈值的情况下，将所述第二层的透射率设置在所述上限和下限之间，所述第二阈值小于所述第一阈值；以及

在所述比率小于所述第二阈值的情况下，将所述第二层的透射率设置为所述下限。

14.根据权利要求13所述的图像处理设备，还包括：

第三设置部件(910、920、930)，其被配置为设置所述第二层的透射率的上限和下限、以及所述第一阈值和所述第二阈值。

15.根据权利要求10所述的图像处理设备，

其中，所述第三层的预定透射率是基于所有缺陷信息的面积与所述图像的面积的比率来确定的。

16.根据权利要求8至15中任一项所述的图像处理设备，

其中，所述控制部件基于所述缺陷信息的特性来确定所述缺陷信息的各个组的层的优先级，并且进行控制使得将具有更高优先级的层配置在更高的位置。

17.一种图像处理方法，包括：

用于获取检验对象的拍摄图像的步骤(S302)；

用于基于所获取的图像来检测一个或多于一个缺陷信息的步骤(S304)；以及

用于将所检测到的缺陷信息叠加显示在以预定透射率所显示的图像上的步骤(S306)。

18.一种计算机可读存储介质，其存储有程序，所述程序用于使计算机执行根据权利要求17所述的图像处理方法。