CN110473170B - 一种适用于pcb板真假缺陷判定的人工智能检测方法 - Google Patents

Abstract

本发明涉及一种适用于PCB板真假缺陷判定的人工智能检测方法，包括如下步骤：①、构建AI模型，通过人工智能深度学习的方法构建按照缺陷进行分类的AI模型；②、人工智能检测，将AOI或AVI检测的缺陷图片传输到已训练好的AI模型，根据已训练好的AI模型计算传输过来的缺陷图片数据，判断真假缺陷及缺陷类型，并且将判断的真缺陷进行归类；③、结果反馈，将归类后的真缺陷进行统计，并且以信息反馈的方式输出表达出来，并反馈到客户端；客户端可针对统计报表内容优化对应前制程产品制程和品质，并可根据不同料号对应报表内容形成可追溯数据及分类问题图片，从而达成品质问题数据化可追溯。

Description

一种适用于PCB板真假缺陷判定的人工智能检测方法

技术领域

本发明涉及PCB板的检测领域，尤其涉及一种适用于PCB板真假缺陷判定的人工智能检测方法。

背景技术

目前PCB行业大多采用AOI（外观检查机）和AVI（光学线路检查机）进行检测，但是采用上述检测方法进行检测时，存在很多问题，仅仅对规则性模板比对缺陷（重复、缺失）检测准确，还会因偏位等问题有较大准确性偏差，对于非规则性缺陷，如开路，短路，残铜，缺口，偏孔，氧化，毛边，锡粉，锡渣，塞孔，擦花，绿油等上百种检测容易出现较大量假缺陷的情况，因此需要人工频繁复检进行缺陷核实，导致效率低下，基于这种情况，引入了AI（人工智能）对AOI和AVI检测的假缺陷进行再次判定，可以极大的提高缺陷检出准确率，大量去除AOI和AVI检出真假点图片集中混入的假点，进而提高整个检测准确性、大幅提升生产效率；但是现有的人工智能检测判定真假缺陷仍旧存在一定的缺陷，经过人工智能检测判定后，输出的信号只有真缺陷还是假缺陷，无法根据检测结果进行分析优化产品制成和品质，无法达成品质问题分类统计数据化可追溯。

发明内容

本发明的目的是提供一种适用于PCB板真假缺陷判定的人工智能检测方法，经过AI人工智能利用系统产出的大数据进行分析并可输出真缺陷问题统计报表，客户端可针对统计报表内容优化对应前制程产品制程和品质，并可根据不同料号对应报表内容形成可追溯数据及分类问题图片，从而达成品质问题数据化可追溯。

为了实现以上目的，本发明采用的技术方案为：一种适用于PCB板真假缺陷判定的人工智能检测方法，包括如下步骤：

①、构建和训练AI模型，通过人工智能深度学习的方法训练出按照缺陷进行分类的AI模型；

②、人工智能检测，将AOI或AVI检测的缺陷图片传输到已训练好的AI模型，根据已训练好的AI模型计算传输过来的缺陷图片数据，判断真假缺陷及缺陷类型，并且将判断的真缺陷进行归类；

③、结果反馈，将归类后的真缺陷进行统计，并且以信息反馈的方式表达出来，并反馈到客户端。

优选的，步骤③中的信息反馈方式包括但不限于表格信息、柱状图信息和扇形图信息形式。

优选的，步骤①构建和训练AI模型包括如下步骤，1）、将用于AI模型训练的缺陷PCB板制作成标注图片，形成训练图片集，并按照一个训练图片不少于一个标签进行标注，在进行标签标注时，按照缺陷的类别进行分类，并形成训练数据库；2）、从训练数据库中选取对应标准的缺陷数据，构成人工智能检测的模型训练集；3）、将模型训练集传给AI模型进行训练，并生成该标准的AI模型，存入模型数据库以供调用。

优选的，步骤1）中，训练图片制作时，第一步先将有缺陷的PCB板制作成标注图片，第二步在图片中将缺陷部分用方框或圆框进行框定，并配上对应的标签进行标注，第三步采用包括但不限于XML、JSON、CSV的格式保存已标定的图片标注的图片像素信息，标定方框四个坐标位置信息或标定圆框中心坐标位置信息，缺陷类型信息，以及对应图片所在的路径信息，得到标签文件，第四步，将标签文件名前缀与图片文件名前缀一一对应，完成训练数据制作。

优选的，步骤1）中，将标签按照缺陷类别分类后，针对同一个类别的不同缺陷等级再次进行分级标定。

本发明的有益效果为：

1、经过AI人工智能利用系统产出的大数据进行分析并可输出真缺陷问题统计报表，客户端可针对统计报表内容优化对应前制程产品制程和品质，并可根据不同料号对应报表内容形成可追溯数据及分类问题图片，从而达成品质问题数据化可追溯；

2、训练数据库由多个训练数据组构成，在使用时，可以选择不同级别或分类的数据组作为训练数据，以训练出满足不同需求的AI模型，如此可以适用不同客户不同标准的人工智能分级检测需求，降低训练数据制作的工作量；

3、在PCB板缺陷检测的时候，小缺陷很多，小缺陷占图片的比例有的很小，当前PCB板按照卷积神经网络直接分类的方法，不对目标进行框定，会造成非常高的缺陷漏失率和误判率，而申请文件对目标进行框定，可以降低缺陷漏失率和误判率；

4、在缺陷分类后，在对缺陷进行分级，如毛刺可以跟毛刺等级进行划分，如此可以更好的适应不同厂家需求，构建出适应性更广的人工智能模型数据库。

具体实施方式

为了使本领域技术人员更好地理解本发明的技术方案，下面对本发明进行详细描述，本部分的描述仅是示范性和解释性，不应对本发明的保护范围有任何的限制作用。

首先构建人工智能检测模型数据库，具体步骤如下：

1、训练图片和标签制作，第一步先将AVI、AOI设备检测后输出有真缺陷的PCB板制作成图片，第二步在图片中将缺陷部分用方框、圆形进行框定标注，并配上对应的标签分类分级进行标定，第三步采用包括但不限于XML、JSON、CSV的格式保存已标定图片标注的图片像素信息，标定方框四个坐标位置信息或圆形标定信息，缺陷类型信息，以及对应图片所在的路径信息,得到标签文件，第四步，将标签文件名前缀与图片文件名前缀一一对应，完成训练数据的制做；

2、选择能满足不同客户需求的训练图片和标签传给AI模型进行训练，并将多个AI模型集合一个模型数据库；标签文件包含训练图片所在目录名称(如train_images文件夹)、该标签文件对应训练图片名称(如缺陷.jpg)、训练图片路径(如C:\Users\admin\Desktop\train_images\缺陷.jpg)、图片像素信息(如宽400，高400，位深度3)、缺陷种类名(可用任意英文字母表示缺陷种类比如可以用S表示短路，N可以表示缺口) 、标定框左上角坐标位置(如x:142,y:118）、标定框的长和宽(如w:179，h:160)。

在进行分组分类的过程中，可以有多种划分方式，比如是硬性要求缺陷和非硬性要求缺陷，讲硬性要求缺陷统一划为一个分类组，将非硬性要求缺陷单独分组和分级，如可可以更好的起到分组分类训练数据库的构建。

实施例1

甲客户仅对开路、短路、残铜、缺口和偏孔缺陷有标准要求，针对于甲客户，一种适用于PCB板真假缺陷判定的人工智能检测方法，包括如下步骤：

①、构建AI模型，将训练数据库中关于开路、短路、残铜、缺口、偏孔和氧化的数据调出并使之集合，形成甲客户的训练数据, 将训练数据传给AI模型进行训练，并训练出适用于甲客户的人工智能检测AI模型；

②、人工智能检测，将AOI或AVI检测的缺陷图片传输到已训练好的适用于甲客户的AI模型，根据该AI模型计算传输过来的缺陷图片数据，判断真假缺陷及缺陷类型，并且将判断的真缺陷按照开路、短路、残铜、缺口和偏孔进行归类；

③、结果反馈，将归类后的真缺陷进行统计，以表格的方式显现，并将表格反馈到客户端。

客户端可针对统计表格内容优化对应前制程产品制程和品质，并可根据不同料号对应报表内容形成可追溯数据及分类问题图片，从而达成品质问题数据化可追溯。

实施例2

乙客户仅对开路、短路、残铜、缺口、氧化、锡渣、塞孔和擦花缺陷有标准要求，针对于乙客户，一种适用于PCB板真假缺陷判定的人工智能检测方法，包括如下步骤：

①、构建AI模型，将训练数据库中关于开路、短路、残铜、缺口、锡渣、塞孔和擦花的数据调出并使之集合，形成甲客户的训练数据，将训练数据传给AI模型进行训练，训练出适用于乙客户的人工智能检测AI模型；

②、人工智能检测，将AOI或AVI检测的缺陷图片传输到已训练好的适用于乙客户的AI模型，根据该AI模型计算传输过来的缺陷图片数据，判断真假缺陷及缺陷类型，并且将判断的真缺陷按照开路、短路、残铜、缺口、氧化、锡渣、塞孔和擦花缺陷进行归类；

③、结果反馈，将归类后的真缺陷进行统计，以柱状图的方式显现，并将表格反馈到客户端。

客户端可针对统计柱状图内容优化对应前制程产品制程和品质，并可根据不同料号对应报表内容形成可追溯数据及分类问题图片，从而达成品质问题数据化可追溯。

实施例3

丙客户仅对开路、短路、残铜、缺口、和毛边缺陷达到3级以上的缺陷有标准要求，针对于丙客户，一种适用于PCB板真假缺陷判定的人工智能检测方法，包括如下步骤：

①、构建AI模型，将训练数据库中关于开路、短路、残铜、缺口、和毛刺缺陷达到3级以上的缺陷调出并使之集合，形成丙客户的训练数据，将训练数据传给AI模型进行训练，训练出适用于丙客户的人工智能检测AI模型；

②、人工智能检测，将AOI或AVI检测的缺陷图片传输到已训练好的适用于丙客户的AI模型，根据该AI模型计算传输过来的缺陷图片数据，判断真假缺陷，并且将判断的真缺陷按照开路、短路、残铜、缺口、和毛边进行归类，同时将同一类别中的不同缺陷等级进行分级；

③、结果反馈，将归类后的真缺陷类别及等级进行统计，以扇形图显示缺陷分类信息，以表格显示每个类别中不同等级对应的数量信息，

客户端可针对统计扇形图和表格内容优化对应前制程产品制程和品质，并可根据不同料号对应报表内容形成可追溯数据及分类问题图片，从而达成品质问题数据化可追溯。

实施例4

丁客户仅对开路、短路、残铜、缺口、毛边、锡粉达到5级以上、锡渣、塞孔达到2及以上和擦花的缺陷有标准要求，针对于丁客户，一种适用于PCB板真假缺陷判定的人工智能检测方法，包括如下步骤：

①、构建AI模型，将训练数据库中关于开路、短路、残铜、缺口、毛边、锡粉达到5级以上、锡渣、塞孔达到2及以上和擦花的缺陷的缺陷调出并使之集合，形成丁客户的训练数据，将训练数据传给AI模型进行训练，训练出适用于丁客户的人工智能检测AI模型；

②、人工智能检测，将AOI或AVI检测的缺陷图片传输到已训练好的适用于丁客户的AI模型，根据该AI模型计算传输过来的缺陷图片数据，判断真假缺陷，并且将判断的真缺陷按照开路、短路、残铜、缺口、毛边、锡粉、锡渣、塞孔和擦花进行归类，同时将同一类别中的不同缺陷等级进行分级；

③、结果反馈，将归类后的真缺陷类别及等级进行统计，以柱状图显示缺陷分类信息，以扇形图显示每个类别中不同等级对应的数量信息，

客户端可针对统计柱状图和扇形图内容优化对应前制程产品制程和品质，并可根据不同料号对应报表内容形成可追溯数据及分类问题图片，从而达成品质问题数据化可追溯。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。

本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实例的说明只是用于帮助理解本发明的方法及其核心思想，以上所述仅是本发明的优选实施方式，应当指出，由于文字表达的有限性，而客观上存在无限的具体结构，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进、润饰或变化，也可以将上述技术特征以适当的方式进行组合；这些改进润饰、变化或组合，或未经改进将发明的构思和技术方案直接应用于其它场合的，均应视为本发明的保护范围。

Claims (2)

1.一种适用于PCB板真假缺陷判定的人工智能检测方法，其特征在于，包括如下步骤：

①、构建和训练AI模型，通过人工智能深度学习的方法训练出按照缺陷进行分类的AI模型；

②、人工智能检测，将AOI或AVI检测的缺陷图片传输到已训练好的AI模型，根据已训练好的AI模型计算传输过来的缺陷图片数据，判断真假缺陷及缺陷类型，并且将判断的真缺陷进行归类；

③、结果反馈，将归类后的真缺陷进行统计，并且以信息反馈的方式表达出来，并反馈到客户端；

步骤①构建和训练AI模型包括如下步骤，1）、将用于AI模型训练的缺陷PCB板制作成标注图片，形成训练图片集，并按照一个训练图片不少于一个标签进行标注，在进行标签标注时，按照缺陷的类别进行分类，并形成训练数据库；2）、从训练数据库中选取对应标准的缺陷数据，构成人工智能检测的模型训练集；3）、将模型训练集传给AI模型进行训练，并生成该标准的AI模型，存入模型数据库以供调用；

步骤1）中，训练图片制作时，第一步先将有缺陷的PCB板制作成标注图片，第二步在图片中将缺陷部分用方框或圆框进行框定，并配上对应的标签进行标注，第三步采用包括但不限于XML、JSON、CSV的格式保存已标定的图片标注的图片像素信息，标定方框四个坐标位置信息或标定圆框中心坐标位置信息，缺陷类型信息，以及对应图片所在的路径信息，得到标签文件，第四步，将标签文件名前缀与图片文件名前缀一一对应，完成训练数据制作；

步骤1）中，将标签按照缺陷类别分类后，针对同一个类别的不同缺陷等级再次进行分级标定。

2.根据权利要求1所述的一种适用于PCB板真假缺陷判定的人工智能检测方法，其特征在于，步骤③中的信息反馈方式包括但不限于表格信息、柱状图信息和扇形图信息形式。