CN111709951A - 目标检测网络训练方法及系统及网络及装置及介质 - Google Patents
目标检测网络训练方法及系统及网络及装置及介质 Download PDFInfo
- Publication number
- CN111709951A CN111709951A CN202010841756.4A CN202010841756A CN111709951A CN 111709951 A CN111709951 A CN 111709951A CN 202010841756 A CN202010841756 A CN 202010841756A CN 111709951 A CN111709951 A CN 111709951A
- Authority
- CN
- China
- Prior art keywords
- detection network
- target
- target detection
- mask
- training
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 116
- 238000012549 training Methods 0.000 title claims abstract description 66
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000010586 diagram Methods 0.000 claims abstract description 26
- 238000002372 labelling Methods 0.000 claims abstract description 17
- 238000004364 calculation method Methods 0.000 claims abstract description 8
- 230000007547 defect Effects 0.000 claims description 42
- 238000004590 computer program Methods 0.000 claims description 17
- 230000000873 masking effect Effects 0.000 claims description 7
- 238000012360 testing method Methods 0.000 claims description 3
- 239000011159 matrix material Substances 0.000 claims 2
- 230000000694 effects Effects 0.000 abstract description 7
- 238000012545 processing Methods 0.000 description 6
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 3
- 230000002708 enhancing effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
- G06F18/253—Fusion techniques of extracted features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Evolutionary Biology (AREA)
- Health & Medical Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了目标检测网络训练方法及系统及网络及装置及介质，涉及目标检测领域，包括：对训练数据标注信息回归框；将目标掩码以分组比例K划分为partA和partB两部分；针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，针对partB部分，保留partB部分在原始图像上对应的全部标注信息，得到history图像；将history图像和原始图像输入待训练目标检测网络，原始图像经过目标检测网第一层之后得到第一特征图，history图像经过目标检测网第一层之后得到第二特征图，将第一特征图与第二特征图相加后输入到目标检测网后续层进行相关计算训练目标检测网络；本发明能够使目标检测网络在高度重叠的目标下，依然能有很好的检测效果。
Description
技术领域
本发明涉及目标检测领域，具体地，涉及一种目标检测网络训练方法及系统及目标检测网络或模型及目标检测系统及目标检测网络训练装置及计算机可读存储介质。
背景技术
在现有的工业缺陷检测的业务场景中，往往会伴有很多重叠的缺陷数据，现有解决重叠缺陷的检测方法主要包括以下两种方式：第一种是对一张图多次预测，每一次预测排除上一次预测的结果，然后综合每一次的预测结果最终得到包含所有目标的检测结果，虽然此方式对重叠目标的检测效果比原始检测方法更好，但多余运算资源的开销较大，不利于实际的项目落地。第二种方式是在图片上mask（掩码）随机一组groudtruth（图像标注信息）的boundingbox（标注信息中的回归框）来预测剩余的boundingbox。这种方式虽然提升效果也很明显，但如果在重叠程度较高的目标之间，使用boundingbox进行mask会导致与其重叠的目标的部分或者全部特征也被mask，使其特征缺失较多，不利于模型学习。
目前的目标检测框架对于这部分重叠的目标检测效果并不好，其中的主要原因在于以下两点：
1）当多缺陷位于重叠位置时，在重叠下方的缺陷被上方缺陷所覆盖，导致位于重叠下方的缺陷特征与此类缺陷完整特征存在较大差异，因此难以被检测出。
2）即使第一点所述情况的缺陷能够被检测器检出，但往往其置信度会偏低，在后处理阶段也会被用于抑制重叠框的NMS所抑制。
因此检测重叠目标也是目标检测任务的一大难点。
发明内容
本发明结合上述两种方式的优缺点，发明出利用目标轮廓mask的方式，克服了上述两种方式的不足，使目标检测网络在重叠的目标下，依然能有很好的检测效果。
为实现上述目的，本发明提供了一种目标检测网络训练方法，所述方法包括：
初始化分组比例K；
采集拥有标注信息的训练数据，训练数据包括：原始输入的图像以及其对应的标注信息，标注信息包括目标框及掩码；
将图像上缺陷目标以分组比例K划分为partA和partB两部分，目标掩码为一张图像上所有的缺陷及各缺陷对应的掩码；
针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，针对partB部分，保留partB部分在原始图像上对应的全部标注信息，得到history图像；
将history图像和原始图像输入待训练目标检测网络，原始图像经过目标检测网第一层之后得到第一特征图，history图像经过目标检测网第一层之后得到第二特征图，将第一特征图与第二特征图相加后输入目标检测网后续层进行相关计算训练目标检测网络。
其中，将一特征图与第二特征图相加作用在于使网络能够学习到两个特征图的所包含的信息，而不是单一的特征图，即结果融合。
其中，本方法提出的针对重叠或相互遮挡的缺陷的深度学习网络的训练方法，用于提升现有的目标检测算法对于高度重叠目标的检测性能。本发明的原理为：在存在重叠缺陷目标的图像上，深度学习往往会更偏向于学习一组重叠目标中的最上层的目标所包含的图像信息，而忽略掉下层的目标所包含的图像信息。本发明利用标注信息中的掩码信息，随机地抑制掉上层目标的缺陷信息，而强制模型学习下层目标的信息，以此来增强模型对于重叠目标中被覆盖的目标学习效果。
其中，将目标掩码以分组比例K划分为partA和partB两部分的目的是便用于在步骤二中均衡地划分partA和partB组内元素数量，以及便于在后续步骤中针对两个部分分别进行各自的处理。
其中，partA和partB组内元素为缺陷目标，原始图像中具有多个缺陷目标，组内元素数量即指图像上目标缺陷的数量。
其中，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，以便于神经网络能学习到被遮挡缺陷的图像特征信息。
优选的，所述针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，具体包括：
在原始图像中将partA部分目标掩码所覆盖的像素置为0，并在原始groundtruth的回归框和目标掩码中去掉partA部分目标掩码对应的标注信息。原始groundtruth为图像上缺陷的标注信息。
其中，保留partB部分在原始图像上对应的全部标注信息即为网络此轮训练所要学习的目标。
优选的，本方法中将第一特征图与第二特征图相加具体为：将第一特征图与第二特征图按位相加。
优选的，所述方法还包括测试和验证训练后的目标检测网络。具体为使用测试数据集和验证数据集分别测试和验证训练后的目标检测网络，使得目标检测网络的准确性和稳定性更高。
优选的，本发明中分组比例K为1:1，使用这个比例在后续步骤中进行分组。
本发明还提供了一种目标检测网络训练系统，所述系统包括：
初始化单元，用于初始化分组比例K；
标注单元，用于采集拥有标注信息的训练数据，对训练数据标注信息回归框，训练数据包括：原始输入的图像以及其对应的标注信息，标注信息包括目标框及掩码；
分组单元，用于将目标掩码以分组比例K划分为partA和partB两部分；目标掩码为一张图像上所有的缺陷及各缺陷对应的掩码；
掩码单元，用于针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，针对partB部分，保留partB部分在原始图像上对应的全部标注信息，得到history图像；
训练单元，用于将history图像和原始图像输入待训练目标检测网络，原始图像经过目标检测网第一层之后获得到第一特征图，history图像经过目标检测网第一层之后得到第二特征图，将第一特征图与第二特征图相加后输入到目标检测网后续层进行相关计算训练目标检测网络。
本发明还提供了一种目标检测网络，所述目标检测网络用于对预设目标进行检测，所述目标检测网络采用所述目标检测网络训练方法训练获得。
本发明还提供了一种目标检测系统，所述系统包括：
采集器，用于采集待检测图像；
处理器，所述处理器用于运行目标检测网络或模型，所述目标检测网络或模型用于对待检测图像进行目标检测，并输出目标检测结果，所述目标检测网络或模型采用所述目标检测网络训练方法训练获得。
本发明还提供了一种目标检测网络训练装置，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现所述目标检测网络训练方法的步骤。
本发明还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现所述目标检测网络训练方法的步骤。
本发明提供的一个或多个技术方案，至少具有如下技术效果或优点：
由于普通的基于深度学习的缺陷检测算法，在图像上存在重叠目标时，往往只会检测到这组重叠目标上层的缺陷，而漏检下层的缺陷。因为在模型训练过程中，算法更加倾向于学习更为明显的缺陷特征，而忽略掉一些细节的缺陷特征，而在重叠缺陷目标中，被覆盖的缺陷的显著特征会被其他的缺陷所覆盖而失去缺陷图像信息，导致模型对被覆盖的缺陷的识别效果不佳。本发明通过利用目标轮廓mask增强重叠目标检测的训练方法，在学习过程中能更好的关注被覆盖缺陷的图像信息，可以有效提升数据中存在的高度重叠目标、边界目标的识别和分类。
附图说明
此处所说明的附图用来提供对本发明实施例的进一步理解，构成本发明的一部分，并不构成对本发明实施例的限定；
图1为本发明中一种目标检测网络训练方法的流程示意图；
图2为原始图像以及groundtruth信息示意图；
图3为利用Seg进行mask后的图像及标注信息示意图；
图4是本发明中目标检测网络训练系统示意图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点，下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是，在相互不冲突的情况下，本发明的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明，但是，本发明还可以采用其他不同于在此描述范围内的其他方式来实施，因此，本发明的保护范围并不受下面公开的具体实施例的限制。
实施例一
请参考图1-图3，图1为本发明中一种目标检测网络训练方法的流程示意图，图2为原始图像以及groundtruth信息示意图，图3为利用Seg进行mask后的图像及标注信息示意图，其中，Seg为SegNet图像分割网络，所述方法包括：
初始化分组比例K；
采集拥有标注信息的训练数据，对训练数据标注信息回归框；
将目标掩码以分组比例K划分为partA和partB两部分；
针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，针对partB部分，保留partB部分在原始图像上对应的全部标注信息，获得history图像；
将history图像和原始图像输入待训练目标检测网络，原始图像经过目标检测网第一层之后得到第一特征图，history图像经过目标检测网第一层之后得到第二特征图，将第一特征图与第二特征图相加后输入到目标检测网后续层进行相关计算训练目标检测网络。
其中，在具体实施的过程中，本发明可以采用以下步骤进行实现：
步骤1：初始化一个分组比例，此比例可以为1:1，以便用于在步骤二中均衡地划分partA和partB组内元素数量；在实际的应用中分组比例也可以为其他比例，本发明实施例不对具体的分组比例进行限制；
步骤2：对于一张拥有标注信息的训练数据，首先对其标注信息回归框，目标掩码以初始化的分组比例进行随机的筛选，筛选出partA和partB两部分，此目的在于在步骤3,4中针对两个部分分别进行各自的处理；
步骤3：针对partA部分，结合其对应的缺陷目标掩码信息，标掩码信息指的标注文件中所指出的缺陷在图像上所占像素，在原始图像上对应的目标掩码区域进行掩码操作，即将在输入图像partA部分掩码所覆盖的像素置为0。并在原始groundtruth的回归框和目标掩码部分去掉partA部分的标注信息，以便于神经网络能学习到被遮挡缺陷的图像特征信息；原始图像为未经过图像处理的图像，输入图像为原始图像经过图像预处理之后，输入进神经网络的图像；图像标注信息包含图像上的目标掩码和目标回归框；
步骤4：针对partB部分，保留partB全部标注信息，即为网络此轮训练所要学习的目标。
步骤5：partA进行掩码之后的图像作为history信息。只保留partB部分的回归框，掩码信息作为groundtruth，并将partB输入到任何所选择的目标检测网络。
步骤6：在网络的第一层之后，将原始图像经过了卷积网络第一层之后的特征图，与同样经过卷积网络第一层后的history图像所得到的特征图进行按位相加操作，得到的特征图再连接到后续的卷积神经网络中进行网络原有的计算，如神经网络中的卷积，标准化，激活，池化等计算。
其中，本实施例中的方法通过利用目标轮廓mask增强重叠目标检测的训练方法，可以有效提升数据中存在的高度重叠目标、边界目标的识别和分类。
实施例二
请参考图4，本发明实施例二提供了一种目标检测网络训练系统，所述系统包括：
初始化单元，用于初始化分组比例K；
标注单元，用于采集拥有标注信息的训练数据，对训练数据标注信息回归框；
分组单元，用于将目标掩码以分组比例K划分为partA和partB两部分；
掩码单元，用于针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，针对partB部分，保留partB部分在原始图像上对应的全部标注信息，获得history图像；
训练单元，用于将history图像和原始图像输入待训练目标检测网络，原始图像经过目标检测网第一层之后得到第一特征图，history图像经过目标检测网第一层之后得到第二特征图，将第一特征图与第二特征图相加后输入到目标检测网后续层进行相关计算训练目标检测网络。
实施例三
本发明实施例三提供了一种目标检测网络或模型，所述目标检测网络或模型用于对预设目标进行检测，所述目标检测网络或模型采用所述目标检测网络训练方法训练获得。
实施例四
本发明实施例四提供了一种目标检测系统，所述系统包括：
采集器，用于采集待检测图像；
处理器，所述处理器用于运行目标检测网络或模型，所述目标检测网络或模型用于对待检测图像进行目标检测，并输出目标检测结果，所述目标检测网络或模型采用所述目标检测网络训练方法训练获得。
实施例五
本发明实施例五提供了一种目标检测网络训练装置，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现所述目标检测网络训练方法的步骤。
本发明还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现所述目标检测网络训练方法的步骤。
所述目标检测网络训练装置可以是桌上型计算机、笔记本、掌上电脑以及云端服务器等计算设备。所述装置可包括，但不仅限于，处理器、存储器。本领域技术人员可以理解，所述装置还可以包括输入输出设备、网络接入设备、总线等。
所述处理器可以是中央处理器（CPU，Central Processing Unit），还可以是其他通用处理器、数字信号处理器（digital signal processor）、专用集成电路（ApplicationSpecific Integrated Circuit）、现成可编程门阵列（Fieldprogrammable gate array）或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述目标检测网络训练装置的控制中心，利用各种接口和线路连接整个装置的各个部分。
所述存储器可用于存储所述计算机程序和/或模块，所述处理器通过运行或执行存储在所述存储器内的数据，实现所述目标检测网络训练装置的各种功能。所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序（比如声音播放功能、图像播放功能等）等。此外，存储器可以包括高速随机存取存储器、还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡，安全数字卡，闪存卡、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
所述目标检测网络训练装置如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序可存储于一计算机可读存介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码、对象代码形式、可执行文件或某些中间形式等。所述计算机可读取介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器、随机存储器、点载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (9)
1.一种目标检测网络训练方法，其特征在于，所述方法包括：
初始化分组比例K；
采集拥有标注信息的训练数据，训练数据包括：原始输入的图像以及其对应的标注信息，标注信息包括目标框及掩码；
将目标掩码以分组比例K划分为partA和partB两部分，目标掩码为一张图像上所有的缺陷及各缺陷对应的掩码；
针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，针对partB部分，保留partB部分在原始图像上对应的全部标注信息，得到history图像；
将history图像和原始图像输入待训练目标检测网络，原始图像经过目标检测网第一层之后得到第一特征图，history图像经过目标检测网第一层之后得到第二特征图，将第一特征图与第二特征图相加后输入目标检测网后续层进行相关计算训练目标检测网络。
2.根据权利要求1所述的目标检测网络训练方法，其特征在于，所述针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，具体包括：
在原始图像中将partA部分目标掩码所覆盖的像素置为0，并在原始groundtruth的回归框和目标掩码中去掉partA部分目标缺陷对应的标注信息，原始groundtruth为图像上缺陷的标注信息。
3.根据权利要求1所述的目标检测网络训练方法，其特征在于，将第一特征图与第二特征图相加具体为：将第一特征图与第二特征图矩阵按位相加，即两个特征图矩阵上对应坐标的值进行相加。
4.根据权利要求1所述的目标检测网络训练方法，其特征在于，所述方法还包括测试和验证训练后的目标检测网络。
5.一种目标检测网络训练系统，其特征在于，所述系统包括：
初始化单元，用于初始化分组比例K；
标注单元，用于采集拥有标注信息的训练数据，对训练数据标注信息回归框，训练数据包括：原始输入的图像以及其对应的标注信息，标注信息包括目标框及掩码；
分组单元，用于将目标掩码以分组比例K划分为partA和partB两部分，目标掩码为一张图像上所有的缺陷及各缺陷对应的掩码；
掩码单元，用于针对partA部分，结合目标掩码对应的目标掩码信息，将原始图像上对应的目标掩码区域掩码，针对partB部分，保留partB部分在原始图像上对应的全部标注信息，得到history图像；
训练单元，用于将history图像和原始图像输入待训练目标检测网络，原始图像经过目标检测网第一层之后得到第一特征图，history图像经过目标检测网第一层之后得到第二特征图，将第一特征图与第二特征图相加后输入目标检测网后续层进行相关计算训练目标检测网络。
6.一种目标检测网络，其特征在于，所述目标检测网络用于对预设目标进行检测，所述目标检测网络采用权利要求1-4中任意一种所述的目标检测网络训练方法训练获得。
7.一种目标检测系统，其特征在于，所述系统包括：
采集器，用于采集待检测图像；
处理器，所述处理器用于运行目标检测网络或模型，所述目标检测网络或模型用于对待检测图像进行目标检测，并输出目标检测结果，所述目标检测网络或模型采用权利要求1-4中任意一种所述的目标检测网络训练方法训练获得。
8.一种目标检测网络训练装置，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1-4中任意一个所述的目标检测网络训练方法的步骤。
9.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-4中任意一个所述的目标检测网络训练方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010841756.4A CN111709951B (zh) | 2020-08-20 | 2020-08-20 | 目标检测网络训练方法及系统及网络及装置及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010841756.4A CN111709951B (zh) | 2020-08-20 | 2020-08-20 | 目标检测网络训练方法及系统及网络及装置及介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111709951A true CN111709951A (zh) | 2020-09-25 |
| CN111709951B CN111709951B (zh) | 2020-11-13 |
Family
ID=72547432
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010841756.4A Active CN111709951B (zh) | 2020-08-20 | 2020-08-20 | 目标检测网络训练方法及系统及网络及装置及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111709951B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113222874A (zh) * | 2021-06-01 | 2021-08-06 | 平安科技（深圳）有限公司 | 应用于目标检测的数据增强方法、装置、设备及存储介质 |
| WO2024149078A1 (zh) * | 2023-01-09 | 2024-07-18 | 合众新能源汽车股份有限公司 | 一种支持多相机动态输入的感知方法、系统及车辆 |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017177367A1 (en) * | 2016-04-11 | 2017-10-19 | Xiaogang Wang | Method and system for object tracking |
| CN108388923A (zh) * | 2018-03-08 | 2018-08-10 | 深圳市唯特视科技有限公司 | 一种基于对象检测器和递归神经网络的统一图解析网络 |
| WO2019068141A1 (en) * | 2017-10-02 | 2019-04-11 | Sensen Networks Group Pty Ltd | AUTOMATIC LEARNING GUIDED OBJECT DETECTION SYSTEM AND METHOD |
| CN109784349A (zh) * | 2018-12-25 | 2019-05-21 | 东软集团股份有限公司 | 图像目标检测模型建立方法、装置、存储介质及程序产品 |
| CN109815843A (zh) * | 2018-12-29 | 2019-05-28 | 深圳云天励飞技术有限公司 | 目标检测方法及相关产品 |
| CN110096960A (zh) * | 2019-04-03 | 2019-08-06 | 罗克佳华科技集团股份有限公司 | 目标检测方法及装置 |
| US20190311202A1 (en) * | 2018-04-10 | 2019-10-10 | Adobe Inc. | Video object segmentation by reference-guided mask propagation |
| CN110827292A (zh) * | 2019-10-23 | 2020-02-21 | 中科智云科技有限公司 | 一种基于卷积神经网络的视频实例分割方法及设备 |
| CN111160140A (zh) * | 2019-12-13 | 2020-05-15 | 浙江大华技术股份有限公司 | 一种图像检测方法及装置 |
| CN111179241A (zh) * | 2019-12-25 | 2020-05-19 | 成都数之联科技有限公司 | 一种面板缺陷检测和分类方法及系统 |
| CN111353983A (zh) * | 2020-02-28 | 2020-06-30 | 腾讯科技（深圳）有限公司 | 缺陷检测识别方法、装置、计算机可读介质及电子设备 |
-
2020
- 2020-08-20 CN CN202010841756.4A patent/CN111709951B/zh active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017177367A1 (en) * | 2016-04-11 | 2017-10-19 | Xiaogang Wang | Method and system for object tracking |
| WO2019068141A1 (en) * | 2017-10-02 | 2019-04-11 | Sensen Networks Group Pty Ltd | AUTOMATIC LEARNING GUIDED OBJECT DETECTION SYSTEM AND METHOD |
| CN108388923A (zh) * | 2018-03-08 | 2018-08-10 | 深圳市唯特视科技有限公司 | 一种基于对象检测器和递归神经网络的统一图解析网络 |
| US20190311202A1 (en) * | 2018-04-10 | 2019-10-10 | Adobe Inc. | Video object segmentation by reference-guided mask propagation |
| CN109784349A (zh) * | 2018-12-25 | 2019-05-21 | 东软集团股份有限公司 | 图像目标检测模型建立方法、装置、存储介质及程序产品 |
| CN109815843A (zh) * | 2018-12-29 | 2019-05-28 | 深圳云天励飞技术有限公司 | 目标检测方法及相关产品 |
| CN110096960A (zh) * | 2019-04-03 | 2019-08-06 | 罗克佳华科技集团股份有限公司 | 目标检测方法及装置 |
| CN110827292A (zh) * | 2019-10-23 | 2020-02-21 | 中科智云科技有限公司 | 一种基于卷积神经网络的视频实例分割方法及设备 |
| CN111160140A (zh) * | 2019-12-13 | 2020-05-15 | 浙江大华技术股份有限公司 | 一种图像检测方法及装置 |
| CN111179241A (zh) * | 2019-12-25 | 2020-05-19 | 成都数之联科技有限公司 | 一种面板缺陷检测和分类方法及系统 |
| CN111353983A (zh) * | 2020-02-28 | 2020-06-30 | 腾讯科技（深圳）有限公司 | 缺陷检测识别方法、装置、计算机可读介质及电子设备 |
Non-Patent Citations (4)
| Title |
|---|
| AARNO OSKAR VUOLA 等: "MASK-RCNN AND U-NET ENSEMBLED FOR NUCLEI SEGMENTATION", 《2019 IEEE 16TH INTERNATIONAL SYMPOSIUM ON BIOMEDICAL IMAGING》 * |
| HARIYANTI MOHD SALEH 等: "Convolutional Networks with Test Time Augmentation Convolutional Networks with Test Time Augmentation", 《23RD INTERNATIONAL CONFERENCE ON KNOWLEDGE-BASED AND INTELLIGENT INFORMATION & ENGINEERING SYSTEMS》 * |
| 刘俊琦 等: "可见光遥感图像海面目标检测技术综述", 《计算机科学》 * |
| 赵雷: "基于视频的人体行为检测的方法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113222874A (zh) * | 2021-06-01 | 2021-08-06 | 平安科技（深圳）有限公司 | 应用于目标检测的数据增强方法、装置、设备及存储介质 |
| CN113222874B (zh) * | 2021-06-01 | 2024-02-02 | 平安科技（深圳）有限公司 | 应用于目标检测的数据增强方法、装置、设备及存储介质 |
| WO2024149078A1 (zh) * | 2023-01-09 | 2024-07-18 | 合众新能源汽车股份有限公司 | 一种支持多相机动态输入的感知方法、系统及车辆 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111709951B (zh) | 2020-11-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111737522B (zh) | 视频匹配方法、基于区块链的侵权存证方法和装置 | |
| JP7242975B2 (ja) | ディシジョンツリーベースの適応ブースティング分類器におけるオブジェクト分類のための方法、デジタルシステム、並びに非一時的コンピュータ可読記憶媒体 | |
| CN109977191B (zh) | 问题地图检测方法、装置、电子设备和介质 | |
| US11275955B2 (en) | Lane line processing method and device | |
| KR102559021B1 (ko) | 불량 이미지 생성 장치 및 방법 | |
| US20200357106A1 (en) | Method for detecting defects, electronic device, and computer readable medium | |
| US20230214989A1 (en) | Defect detection method, electronic device and readable storage medium | |
| CN111709951B (zh) | 目标检测网络训练方法及系统及网络及装置及介质 | |
| CN113505781B (zh) | 目标检测方法、装置、电子设备及可读存储介质 | |
| US20230401691A1 (en) | Image defect detection method, electronic device and readable storage medium | |
| CN112199268B (zh) | 一种软件兼容性测试方法及电子设备 | |
| CN116433559A (zh) | 产品外观缺陷检测方法、电子设备及存储介质 | |
| CN110599453A (zh) | 一种基于图像融合的面板缺陷检测方法、装置及设备终端 | |
| CN114638777A (zh) | 图像瑕疵检测方法、装置、电子设备及介质 | |
| CN116385380A (zh) | 基于深度特征的缺陷检测方法、系统、设备及存储介质 | |
| CN112668640A (zh) | 一种文本图像质量评估方法、装置、设备及介质 | |
| CN112052907A (zh) | 基于图像边缘信息的目标检测方法、装置及存储介质 | |
| CN111783812A (zh) | 违禁图像识别方法、装置和计算机可读存储介质 | |
| CN114638294A (zh) | 一种数据增强方法、装置、终端设备及存储介质 | |
| CN110298302B (zh) | 一种人体目标检测方法及相关设备 | |
| CN112287905A (zh) | 车辆损伤识别方法、装置、设备及存储介质 | |
| CN113537253B (zh) | 一种红外图像目标检测方法、装置、计算设备及存储介质 | |
| CN115222699A (zh) | 缺陷检测方法和缺陷检测装置及系统 | |
| CN111753625B (zh) | 一种行人检测方法、装置、设备及介质 | |
| CN113536868A (zh) | 电路板故障识别方法及相关设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address | ||
| CP03 | Change of name, title or address |
Address after: 610042 No. 270, floor 2, No. 8, Jinxiu street, Wuhou District, Chengdu, Sichuan Patentee after: Chengdu shuzhilian Technology Co.,Ltd. Address before: No.2, floor 4, building 1, Jule road crossing, Section 1, West 1st ring road, Wuhou District, Chengdu City, Sichuan Province 610041 Patentee before: CHENGDU SHUZHILIAN TECHNOLOGY Co.,Ltd. |
|
| EE01 | Entry into force of recordation of patent licensing contract | ||
| EE01 | Entry into force of recordation of patent licensing contract |
Application publication date: 20200925 Assignee: Chengdu Shuzhi Innovation Lean Technology Co.,Ltd. Assignor: Chengdu shuzhilian Technology Co.,Ltd. Contract record no.: X2024510000014 Denomination of invention: Target detection network training method and system, network and device, and medium Granted publication date: 20201113 License type: Common License Record date: 20240723 |