CN109543754A - 基于端对端深度学习的目标检测与语义分割的并行方法 - Google Patents

基于端对端深度学习的目标检测与语义分割的并行方法 Download PDF

Info

Publication number
CN109543754A
CN109543754A CN201811407476.1A CN201811407476A CN109543754A CN 109543754 A CN109543754 A CN 109543754A CN 201811407476 A CN201811407476 A CN 201811407476A CN 109543754 A CN109543754 A CN 109543754A
Authority
CN
China
Prior art keywords
network
target
darknet
fcn
target detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811407476.1A
Other languages
English (en)
Other versions
CN109543754B (zh
Inventor
胡海峰
尹靓璐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Sun Yat Sen University
Original Assignee
National Sun Yat Sen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Sun Yat Sen University filed Critical National Sun Yat Sen University
Priority to CN201811407476.1A priority Critical patent/CN109543754B/zh
Publication of CN109543754A publication Critical patent/CN109543754A/zh
Application granted granted Critical
Publication of CN109543754B publication Critical patent/CN109543754B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Molecular Biology (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种基于端对端深度学习的目标检测与语义分割的并行方法，通过对海量已标注目标检测框和像素级目标分割的图像训练得到一个由目标检测神经网络Darknet‑19、目标分割全卷积神经网络FCN组成的模型，成功实现了并行目标检测和目标分割的任务，该发明能够有效地提取图像特征，在保证目标检测和目标分割的基础上，实现实时性的图像处理功能，有较广的应用前景。

Description

基于端对端深度学习的目标检测与语义分割的并行方法
技术领域
本发明涉及人工智能的计算机视觉领域，特别涉及一种基于端对端深度学习的目标检测与语义分割的并行方法。
背景技术
在深度学习的目标检测领域，主要解决两个问题，一个是图像中多个目标物的分类和定位，其发展历程分为三个阶段，一是传统的目标检测方法，二是以Regions with CNNfeatures(R-CNN)为代表的结合候选区域(region proposal)和CNN分类的目标检测框架，如：Fast R-CNN,Faster R-CNN，三是以You Only Look Once(YOLO)为代表的将目标检测转换为回归问题的端到端(End to End)的目标检测框架，如：SSD；传统方法具有基于滑动窗口的区域选择策略缺少针对性和手工设计的特征对于多样性变化不具备鲁棒性的缺点；region proposal利用了图像中的纹理、边缘、颜色等信息预先找出图中目标可能出现的位置，可以保证在选取较少窗口(几千个甚至几百个)的情况下保持较高的召回率，但其存在重复计算和训练耗时的缺点，后续的Fast R-CNN,Faster R-CNN又在R-CNN的基础上对其做出了较多的改进，但是在满足视频实时性的要求上依旧存在问题；YOLO v2在YOLO v1的基础上，保证了其实时性，YOLO V2采用的基本网络模型即Darknet-19。
在深度学习的语义分割领域，主要对图像中的多类目标物体进行像素级别的划分，对目标物体的边界信息划分的更加明确，2014年，Berkeley的Long等人提出了全卷积网络Fully Convolutional Networks(FCN)是一个不需要通过全连接层的，用于稠密预测的卷积网络。该方法使得对于任意大小的图像，都能实现有效分割；将目标检测和语义分割任务结合起来的网络模型较少，而且大多数神经网络在提高准确率的目的上牺牲了实时性的效果。
发明内容
针对现有的深度学习目标检测具有基于滑动窗口的区域选择策略缺少针对性和手工设计的特征对于多样性变化不具备鲁棒性同时深度学习的语义分割领域对图像中的多类目标物体进行像素级别的划分，对目标物体的边界信息划分的不够的问题，本发明提出一种基于深度网络的自然语言情感分析方法，本发明采用的技术方案是：
一种基于端对端深度学习的目标检测与语义分割的并行方法，过程如下：
S1：构造与训练深层神经网络Darknet-19；
S2：构造与训练全卷积神经网络FCN；
S3：使用得到的深层神经网络Darknet-19和全卷积神经网络FCN对输入图像进行目标分类、定位及像素级别的分割。
进一步地，所述步骤S1的具体过程如下：
S11：采集可应用场景中的含有多类需要检测目标的图片作为训练数据集，对训练数据集中的多类目标物体根据检测和分割任务进行相应的标注处理；标注后的图片作为标准输出参考图；
S12：进行模型迁移，将已有的部分卷积神经网络模型参数作为初始卷积共享网络和检测任务部分的训练参数；
S13：先考虑目标检测分支的训练过程，输入图像通过Darknet-19中FCN与其共享的卷积共享网络部分的一部分卷积和池化网络层后得到特征图片，将特征图片输入Darknet-19的RPN模块得到锚点和形态长宽比不同的预测框，然后将预测框中符合目标区域要求的特征图片分别送入Darknet-19的分类模块和回归模块中对目标进行分类和定位即目标检测。
S14：Darknet-19的分类模块为一个全连接网络，输出单元为N+1个，得到这个目标区域中目标属于每个类和背景的概率，然后使用一个softmax，最后得到一个目标类别分数Dark_cls_prob；
S15：Darknet-19的回归模块为一个全连接网络，输出单元为4*N个，得到这个目标区域目标的预测框的四个参数，包括它的横轴起点、纵轴起点以及它们与锚点的距离，最后通过修正单元对预测框参数进行修正，输出一个目标的预测框坐标Dark_bbox_pred；
S16:通过向深层神经网络Darknet-19输入带有目标物体的图片和其对应的标注好的图片，并基于深层神经网络Darknet-19输出的目标检测的结果使用随机梯度下降方法对深层神经网络Darknet-19进行参数的调整，这个过程重复进行直至深层神经网络Darknet-19符合要求。
进一步地，所述步骤S2的具体过程如下：
S21：将FCN最后三层网络作为分割网络的后续处理模块，三层网络包括两层卷积网络和一层反卷积网络；
S22：考虑目标分割分支的训练过程，输入图像通过Darknet-19中FCN与其共享的卷积共享网络部分后得到一个特征图片，这个特征图片经过FCN最后三层网络，两层不改变特征图片的大小、只改变通道数的卷积网络，最后通过一层反卷积网络将其进行两倍上采样得到Conv_FCN_out；
S23：将Darknet-19中FCN与其共享的卷积共享网络部分中第四个池化层的输出特征图片Pool4_out与上一步骤的Conv_FCN_out进行融合，然后此时通过一层反卷积网络两倍上采样得到Deconv_Pool3_out；
S24：将Darknet-19中FCN与其共享的卷积共享网络部分中第三个池化层的输出特征图片Pool3_out与上一步骤的融合输出再进行融合得到Deconv_Pool4_out，然后通过一层反卷积网络进行八倍上采样到原始图片大小最后得到Conv_seg_out；这里一层反卷积网络的反卷积核是由双线性插值法初始化的，在训练中进行学习；
S25：对这个目标检测、分割并行网络进行训练时，目标检测分支的深层神经网络Darknet-19的部分神经网络参数使用迁移模型中的参数，对目标分割分支的全卷积神经网络FCN各层的参数随机初始化，最后采用降低损失函数的反向传导算法对整个目标检测、分割并行网络的Darknet-19目标检测网络和FCN目标分割网络进行同步训练。
进一步地，所述步骤S3的具体过程如下：
S31：在步骤S1和S2中的目标检测分支网络Darknet-19和目标分割分支网络FCN有卷积共享部分，并且是共同训练的，因此加快了整个检测分割网络的训练时间。
S32：将可应用的图片输入到Darknet-19中FCN与其共享的卷积共享网络部分当中，得到的特征图片即由Darknet-19的RPN模块继续处理，通过分类和回归得可应用图像中可应用目标的分类分数和检测框；特征图片又由目标分割分支网络的FCN的全卷积层来得到像素级的分割图片。
进一步地，整个包含目标检测分支网络Darknet-19、目标分割分支网络FCN的并行网络的训练采用坐标回归函数、分类交叉熵函数组成的损失函数和mask损失函数组成的总损失函数，通过最小化损失函数，反向传导误差来更新模型参数。
与现有技术相比，本发明技术方案的有益效果是：
本发明提供一种基于端对端深度学习的目标检测与语义分割的并行方法，通过对海量已标注目标检测和目标分割的图像训练得到一个由目标检测神经网络Darknet-19、全卷积神经网络FCN组成的模型，并实现对任意输入测试图像的目标物体的检测和像素级分割。Darknet-19处理目标检测部分任务，FCN模块对图像进行像素级的目标划分，本发明能较好的提取图片中的细节特征和全局特征，在保证检测精度和分割精度的前提下，实现一个并行的有效的、实时的目标检测与目标分割任务。
附图说明
图1为本发明提供的基于深度网络目标检测、目标分割并行网络的整体流程图。
图2为目标检测分割网络的具体网络结构。
图3为实施例1中预测框在3*4网格中的位置。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，仅用于示例性说明，不能理解为对本专利的限制。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面结合附图和实施例对本发明的技术方案做进一步的说明。
实施例1
如图1-2所示，一种基于端对端深度学习的目标检测与语义分割的并行方法，包括以下步骤：
S1构造与训练目标检测分支的Darknet-19
S1.1采集图像：在互联网上下载PASCAL VOC数据集，它为图像检测和图像分割提供了一整套标准的优秀数据集，本方法利用此数据集进行模型的微调和测试；
S1.2预处理目标数据集：使用常见的尺度变换、随机裁剪、加噪和旋转变换等对图片进行预处理，增强模型的鲁棒性；此步使得目标数据集的输入尺度由开始的固定尺寸变为随机变换为n*32的大小，n的取值范围为9-19；默认输入尺度为618；
S1.3生成特征图片：Darknet-19采用的基本网络结构不含有全连接网络，因此在第一步中允许输入的图片进行尺度上的动态调整，同时在每一个卷基层后加入了一个归一化操作作为改进，改善了网络的收敛速度；吸取残差网络的思想，采用了细粒度特征，将浅层卷积神经网络得到的特征图片与高层卷积神经网络得到的特征图片做一个连结，即将相邻特征叠加到不同的通道，提升模型在检测小尺度物体的检测精度；
S1.4切分图片：目标图片经过基本神经网络后，由于池化参数为32，最终得到的特征图片大小缩小至原图片1/32大小，此时对这张图片划分出n*n个网格；如Darknet-19输入图片的大小为618*618时，输出的特征图网格数量为19*19。
S1.5：生成预测框：参照R-CNN系列目标检测网络生成区域建议的方法，以每个网格的中心点为锚点，预测数量一定、长宽比一定的预测框；每个预测框含有五个参数，即四个坐标位置以及一个类别分数；如Darknet默认为每个网格生成九个预测框，此时每张图片含有N*N*9*(5+C)个参数，C为需要预测的目标类别数量。
S1.6：修正目标位置：Darknet-19预测的目标位置是每个预测框相对于网格的坐标位置，其坐标参数介于0和1之间，如图3所示，使用每个预测框得到的参数tx、ty、tw、th和to，该预测框对应的网格距离图像左上角的边缘距离为cx、cy，预测框此时长宽参数pw、ph，最终得到修正过的预测框中心点在纵轴和横轴上的坐标、长度修正值、宽度修正值和该预测框属于某个类别的分数bx、by、bw、
bx＝δ(tx)+cx
by＝δ(ty)+cy
bh和δ(to)，计算公式为
Pr(object)*IOU(b,object)＝δ(to)
，Pr(object)为未修正的属于某类的分数，IOU(b,object)为该预测框与标注框的重叠面积。
S1.7：筛选预测框：使用非极大抑制方法筛选所有的预测框，得到满足条件的检测框，并对每个检测框内目标物体给出它属于某类物体的分数。
S2构造与训练目标分割分支的全卷积网络FCN
S2.1此步骤与S1.1共享，同样为在互联网上下载PASCALVOC数据集，它为图像检测和图像分割提供了一整套标准的优秀数据集；
S2.2将现有的已训练好的卷积神经网络模型Alex Net进行调整得到初步全卷积网络模型；
S2.3删除Alex Net卷积神经网络的分类层，并将全连接层转换为卷积层，与S1共享S1.1-S1.3的操作，并使用调整后的Alex Net的最后两层卷积层和一层反卷积层；
S2.4对最高层卷积层输出后的结果进行2x上抽样，得到该层的上抽样预测，此时预测结果含有图像粗略的分割信息。结果为Conv_FCN_out；
S2.5对上一层池化层也就是共享卷积的第四层进行卷积核为1×1卷积运算，得到该池化层的预测含有图像分割的细节分割信息，结果为：Pool4_out；
S2.6将上述两预测结果Conv_FCN_out与Pool4_out进行求和，再进行2x上抽样，得到上抽样预测为Deconv_Pool4_out；
S2.7对再上一层池化层也就是共享卷积的第三层进行卷积核为1×1卷积运算，得到该池化层3的预测较池化层4具有图像更多的细节信息，结果为：Pool3_out；
S2.8将Deconv_Pool4_out与Pool3_out求和，得到Deconv_Pool3_out，再进行8x上抽样得到与原输入图像大小相同的具有更多细节信息的密集预测结果Conv_seg_out：
S2.9这里提到的上抽样层的反卷积核由双线性插值法初始化，在训练中进行学习；
S2.10输入具有标准特征图的图像，利用随机梯度下降进行全网络的，并对全卷积神经网络里所有层的参数进行微调，得到更好的目标检测和分割。
S3并行进行目标检测与目标分割
S3.1：在步骤S1和S2中的两个网络Darknet-19和FCN有卷积共享部分，这一部分使用已经训练好的模型的参数，节省了计算内存，两个网络在训练和检测阶段都是并行的，加快了整个检测分割网络的训练和测试时间。
S3.2：将可应用的图片输入到Darknet-19中FCN与其共享的卷积共享网络当中，得到的特征图片即由Darknet-19的RPN模块继续处理，通过Darknet-19的分类模块和回归模块得可应用图像中可应用目标的分类分数和检测框；又由目标分割分支的FCN的全卷积层得到了像素级的分割图片；整个模型的训练采用坐标回归函数、分类交叉熵函数组成的损失函数和mask损失函数组成的总损失函数，通过最小化损失函数，反向传导误差来更新目标检测、目标分割并行网络的参数。
显然，本发明的上述实施例仅仅是为清楚地说明本发明所作的举例，而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明权利要求的保护范围之内。

Claims (5)

1.一种基于端对端深度学习的目标检测与语义分割的并行方法，其特征在于，过程如下：
S1：构造与训练深层神经网络Darknet-19；
S2：构造与训练全卷积神经网络FCN；
S3：使用得到的深层神经网络Darknet-19和全卷积神经网络FCN对输入图像进行目标分类、定位及像素级别的分割。
2.根据权利要求1所述的基于端对端深度学习的目标检测与语义分割的并行方法，其特征在于，所述步骤S1的具体过程如下：
S11：采集可应用场景中的含有多类需要检测目标的图片作为训练数据集，对训练数据集中的多类目标物体根据检测和分割任务进行相应的标注处理；标注后的图片作为标准输出参考图；
S12：进行模型迁移，将已有的部分卷积神经网络模型参数作为初始卷积共享网络和检测任务部分的训练参数；
S13：先考虑目标检测分支的训练过程，输入图像通过Darknet-19中FCN与其共享的卷积共享网络部分的一部分卷积和池化网络层后得到特征图片，将特征图片输入Darknet-19的RPN模块得到锚点和形态长宽比不同的预测框，然后将预测框中符合目标区域要求的特征图片分别送入Darknet-19的分类模块和回归模块中对目标进行分类和定位即目标检测；
S14：Darknet-19的分类模块为一个全连接网络，输出单元为N+1个，得到这个目标区域中目标属于每个类和背景的概率，然后使用一个softmax，最后得到一个目标类别分数Dark_cls_prob;
S15：Darknet-19的回归模块为一个全连接网络，输出单元为4*N个，得到这个目标区域目标的预测框的四个参数，包括它的横轴起点、纵轴起点以及它们与锚点的距离，最后通过修正单元对预测框参数进行修正，输出一个目标的预测框坐标Dark_bbox_pred；
S16: 通过向深层神经网络Darknet-19输入带有目标物体的图片和其对应的标注好的图片，并基于深层神经网络Darknet-19输出的目标检测的结果使用随机梯度下降方法对深层神经网络Darknet-19进行参数的调整，这个过程重复进行直至深层神经网络Darknet-19符合要求。
3.根据权利要求2所述的基于端对端深度学习的目标检测与语义分割的并行方法，其特征在于，所述步骤S2的具体过程如下：
S21：将FCN最后三层网络作为分割网络的后续处理模块，三层网络包括两层卷积网络和一层反卷积网络；
S22：考虑目标分割分支的训练过程，输入图像通过Darknet-19中FCN与其共享的卷积共享网络部分后得到一个特征图片，这个特征图片经过FCN最后三层网络，两层不改变特征图片的大小、只改变通道数的卷积网络，最后通过一层反卷积网络将其进行两倍上采样得到Conv_FCN_out；
S23：将Darknet-19中FCN与其共享的卷积共享网络部分中第四个池化层的输出特征图片Pool4_out与上一步骤的Conv_FCN_out进行融合，然后此时通过一层反卷积网络两倍上采样得到Deconv_Pool3_out；
S24：将Darknet-19中FCN与其共享的卷积共享网络部分中第三个池化层的输出特征图片Pool3_out与上一步骤的融合输出再进行融合得到Deconv_Pool4_out，然后通过一层反卷积网络进行八倍上采样到原始图片大小最后得到Conv_seg_out；这里一层反卷积网络的反卷积核是由双线性插值法初始化的，在训练中进行学习；
S25：对这个目标检测、分割并行网络进行训练时，目标检测分支的深层神经网络Darknet-19的部分神经网络参数使用迁移模型中的参数，对目标分割分支的全卷积神经网络FCN各层的参数随机初始化，最后采用降低损失函数的反向传导算法对整个目标检测、分割并行网络的Darknet-19目标检测网络和FCN目标分割网络进行同步训练。
4.根据权利要求3所述的基于端对端深度学习的目标检测与语义分割的并行方法，其特征在于，所述步骤S3的具体过程如下：
将图片输入到卷积共享网络当中，得到的特征图片即由RPN模块继续处理，通过分类和回归得到图片中的目标的分类分数和监测框；又由FCN的全卷积层来得到像素级的分割图片。
5.根据权利要求4所述的基于端对端深度学习的目标检测与语义分割的并行方法，其特征在于，整个目标检测、分割并行网络的训练采用坐标回归函数、分类交叉熵函数组成的损失函数和mask损失函数组成的总损失函数，通过最小化损失函数，反向传导误差来更新模型参数。
CN201811407476.1A 2018-11-23 2018-11-23 基于端对端深度学习的目标检测与语义分割的并行方法 Active CN109543754B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811407476.1A CN109543754B (zh) 2018-11-23 2018-11-23 基于端对端深度学习的目标检测与语义分割的并行方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811407476.1A CN109543754B (zh) 2018-11-23 2018-11-23 基于端对端深度学习的目标检测与语义分割的并行方法

Publications (2)

Publication Number Publication Date
CN109543754A true CN109543754A (zh) 2019-03-29
CN109543754B CN109543754B (zh) 2023-04-28

Family

ID=65849748

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811407476.1A Active CN109543754B (zh) 2018-11-23 2018-11-23 基于端对端深度学习的目标检测与语义分割的并行方法

Country Status (1)

Country Link
CN (1) CN109543754B (zh)

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110175625A (zh) * 2019-04-11 2019-08-27 淮阴工学院 一种基于改进的ssd算法的微信群信息识别及管理方法
CN110211164A (zh) * 2019-06-05 2019-09-06 中德（珠海）人工智能研究院有限公司 基于神经网络学习基础图形的特征点算子的图片处理方法
CN110246149A (zh) * 2019-05-28 2019-09-17 西安交通大学 基于深度加权全卷积网络的室内场景迁移分割方法
CN110348342A (zh) * 2019-06-27 2019-10-18 广东技术师范大学天河学院 一种基于全卷积网络的管道病害图像分割方法
CN110363817A (zh) * 2019-07-10 2019-10-22 北京悉见科技有限公司 目标位姿估计方法、电子设备和介质
CN110390314A (zh) * 2019-07-29 2019-10-29 深兰科技（上海）有限公司 一种视觉感知方法及设备
CN110458864A (zh) * 2019-07-02 2019-11-15 南京邮电大学 基于整合语义知识和实例特征的目标跟踪方法与目标跟踪器
CN110473195A (zh) * 2019-08-13 2019-11-19 中山大学 一种可自动定制的医学病灶检测架构及方法
CN110533067A (zh) * 2019-07-22 2019-12-03 杭州电子科技大学 基于深度学习的边框回归的端到端弱监督目标检测方法
CN110765844A (zh) * 2019-09-03 2020-02-07 华南理工大学 一种基于对抗学习的非感应式餐盘图像数据自动标注方法
CN111027399A (zh) * 2019-11-14 2020-04-17 武汉兴图新科电子股份有限公司 一种基于深度学习的遥感图像水面潜艇识别方法
CN111027493A (zh) * 2019-12-13 2020-04-17 电子科技大学 一种基于深度学习多网络软融合的行人检测方法
CN111104892A (zh) * 2019-12-16 2020-05-05 武汉大千信息技术有限公司 基于目标检测的人脸篡改鉴定方法、模型及其鉴定方法
CN111275082A (zh) * 2020-01-14 2020-06-12 中国地质大学（武汉） 一种基于改进端到端神经网络的室内物体目标检测方法
CN111368687A (zh) * 2020-02-28 2020-07-03 成都市微泊科技有限公司 一种基于目标检测和语义分割的人行道车辆违停检测方法
CN111461160A (zh) * 2019-11-11 2020-07-28 天津津航技术物理研究所 抗云雾、烟雾干扰红外成像导引头目标跟踪方法
CN111860260A (zh) * 2020-07-10 2020-10-30 逢亿科技(上海)有限公司 基于fpga的高精度低算量目标检测网络系统
CN111898439A (zh) * 2020-06-29 2020-11-06 西安交通大学 基于深度学习的交通场景联合目标检测和语义分割方法
CN112508030A (zh) * 2020-12-18 2021-03-16 山西省信息产业技术研究院有限公司 一种基于双深度学习模型的隧道裂缝检测及测量方法
CN112700444A (zh) * 2021-02-19 2021-04-23 中国铁道科学研究院集团有限公司铁道建筑研究所 基于自注意力与中心点回归模型的桥梁螺栓检测方法
CN112990162A (zh) * 2021-05-18 2021-06-18 所托(杭州)汽车智能设备有限公司 目标检测方法、装置、终端设备及存储介质
CN113076972A (zh) * 2021-03-04 2021-07-06 山东师范大学 一种基于深度学习的两阶段Logo图像检测方法及系统
WO2021134519A1 (zh) * 2019-12-31 2021-07-08 华为技术有限公司 在神经网络推理中实现数据同步的装置和方法
CN113344939A (zh) * 2021-05-07 2021-09-03 西安智诊智能科技有限公司 一种基于细节保持网络的图像分割方法
CN113408499A (zh) * 2021-08-19 2021-09-17 天津所托瑞安汽车科技有限公司 双网络模型的联合评估方法、设备和存储介质
CN113469950A (zh) * 2021-06-08 2021-10-01 海南电网有限责任公司电力科学研究院 一种基于深度学习的复合绝缘子异常发热缺陷的诊断方法
CN113688682A (zh) * 2021-07-23 2021-11-23 北京理工雷科电子信息技术有限公司 一种基于改进fcn深度网络的杂波辨识与目标检测方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108304798A (zh) * 2018-01-30 2018-07-20 北京同方软件股份有限公司 基于深度学习及运动一致性的街面秩序事件视频检测方法
CN108492319A (zh) * 2018-03-09 2018-09-04 西安电子科技大学 基于深度全卷积神经网络的运动目标检测方法
CN108764137A (zh) * 2018-05-29 2018-11-06 福州大学 基于语义分割的车辆行驶车道定位方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108304798A (zh) * 2018-01-30 2018-07-20 北京同方软件股份有限公司 基于深度学习及运动一致性的街面秩序事件视频检测方法
CN108492319A (zh) * 2018-03-09 2018-09-04 西安电子科技大学 基于深度全卷积神经网络的运动目标检测方法
CN108764137A (zh) * 2018-05-29 2018-11-06 福州大学 基于语义分割的车辆行驶车道定位方法

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110175625A (zh) * 2019-04-11 2019-08-27 淮阴工学院 一种基于改进的ssd算法的微信群信息识别及管理方法
CN110246149A (zh) * 2019-05-28 2019-09-17 西安交通大学 基于深度加权全卷积网络的室内场景迁移分割方法
CN110211164A (zh) * 2019-06-05 2019-09-06 中德（珠海）人工智能研究院有限公司 基于神经网络学习基础图形的特征点算子的图片处理方法
CN110211164B (zh) * 2019-06-05 2021-05-07 中德（珠海）人工智能研究院有限公司 基于神经网络学习基础图形的特征点算子的图片处理方法
CN110348342A (zh) * 2019-06-27 2019-10-18 广东技术师范大学天河学院 一种基于全卷积网络的管道病害图像分割方法
CN110458864A (zh) * 2019-07-02 2019-11-15 南京邮电大学 基于整合语义知识和实例特征的目标跟踪方法与目标跟踪器
CN110363817B (zh) * 2019-07-10 2022-03-01 北京悉见科技有限公司 目标位姿估计方法、电子设备和介质
CN110363817A (zh) * 2019-07-10 2019-10-22 北京悉见科技有限公司 目标位姿估计方法、电子设备和介质
CN110533067A (zh) * 2019-07-22 2019-12-03 杭州电子科技大学 基于深度学习的边框回归的端到端弱监督目标检测方法
CN110390314A (zh) * 2019-07-29 2019-10-29 深兰科技（上海）有限公司 一种视觉感知方法及设备
CN110390314B (zh) * 2019-07-29 2022-02-15 深兰科技（上海）有限公司 一种视觉感知方法及设备
CN110473195A (zh) * 2019-08-13 2019-11-19 中山大学 一种可自动定制的医学病灶检测架构及方法
CN110473195B (zh) * 2019-08-13 2023-04-18 中山大学 一种可自动定制的医学病灶检测架构及方法
CN110765844A (zh) * 2019-09-03 2020-02-07 华南理工大学 一种基于对抗学习的非感应式餐盘图像数据自动标注方法
CN110765844B (zh) * 2019-09-03 2023-05-26 华南理工大学 一种基于对抗学习的非感应式餐盘图像数据自动标注方法
CN111461160A (zh) * 2019-11-11 2020-07-28 天津津航技术物理研究所 抗云雾、烟雾干扰红外成像导引头目标跟踪方法
CN111027399A (zh) * 2019-11-14 2020-04-17 武汉兴图新科电子股份有限公司 一种基于深度学习的遥感图像水面潜艇识别方法
CN111027399B (zh) * 2019-11-14 2023-08-22 武汉兴图新科电子股份有限公司 一种基于深度学习的遥感图像水面潜艇识别方法
CN111027493A (zh) * 2019-12-13 2020-04-17 电子科技大学 一种基于深度学习多网络软融合的行人检测方法
CN111027493B (zh) * 2019-12-13 2022-05-20 电子科技大学 一种基于深度学习多网络软融合的行人检测方法
CN111104892A (zh) * 2019-12-16 2020-05-05 武汉大千信息技术有限公司 基于目标检测的人脸篡改鉴定方法、模型及其鉴定方法
WO2021134519A1 (zh) * 2019-12-31 2021-07-08 华为技术有限公司 在神经网络推理中实现数据同步的装置和方法
CN111275082A (zh) * 2020-01-14 2020-06-12 中国地质大学（武汉） 一种基于改进端到端神经网络的室内物体目标检测方法
CN111368687A (zh) * 2020-02-28 2020-07-03 成都市微泊科技有限公司 一种基于目标检测和语义分割的人行道车辆违停检测方法
CN111898439A (zh) * 2020-06-29 2020-11-06 西安交通大学 基于深度学习的交通场景联合目标检测和语义分割方法
CN111860260B (zh) * 2020-07-10 2024-01-26 逢亿科技(上海)有限公司 基于fpga的高精度低算量目标检测网络系统
CN111860260A (zh) * 2020-07-10 2020-10-30 逢亿科技(上海)有限公司 基于fpga的高精度低算量目标检测网络系统
CN112508030A (zh) * 2020-12-18 2021-03-16 山西省信息产业技术研究院有限公司 一种基于双深度学习模型的隧道裂缝检测及测量方法
CN112700444B (zh) * 2021-02-19 2023-06-23 中国铁道科学研究院集团有限公司铁道建筑研究所 基于自注意力与中心点回归模型的桥梁螺栓检测方法
CN112700444A (zh) * 2021-02-19 2021-04-23 中国铁道科学研究院集团有限公司铁道建筑研究所 基于自注意力与中心点回归模型的桥梁螺栓检测方法
CN113076972A (zh) * 2021-03-04 2021-07-06 山东师范大学 一种基于深度学习的两阶段Logo图像检测方法及系统
CN113344939A (zh) * 2021-05-07 2021-09-03 西安智诊智能科技有限公司 一种基于细节保持网络的图像分割方法
CN112990162B (zh) * 2021-05-18 2021-08-06 所托(杭州)汽车智能设备有限公司 目标检测方法、装置、终端设备及存储介质
CN112990162A (zh) * 2021-05-18 2021-06-18 所托(杭州)汽车智能设备有限公司 目标检测方法、装置、终端设备及存储介质
CN113469950A (zh) * 2021-06-08 2021-10-01 海南电网有限责任公司电力科学研究院 一种基于深度学习的复合绝缘子异常发热缺陷的诊断方法
CN113688682A (zh) * 2021-07-23 2021-11-23 北京理工雷科电子信息技术有限公司 一种基于改进fcn深度网络的杂波辨识与目标检测方法
CN113408499A (zh) * 2021-08-19 2021-09-17 天津所托瑞安汽车科技有限公司 双网络模型的联合评估方法、设备和存储介质

Also Published As

Publication number Publication date
CN109543754B (zh) 2023-04-28

Similar Documents

Publication Publication Date Title
CN109543754A (zh) 基于端对端深度学习的目标检测与语义分割的并行方法
Hu et al. Nas-count: Counting-by-density with neural architecture search
CN108537146A (zh) 一种印刷体与手写体混合文本行提取系统
CN109584248A (zh) 基于特征融合和稠密连接网络的红外面目标实例分割方法
CN103824309B (zh) 一种城市建成区边界自动提取方法
CN106372648A (zh) 基于多特征融合卷积神经网络的浮游生物图像分类方法
CN108734719A (zh) 一种基于全卷积神经网络的鳞翅目昆虫图像前背景自动分割方法
CN107909015A (zh) 基于卷积神经网络及空谱信息融合的高光谱图像分类方法
CN107784657A (zh) 一种基于颜色空间分类的无人机遥感图像分割方法
CN108765425A (zh) 图像分割方法、装置、计算机设备和存储介质
US20180068215A1 (en) Big data processing method for segment-based two-grade deep learning model
CN110347881A (zh) 一种基于路径回溯图嵌入的群体发现方法
CN110211127B (zh) 基于双相关性网络的图像分割方法
CN111738268A (zh) 一种基于随机块的高分遥感图像的语义分割方法及系统
CN107506792A (zh) 一种半监督的显著对象检测方法
CN109446922A (zh) 一种实时鲁棒的人脸检测方法
CN108961429A (zh) 一种文物碎片模型自动分割及拼接方法
CN110008953A (zh) 基于卷积神经网络多层特征融合的潜在目标区域生成方法
CN110119740A (zh) 一种从复杂城市道路网络提取简化拓扑关系的方法
CN111401380A (zh) 一种基于深度特征增强和边缘优化的rgb-d图像语义分割方法
CN114005081A (zh) 一种烟丝异物智能检测装置及方法
CN109784205A (zh) 一种基于多光谱巡检图像的杂草智能识别方法
CN102136151B (zh) 一种光栅图像的矢量化方法
CN103295019A (zh) 一种基于概率统计的中文碎片自适应恢复方法
CN109800809A (zh) 一种基于维度分解的候选区域提取方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant