CN106529602A - 一种毫米波图像自动目标识别方法及装置 - Google Patents

一种毫米波图像自动目标识别方法及装置 Download PDF

Info

Publication number
CN106529602A
CN106529602A CN201611039274.7A CN201611039274A CN106529602A CN 106529602 A CN106529602 A CN 106529602A CN 201611039274 A CN201611039274 A CN 201611039274A CN 106529602 A CN106529602 A CN 106529602A
Authority
CN
China
Prior art keywords
millimeter
target
wave image
sample
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611039274.7A
Other languages
English (en)
Other versions
CN106529602B (zh
Inventor
孙晓玮
姚家雄
杨明辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Institute of Microsystem and Information Technology of CAS
Original Assignee
Shanghai Institute of Microsystem and Information Technology of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Institute of Microsystem and Information Technology of CAS filed Critical Shanghai Institute of Microsystem and Information Technology of CAS
Priority to CN201611039274.7A priority Critical patent/CN106529602B/zh
Publication of CN106529602A publication Critical patent/CN106529602A/zh
Application granted granted Critical
Publication of CN106529602B publication Critical patent/CN106529602B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种毫米波图像自动目标识别方法,包括以下步骤:(1)获取待目标识别的毫米波图像的子图块;(2)基于经训练的卷积神经网络获取所述子图块包含目标的概率值;(3)基于所述概率值获取待目标识别的毫米波图像的概率累计图;(4)基于所述概率累计图进行目标标注,以完成对待目标识别的毫米波图像的目标识别。相应地,本发明还公开了一种毫米波图像自动目标识别装置。本发明所述的毫米波图像自动目标识别方法和装置适用于毫米波图像的自动目标识别,具有良好的目标识别效果,解决了现有技术中对毫米波图像采用传统的手工设计特征难以取得良好的检测效果的问题,实现目标精确定位,并减少虚警,提高了安检效率,减少了人力成本。

Description

一种毫米波图像自动目标识别方法及装置
技术领域
本发明涉及成像安检领域,尤其涉及一种毫米波图像目标识别方法及装置。
背景技术
在安检领域,常用的安检手段有金属探测器和X光安检。金属探测器只能用于探测金属物品,无法检测陶瓷刀等非金属危险品;X射线可用于检测金属物品,但它和核辐射一样属于电离辐射,容易对人体造成危害,只能用做行李安检。由于以上缺陷,传统的金属探测器和X光安检都不是理想的人体安检手段。毫米波能够穿透衣物,检测出藏匿于衣物下的枪支、陶瓷刀具、不明液体等违禁物品,且毫米波辐射属于非电离辐射,实际使用中功率较小,不会对人体造成危害,因此可以用于人体安检成像。为了提高安检的效率,减少人力成本,应当采取有效的毫米波人体图像自动目标识别方法。
传统的人脸检测、行人检测等自动目标识别算法主要针对可见光图像。可见光图像具有足够高的信噪比,并且纹理丰富,通过Haar、LBP、HOG、SIFT等手工设计特征就能获得良好的检测效果。由于毫米波成像系统的不稳定,毫米波人体图像往往具有很高的噪声,且被扫描人体体态各异,不同违禁物品的纹理差异巨大,采用传统的手工设计特征难以取得良好的检测效果。
发明内容
本发明的目的之一是提供一种毫米波图像自动目标识别方法,该方法可用于毫米波图像的目标识别,并且具有良好的目标识别效果。
根据上述发明目的,本发明提出了一种毫米波图像自动目标识别方法,包括以下步骤:
(1)获取待目标识别的毫米波图像的子图块;
(2)基于经训练的卷积神经网络获取所述子图块包含目标的概率值;
(3)基于所述概率值获取待目标识别的毫米波图像的概率累计图;
(4)基于所述概率累计图进行目标标注,以完成对待目标识别的毫米波图像的目标识别。
本发明所述的毫米波图像自动目标识别方法中:步骤(1)可以通过在待目标识别的毫米波图像中以滑动窗口获取所述子图块,滑动步长小于滑动窗口尺寸。步骤(2)中经训练的卷积神经网络用于提取毫米波图像局部区域特征,并判别局部区域存在目标的概率。步骤(3)利用局部区域存在目标的概率,获取毫米波图像的概率累计图,该概率累计图反映了图像各个像素点存在目标的可能性。步骤(4)中所述目标标注是指标注出目标所在区域。基于所述概率累计图可以提取潜在目标,或者更进一步地通过自适应阈值法和面积阈值去噪,进一步地进行目标精确定位与虚警去除,得到与目标位置高度相关的二值图像的连通区域,以进行目标标注。目标标注通常是用一个包含所述二值图像的连通区域的尽量小的矩形框在待目标识别的毫米波图像上对应的位置进行标注。由于卷积神经网络具有优秀的特征提取能力,且能够实现端到端的识别,对应的算法具有检测速度快、识别准确率高等优良特性,因此本发明方法具有良好的目标识别效果。
进一步地,本发明所述的毫米波图像自动目标识别方法中,所述步骤(2)中经训练的卷积神经网络通过以下步骤得到:
(2a)获取训练样本,所述训练样本为经图像标注的毫米波图像的子图块样本,该子图块样本被区分为正样本和负样本,其中,正样本表示其包含目标,负样本表示其不包含目标;
(2b)基于所述训练样本训练卷积神经网络。
上述方案中,步骤(2a)中所述包含目标是一种概率上的包含,属于模糊集合概念。步骤(2b)把获得的正样本和负样本,按照一定的比例分成训练集、验证集和测试集。训练集用于训练卷积神经网络,验证集用于在训练的过程中观察卷积神经网络的损失函数是否收敛,以判断是否终止训练,测试集用于测试卷积神经网络对子图块的分类准确率。可以采用随机梯度下降法训练卷积神经网络,直到神经网络的损失函数收敛到最小值。
更进一步地,上述毫米波图像自动目标识别方法中,所述步骤(2a)中,根据所述子图块样本与所述图像标注的重合程度区分正样本和负样本:设定一重合程度阈值,将不小于该重合程度阈值的子图块样本区分为正样本,将小于该重合程度阈值的子图块样本区分为负样本。
更进一步地,上述毫米波图像自动目标识别方法中,设定第一方差阈值,将不大于该第一方差阈值的正样本和负样本排除。
更进一步地,上述毫米波图像自动目标识别方法中,对所述正样本进行样本增强处理。
上述方案中,所述增强处理可以是先做左右翻转,再对原子图块以及左右翻转之后的子图块分别做上下翻转,翻转后的子图块也归类为正样本。
进一步地,本发明所述的毫米波图像自动目标识别方法中,所述步骤(2)中卷积神经网络包括卷积层和逻辑回归层,所述卷积神经网络的输入为步骤(1)中的所述子图块,所述卷积层输出作为所述子图块的特征的特征向量,所述逻辑回归层根据所述特征向量输出步骤(2)中的所述概率值。
更进一步地,上述毫米波图像自动目标识别方法中,设定第二方差阈值,将小于该第二方差阈值的步骤(1)中的所述子图块从所述卷积神经网络的输入中排除,同时相应输出的概率值为零。
上述方案中,所述第二方差阈值的大小通常与所述第一方差阈值相同。
进一步地,本发明所述的毫米波图像自动目标识别方法中,所述步骤(3)中将所述概率值在待目标识别的毫米波图像的对应位置累积叠加,得到概率累计图IPA(x,y)。
更进一步地,上述毫米波图像自动目标识别方法中,所述步骤(4)中基于所述概率累计图IPA(x,y),通过一个硬阈值THprob获得对应的二值图像B1(x,y),以基于该二值图像B1(x,y)进行目标标注,其中:
更进一步地,上述毫米波图像自动目标识别方法中,对于二值图像B1(x,y)的每个连通区域,根据该连通区域的最大概率累计值max_prob和面积S,计算出一个自适应阈值THadap
THadap=min(THm,a×max_prob+b×S),
其中,THm为自适应阈值的上限,a和b均为常数;
基于所述概率累计图IPA(x,y),对所述二值图像B1(x,y)进行目标精确定位与虚警去除获得二值图像B2(x,y),以基于该二值图像B2(x,y)进行目标标注,其中:
更进一步地,上述毫米波图像自动目标识别方法中,将所述二值图像B2(x,y)中面积小于面积阈值THarea的连通区域删除,得到二值图像B3(x,y),以基于该二值图像B3(x,y)进行目标标注。
更进一步地,上述毫米波图像自动目标识别方法中,在所述二值图像B3(x,y)的各连通区域对应的待目标识别的毫米波图像的位置上用矩形框进行目标标注。
本发明的另一目的是提供一种毫米波图像自动目标识别装置,该装置可用于毫米波图像的目标识别,并且具有良好的识别效果。
根据上述发明目的,本发明提出了一种毫米波图像自动目标识别装置,其包括:
图像划分模块,其被配置为获取待目标识别的毫米波图像的子图块;
卷积神经网络识别模块,其被配置为基于经训练的卷积神经网络获取所述子图块包含目标的概率值;
概率累计图模块,其被配置为基于所述概率值获取待目标识别的毫米波图像的概率累计图;
目标标注模块,其被配置为基于所述概率累计图进行目标标注,以完成对待目标识别的毫米波图像的目标识别。
进一步地,本发明所述的毫米波图像自动目标识别装置还包括:
训练样本获取模块,其被配置为获取训练样本,所述训练样本为经图像标注的毫米波图像的子图块样本,该子图块样本被区分为正样本和负样本,其中,正样本表示其包含目标,负样本表示其不包含目标;
卷积神经网络训练模块,其被配置为基于所述训练样本训练卷积神经网络,得到所述经训练的卷积神经网络。
更进一步地,上述毫米波图像自动目标识别装置中,所述训练样本获取模块进一步被配置为根据所述子图块样本与所述图像标注的重合程度区分正样本和负样本:设定一重合程度阈值,将不小于该重合程度阈值的子图块样本区分为正样本,将小于该重合程度阈值的子图块样本区分为负样本。
更进一步地,上述毫米波图像自动目标识别装置中,所述训练样本获取模块进一步被配置为设定第一方差阈值,将不大于该第一方差阈值的正样本和负样本排除。
更进一步地,上述毫米波图像自动目标识别装置中,所述训练样本获取模块进一步被配置为对所述正样本进行样本增强处理。
进一步地,本发明所述的毫米波图像自动目标识别装置中,所述卷积神经网络识别模块进一步被配置为所述卷积神经网络包括卷积层和逻辑回归层,所述卷积神经网络的输入为所述子图块,所述卷积层输出作为所述子图块的特征的特征向量,所述逻辑回归层根据所述特征向量输出所述概率值。
更进一步地,上述毫米波图像自动目标识别装置中,所述卷积神经网络识别模块进一步被配置为设定第二方差阈值,将小于该第二方差阈值的所述子图块从所述卷积神经网络的输入中排除,同时相应输出的概率值为零。
进一步地,本发明所述的毫米波图像自动目标识别装置中,所述概率累计图模块进一步被配置为将所述概率值在待目标识别的毫米波图像的对应位置累积叠加,得到概率累计图IPA(x,y)。
更进一步地,上述毫米波图像自动目标识别装置还包括潜在目标提取模块,其被配置为基于所述概率累计图IPA(x,y),通过一个硬阈值THprob获得对应的二值图像B1(x,y),以基于该二值图像B1(x,y)进行目标标注,其中:
更进一步地,上述毫米波图像自动目标识别装置还包括目标精确定位与虚警去除模块,其被配置为:对于二值图像B1(x,y)的每个连通区域,根据该连通区域的最大概率累计值max_prob和面积S,计算出一个自适应阈值THadap
THadap=min(THm,a×max_prob+b×S),
其中,THm为自适应阈值的上限,a和b均为常数;
基于所述概率累计图IPA(x,y),对所述二值图像B1(x,y)进行目标精确定位与虚警去除获得二值图像B2(x,y),以基于该二值图像B2(x,y)进行目标标注,其中:
更进一步地,上述毫米波图像自动目标识别装置还包括面积阈值去噪模块,其被配置为:将所述二值图像B2(x,y)中面积小于面积阈值THarea的连通区域删除,得到二值图像B3(x,y),以基于该二值图像B3(x,y)进行目标标注。
更进一步地,上述毫米波图像自动目标识别装置中,所述目标标注模块进一步被配置为在所述二值图像B3(x,y)的各连通区域对应的待目标识别的毫米波图像的位置上用矩形框进行目标标注。
本发明所述的毫米波图像自动目标识别方法和装置具有以下优点和有益效果:
(1)适用于毫米波图像的自动目标识别,具有良好的目标识别效果,解决了现有技术中对毫米波图像采用传统的手工设计特征难以取得良好的检测效果的问题。
(2)卷积神经网络具有优秀的特征提取能力,且能够实现端到端的识别,对应的算法检测速度快、识别准确率高。
(3)实现目标精确定位,并减少虚警。
(4)提高安检效率,减少人力成本。
附图说明
图1本发明所述的毫米波图像自动目标识别装置在一种实施方式下的用于得到经训练的卷积神经网络的模块结构框图。
图2本发明所述的毫米波图像自动目标识别方法在一种实施方式下的得到经训练的卷积神经网络的流程图。
图3本发明所述的毫米波图像自动目标识别装置在一种实施方式下的模块结构框图。
图4本发明所述的毫米波图像自动目标识别方法在一种实施方式下的流程图。
图5为本实施例的待目标识别的毫米波图像。
图6为本实施例的待目标识别的毫米波图像的概率累计图。
图7为本实施例的待目标识别的毫米波图像的二值图像B1(x,y)。
图8为本实施例的待目标识别的毫米波图像的二值图像B2(x,y)。
图9为本实施例的待目标识别的毫米波图像的二值图像B3(x,y)。
图10为本实施例的待目标识别的毫米波图像的识别结果。
具体实施方式
下面将结合说明书附图和具体的实施例对本发明所述的毫米波图像自动目标识别方法和装置做进一步的详细说明。
本实施例装置为运行在计算机中的软件模块。本实施例中,待目标识别的毫米波图像为人体毫米波图像。
图1显示了本发明所述的毫米波图像自动目标识别装置在一种实施方式下的用于得到经训练的卷积神经网络的模块结构。图2显示了本发明所述的毫米波图像自动目标识别方法在一种实施方式下的得到经训练的卷积神经网络的流程。图3显示了本发明所述的毫米波图像自动目标识别装置在一种实施方式下的模块结构。图4显示了本发明所述的毫米波图像自动目标识别方法在一种实施方式下的流程。图5显示了本实施例的待目标识别的毫米波图像。图6-图10分别显示了本实施例的识别过程中产生的待目标识别的毫米波图像的概率累计图、二值图像B1(x,y)、二值图像B2(x,y)、二值图像B3(x,y)以及识别结果。
如图1所示,本实施例的毫米波图像自动目标识别装置包括用于得到经训练的卷积神经网络的依次连接的训练样本获取模块8、卷积神经网络训练模块9。其中各模块被配置为具有实现以下相应流程的功能。
如图2所示,结合参考图1,本实施例的毫米波图像自动目标识别方法中用于得到经训练的卷积神经网络的方法通过上述装置中相应的模块实现,其流程包括:
步骤210:通过训练样本获取模块8获取训练样本,该训练样本为经图像标注的毫米波图像的子图块样本,该子图块样本被区分为正样本和负样本,其中,正样本表示其包含目标,负样本表示其不包含目标。
该步骤中,对于采集到的毫米波图像,用图像标注标出每个目标的位置。每个图像标注是一个矩形框,用一个四维向量表示,四维向量分别为目标最上端所在行号、目标最下端所在行号、目标最左端所在列号、目标最右端所在列号。对于所采集的毫米波图像,利用滑动窗口在毫米波图像中滑动。滑动窗口尺寸为28×28像素,滑动步长为2像素。对于滑动窗口获得的子图块,计算它与图像标注的IoU,用于表明子图块与图像标注的重合程度。IoU值较大的子图块被判为正样本,表明子图块包含目标;IoU值较小的子图块被判为负样本,表明子图块不包含目标。对于滑动窗口获得的子图块,其被判为正样本和负样本的准则如下:
正样本:方差大于THvar,与图像标注的IoU≥THiou
负样本:方差大于THvar,与图像标注的IoU<THiou
其中THvar为方差阈值,THiou为IoU阈值。本实施例中,THvar取为200,THiou取为0.05。对于每一个正样本,做样本增强:先做左右翻转,再对原子图块以及左右翻转之后的子图块分别做上下翻转。翻转后的子图块也归类为正样本。对于数量较多的一类样本,做随机下采样,使得用于训练的正样本和负样本的数量保持一致。
步骤220:通过卷积神经网络训练模块9基于上述训练样本训练卷积神经网络,得到经训练的卷积神经网络。
该步骤中,对于获得的正样本和负样本,按照8:1:1的比例分成训练集、验证集和测试集。训练集用于训练卷积神经网络,验证集用于在训练的过程中观察卷积神经网络的损失函数是否收敛,以判断是否终止训练,测试集用于测试卷积神经网络对子图块的分类准确率。采用随机梯度下降法训练卷积神经网络,直到神经网络的损失函数收敛到最小值。
如图3所示,本实施例的毫米波图像自动目标识别装置还包括依次连接的图像划分模块1、卷积神经网络识别模块2、概率累计图模块3、潜在目标提取模块4、目标精确定位与虚警去除模块5、面积阈值去噪模块6以及目标标注模块7。其中各模块被配置为具有实现以下相应流程的功能。
如图4所示,结合参考图3,本实施例的毫米波图像自动目标识别方法通过上述装置中相应的模块实现,其流程包括:
步骤110:通过图像划分模块1获取待目标识别的毫米波图像的子图块。
该步骤中,对于输入的毫米波图像(如图5所示),利用滑动窗口在毫米波图像中滑动。滑动窗口尺寸为28×28像素,滑动步长为2像素。
步骤120:通过卷积神经网络识别模块2基于经训练的卷积神经网络获取子图块包含目标的概率值。
该步骤中,对于上述滑动窗口获得的子图块,如果其方差小于方差阈值THvar,则不需要将其输入所述卷积神经网络,而是直接将该子图块存在目标的概率置为0。如果其方差不小于方差阈值THvar,则将其输入卷积神经网络。卷积神经网络卷积层之后输出一个特征向量,该向量为子图块的特征。卷积神经网络的最后一层为逻辑回归层,将特征向量输入逻辑回归层,可以获得该子图块存在目标的概率值。
步骤130:通过概率累计图模块3基于概率值获取待目标识别的毫米波图像的概率累计图。
该步骤中,对于各子图块,将其概率值在毫米波图像对应位置累积叠加,得到概率累计图IPA(x,y),如图6所示。
步骤140:通过潜在目标提取模块4基于所述概率累计图IPA(x,y),通过一个硬阈值THprob获得对应的二值图像B1(x,y)。
该步骤中,对于所得到的概率累积图IPA(x,y),通过一个硬阈值THprob获得对应的二值图像B1(x,y):
B1(x,y)如图7所示,每个连通区域代表一个潜在目标。本实施例中,THprob取为98。
步骤150:通过目标精确定位与虚警去除模块5基于所述概率累计图IPA(x,y),对所述二值图像B1(x,y)进行目标精确定位与虚警去除获得二值图像B2(x,y)。
该步骤中,对于二值图像B1(x,y)的每个连通区域,根据该连通区域的最大概率累积值max_prob和面积S,计算出一个自适应阈值THadap
THadap=min(THm,a×max_prob+b×S)
其中,THm为自适应阈值的上限,a和b均为常数。在实施过程中,THm取为150,a取为1,b取为-0.02。对于二值图像B1(x,y),通过如下操作进行目标精确定位与虚警去除,获得二值图像B2(x,y):
B2(x,y)如图8所示。
步骤160:通过面积阈值去噪模块6将所述二值图像B2(x,y)中面积小于面积阈值THarea的连通区域删除,得到二值图像B3(x,y)。
该步骤中,对于二值图像B2(x,y),采用面积阈值去噪法,将面积小于阈值THarea的连通区域从B2(x,y)中删除,得到二值图像B3(x,y),如图9所示。本实施例中,THarea取为40。
步骤170:通过目标标注模块7在所述二值图像B3(x,y)的各连通区域对应的待目标识别的毫米波图像的位置上用矩形框进行目标标注。
该步骤中,对于二值图像B3(x,y),在各连通区域对应的毫米波图像位置上,用一个尽量小的矩形框将目标标注出来,如图10所示。矩形框的上边界为B3(x,y)连通区域最上端所在行,下边界为B3(x,y)连通区域最下端所在行,左边界为B3(x,y)连通区域最左端所在列,右边界为B3(x,y)连通区域最右端所在列。
要注意的是,以上列举的仅为本发明的具体实施例,显然本发明不限于以上实施例,随之有着许多的类似变化。本领域的技术人员如果从本发明公开的内容直接导出或联想到的所有变形,均应属于本发明的保护范围。

Claims (24)

1.一种毫米波图像自动目标识别方法,包括以下步骤:
(1)获取待目标识别的毫米波图像的子图块;
(2)基于经训练的卷积神经网络获取所述子图块包含目标的概率值;
(3)基于所述概率值获取待目标识别的毫米波图像的概率累计图;
(4)基于所述概率累计图进行目标标注,以完成对待目标识别的毫米波图像的目标识别。
2.如权利要求1所述的毫米波图像自动目标识别方法,其特征在于,所述步骤(2)中经训练的卷积神经网络通过以下步骤得到:
(2a)获取训练样本,所述训练样本为经图像标注的毫米波图像的子图块样本,该子图块样本被区分为正样本和负样本,其中,正样本表示其包含目标,负样本表示其不包含目标;
(2b)基于所述训练样本训练卷积神经网络。
3.如权利要求2所述的毫米波图像自动目标识别方法,其特征在于,所述步骤(2a)中,根据所述子图块样本与所述图像标注的重合程度区分正样本和负样本:设定一重合程度阈值,将不小于该重合程度阈值的子图块样本区分为正样本,将小于该重合程度阈值的子图块样本区分为负样本。
4.如权利要求3所述的毫米波图像自动目标识别方法,其特征在于,设定第一方差阈值,将不大于该第一方差阈值的正样本和负样本排除。
5.如权利要求3所述的毫米波图像自动目标识别方法,其特征在于,对所述正样本进行样本增强处理。
6.如权利要求1所述的毫米波图像自动目标识别方法,其特征在于,所述步骤(2)中卷积神经网络包括卷积层和逻辑回归层,所述卷积神经网络的输入为步骤(1)中的所述子图块,所述卷积层输出作为所述子图块的特征的特征向量,所述逻辑回归层根据所述特征向量输出步骤(2)中的所述概率值。
7.如权利要求6所述的毫米波图像自动目标识别方法,其特征在于,设定第二方差阈值,将小于该第二方差阈值的步骤(1)中的所述子图块从所述卷积神经网络的输入中排除,同时相应输出的概率值为零。
8.如权利要求1所述的毫米波图像自动目标识别方法,其特征在于,所述步骤(3)中将所述概率值在待目标识别的毫米波图像的对应位置累积叠加,得到概率累计图IPA(x,y)。
9.如权利要求8所述的毫米波图像自动目标识别方法,其特征在于,所述步骤(4)中基于所述概率累计图IPA(x,y),通过一个硬阈值THprob获得对应的二值图像B1(x,y),以基于该二值图像B1(x,y)进行目标标注,其中:
B 1 ( x , y ) = 1 I P A ( x , y ) &GreaterEqual; TH p r o b 0 I P A ( x , y ) < TH p r o b .
10.如权利要求9所述的毫米波图像自动目标识别方法,其特征在于,对于二值图像B1(x,y)的每个连通区域,根据该连通区域的最大概率累计值max_prob和面积S,计算出一个自适应阈值THadap
THadap=min(THm,a×max_prob+b×S),
其中,THm为自适应阈值的上限,a和b均为常数;
基于所述概率累计图IPA(x,y),对所述二值图像B1(x,y)进行目标精确定位与虚警去除获得二值图像B2(x,y),以基于该二值图像B2(x,y)进行目标标注,其中:
B 2 ( x , y ) = { 1 I P A ( x , y ) &GreaterEqual; TH a d a p , B 1 ( x , y ) = 1 0 I P A ( x , y ) < TH a d a p , B 1 ( x , y ) = 1 .
11.如权利要求10所述的毫米波图像自动目标识别方法,其特征在于,将所述二值图像B2(x,y)中面积小于面积阈值THarea的连通区域删除,得到二值图像B3(x,y),以基于该二值图像B3(x,y)进行目标标注。
12.如权利要求11所述的毫米波图像自动目标识别方法,其特征在于,在所述二值图像B3(x,y)的各连通区域对应的待目标识别的毫米波图像的位置上用矩形框进行目标标注。
13.一种毫米波图像自动目标识别装置,其包括:
图像划分模块,其被配置为获取待目标识别的毫米波图像的子图块;
卷积神经网络识别模块,其被配置为基于经训练的卷积神经网络获取所述子图块包含目标的概率值;
概率累计图模块,其被配置为基于所述概率值获取待目标识别的毫米波图像的概率累计图;
目标标注模块,其被配置为基于所述概率累计图进行目标标注,以完成对待目标识别的毫米波图像的目标识别。
14.如权利要求13所述的毫米波图像自动目标识别装置,其特征在于,还包括:
训练样本获取模块,其被配置为获取训练样本,所述训练样本为经图像标注的毫米波图像的子图块样本,该子图块样本被区分为正样本和负样本,其中,正样本表示其包含目标,负样本表示其不包含目标;
卷积神经网络训练模块,其被配置为基于所述训练样本训练卷积神经网络,得到所述经训练的卷积神经网络。
15.如权利要求14所述的毫米波图像自动目标识别装置,其特征在于,所述训练样本获取模块进一步被配置为根据所述子图块样本与所述图像标注的重合程度区分正样本和负样本:设定一重合程度阈值,将不小于该重合程度阈值的子图块样本区分为正样本,将小于该重合程度阈值的子图块样本区分为负样本。
16.如权利要求15所述的毫米波图像自动目标识别装置,其特征在于,所述训练样本获取模块进一步被配置为设定第一方差阈值,将不大于该第一方差阈值的正样本和负样本排除。
17.如权利要求15所述的毫米波图像自动目标识别装置,其特征在于,所述训练样本获取模块进一步被配置为对所述正样本进行样本增强处理。
18.如权利要求13所述的毫米波图像自动目标识别装置,其特征在于,所述卷积神经网络识别模块进一步被配置为所述卷积神经网络包括卷积层和逻辑回归层,所述卷积神经网络的输入为所述子图块,所述卷积层输出作为所述子图块的特征的特征向量,所述逻辑回归层根据所述特征向量输出所述概率值。
19.如权利要求18所述的毫米波图像自动目标识别装置,其特征在于,所述卷积神经网络识别模块进一步被配置为设定第二方差阈值,将小于该第二方差阈值的所述子图块从所述卷积神经网络的输入中排除,同时相应输出的概率值为零。
20.如权利要求13所述的毫米波图像自动目标识别装置,其特征在于,所述概率累计图模块进一步被配置为将所述概率值在待目标识别的毫米波图像的对应位置累积叠加,得到概率累计图IPA(x,y)。
21.如权利要求20所述的毫米波图像自动目标识别装置,其特征在于,还包括潜在目标提取模块,其被配置为基于所述概率累计图IPA(x,y),通过一个硬阈值THprob获得对应的二值图像B1(x,y),以基于该二值图像B1(x,y)进行目标标注,其中:
B 1 ( x , y ) = 1 I P A ( x , y ) &GreaterEqual; TH p r o b 0 I P A ( x , y ) < TH p r o b .
22.如权利要求21所述的毫米波图像自动目标识别装置,其特征在于,还包括目标精确定位与虚警去除模块,其被配置为:对于二值图像B1(x,y)的每个连通区域,根据该连通区域的最大概率累计值max_prob和面积S,计算出一个自适应阈值THadap
THadap=min(THm,a×max_prob+b×S),
其中,THm为自适应阈值的上限,a和b均为常数;
基于所述概率累计图IPA(x,y),对所述二值图像B1(x,y)进行目标精确定位与虚警去除获得二值图像B2(x,y),以基于该二值图像B2(x,y)进行目标标注,其中:
B 2 ( x , y ) = { 1 I P A ( x , y ) &GreaterEqual; TH a d a p , B 1 ( x , y ) = 1 0 I P A ( x , y ) < TH a d a p , B 1 ( x , y ) = 1 .
23.如权利要求22所述的毫米波图像自动目标识别装置,其特征在于,还包括面积阈值去噪模块,其被配置为:将所述二值图像B2(x,y)中面积小于面积阈值THarea的连通区域删除,得到二值图像B3(x,y),以基于该二值图像B3(x,y)进行目标标注。
24.如权利要求23所述的毫米波图像自动目标识别装置,其特征在于,所述目标标注模块进一步被配置为在所述二值图像B3(x,y)的各连通区域对应的待目标识别的毫米波图像的位置上用矩形框进行目标标注。
CN201611039274.7A 2016-11-21 2016-11-21 一种毫米波图像自动目标识别方法及装置 Active CN106529602B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611039274.7A CN106529602B (zh) 2016-11-21 2016-11-21 一种毫米波图像自动目标识别方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611039274.7A CN106529602B (zh) 2016-11-21 2016-11-21 一种毫米波图像自动目标识别方法及装置

Publications (2)

Publication Number Publication Date
CN106529602A true CN106529602A (zh) 2017-03-22
CN106529602B CN106529602B (zh) 2019-08-13

Family

ID=58356283

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611039274.7A Active CN106529602B (zh) 2016-11-21 2016-11-21 一种毫米波图像自动目标识别方法及装置

Country Status (1)

Country Link
CN (1) CN106529602B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108182454A (zh) * 2018-01-18 2018-06-19 苏州大学 安检识别系统及其控制方法
CN108804988A (zh) * 2017-05-04 2018-11-13 上海荆虹电子科技有限公司 一种遥感影像场景分类方法及装置
CN109345472A (zh) * 2018-09-11 2019-02-15 重庆大学 一种复杂场景的红外运动小目标检测方法
CN109544563A (zh) * 2018-11-12 2019-03-29 北京航空航天大学 一种面向违禁物安检的被动毫米波图像人体目标分割方法
CN109557114A (zh) * 2017-09-25 2019-04-02 清华大学 检查方法和检查设备以及计算机可读介质
CN109597069A (zh) * 2018-12-25 2019-04-09 山东雷诚电子科技有限公司 一种主动毫米波成像隐私保护方法
CN109740588A (zh) * 2018-12-24 2019-05-10 中国科学院大学 基于弱监督和深度响应重分配的x光图片违禁品定位方法
CN109884721A (zh) * 2018-12-10 2019-06-14 深圳极视角科技有限公司 基于人工智能的安检违禁物品检测方法、装置及电子设备
CN109886157A (zh) * 2019-01-30 2019-06-14 杭州芯影科技有限公司 一种基于毫米波图像的人脸识别方法及系统
CN109893160A (zh) * 2019-04-02 2019-06-18 晓智科技(成都)有限公司 一种x光被测对象姿态调整辅助方法
CN111539242A (zh) * 2018-11-15 2020-08-14 杭州芯影科技有限公司 毫米波成像图像处理方法
CN111539251A (zh) * 2020-03-16 2020-08-14 重庆特斯联智慧科技股份有限公司 一种基于深度学习的安检物品识别方法和系统
CN111967579A (zh) * 2020-02-24 2020-11-20 北京爱芯科技有限公司 使用卷积神经网络对图像进行卷积计算的方法和装置
CN112597989A (zh) * 2020-12-18 2021-04-02 中国科学院上海微系统与信息技术研究所 毫米波三维全息图像隐匿物品检测方法及系统
CN115311684A (zh) * 2022-08-05 2022-11-08 杭州电子科技大学 一种毫米波图像多角度检出结果的整合方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104680491A (zh) * 2015-02-28 2015-06-03 西安交通大学 一种基于深度神经网络的图像非均匀运动模糊去除方法
CN105160681A (zh) * 2015-09-09 2015-12-16 浙江海洋学院 一种海面溢油监测方法及装置
CN105608456A (zh) * 2015-12-22 2016-05-25 华中科技大学 一种基于全卷积网络的多方向文本检测方法
CN105844228A (zh) * 2016-03-21 2016-08-10 北京航空航天大学 一种基于卷积神经网络的遥感图像云检测方法
US20160252646A1 (en) * 2015-02-27 2016-09-01 The Government Of The United States Of America, As Represented By The Secretary, Department Of System and method for viewing images on a portable image viewing device related to image screening
CN106097355A (zh) * 2016-06-14 2016-11-09 山东大学 基于卷积神经网络的胃肠道肿瘤显微高光谱图像处理方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160252646A1 (en) * 2015-02-27 2016-09-01 The Government Of The United States Of America, As Represented By The Secretary, Department Of System and method for viewing images on a portable image viewing device related to image screening
CN104680491A (zh) * 2015-02-28 2015-06-03 西安交通大学 一种基于深度神经网络的图像非均匀运动模糊去除方法
CN105160681A (zh) * 2015-09-09 2015-12-16 浙江海洋学院 一种海面溢油监测方法及装置
CN105608456A (zh) * 2015-12-22 2016-05-25 华中科技大学 一种基于全卷积网络的多方向文本检测方法
CN105844228A (zh) * 2016-03-21 2016-08-10 北京航空航天大学 一种基于卷积神经网络的遥感图像云检测方法
CN106097355A (zh) * 2016-06-14 2016-11-09 山东大学 基于卷积神经网络的胃肠道肿瘤显微高光谱图像处理方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
PAUL E. KELLER 等: "Use of a Neural Network to Identify Man-made Structure in Millimeter-Wave Images for Security Screening Applications", 《2006 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS》 *
施荣: "基于深度卷积神经网络的毫米波图像目标检测方法研究", 《中国优秀硕士学位论文全文数据库》 *

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108804988A (zh) * 2017-05-04 2018-11-13 上海荆虹电子科技有限公司 一种遥感影像场景分类方法及装置
CN108804988B (zh) * 2017-05-04 2020-11-20 深圳荆虹科技有限公司 一种遥感影像场景分类方法及装置
CN109557114A (zh) * 2017-09-25 2019-04-02 清华大学 检查方法和检查设备以及计算机可读介质
CN109557114B (zh) * 2017-09-25 2021-07-16 清华大学 检查方法和检查设备以及计算机可读介质
CN108182454B (zh) * 2018-01-18 2021-07-30 南栖仙策(南京)科技有限公司 安检识别系统及其控制方法
CN108182454A (zh) * 2018-01-18 2018-06-19 苏州大学 安检识别系统及其控制方法
CN109345472A (zh) * 2018-09-11 2019-02-15 重庆大学 一种复杂场景的红外运动小目标检测方法
CN109345472B (zh) * 2018-09-11 2021-07-06 重庆大学 一种复杂场景的红外运动小目标检测方法
CN109544563A (zh) * 2018-11-12 2019-03-29 北京航空航天大学 一种面向违禁物安检的被动毫米波图像人体目标分割方法
CN109544563B (zh) * 2018-11-12 2021-08-17 北京航空航天大学 一种面向违禁物安检的被动毫米波图像人体目标分割方法
CN111539242A (zh) * 2018-11-15 2020-08-14 杭州芯影科技有限公司 毫米波成像图像处理方法
CN109884721A (zh) * 2018-12-10 2019-06-14 深圳极视角科技有限公司 基于人工智能的安检违禁物品检测方法、装置及电子设备
CN109740588B (zh) * 2018-12-24 2020-06-09 中国科学院大学 基于弱监督和深度响应重分配的x光图片违禁品定位方法
CN109740588A (zh) * 2018-12-24 2019-05-10 中国科学院大学 基于弱监督和深度响应重分配的x光图片违禁品定位方法
CN109597069A (zh) * 2018-12-25 2019-04-09 山东雷诚电子科技有限公司 一种主动毫米波成像隐私保护方法
CN109886157A (zh) * 2019-01-30 2019-06-14 杭州芯影科技有限公司 一种基于毫米波图像的人脸识别方法及系统
CN109893160A (zh) * 2019-04-02 2019-06-18 晓智科技(成都)有限公司 一种x光被测对象姿态调整辅助方法
CN111967579A (zh) * 2020-02-24 2020-11-20 北京爱芯科技有限公司 使用卷积神经网络对图像进行卷积计算的方法和装置
CN111539251B (zh) * 2020-03-16 2021-03-19 重庆特斯联智慧科技股份有限公司 一种基于深度学习的安检物品识别方法和系统
CN111539251A (zh) * 2020-03-16 2020-08-14 重庆特斯联智慧科技股份有限公司 一种基于深度学习的安检物品识别方法和系统
CN112597989A (zh) * 2020-12-18 2021-04-02 中国科学院上海微系统与信息技术研究所 毫米波三维全息图像隐匿物品检测方法及系统
CN115311684A (zh) * 2022-08-05 2022-11-08 杭州电子科技大学 一种毫米波图像多角度检出结果的整合方法

Also Published As

Publication number Publication date
CN106529602B (zh) 2019-08-13

Similar Documents

Publication Publication Date Title
CN106529602A (zh) 一种毫米波图像自动目标识别方法及装置
Aquino et al. A new methodology for estimating the grapevine-berry number per cluster using image analysis
US9741116B2 (en) System and method for boundary classification and automatic polyp detection
CN109522853B (zh) 面向监控视频的人脸检测与搜索方法
CN102194114B (zh) 一种基于边缘梯度方向金字塔直方图的虹膜识别方法
CN108416336A (zh) 一种智慧社区人脸识别的方法和系统
CN107220649A (zh) 一种素色布匹缺陷检测和分类方法
Tajbakhsh et al. A classification-enhanced vote accumulation scheme for detecting colonic polyps
CN105320962B (zh) 一种基于分类器集成的路面破损类型识别方法
Zhou et al. Seed-based approach for automated crack detection from pavement images
CN108288279A (zh) 一种基于x光图像前景目标提取的物品甄别方法
Tajbakhsh et al. Automatic polyp detection from learned boundaries
CN106326834A (zh) 人体性别自动识别方法及装置
CN108108740B (zh) 一种主动毫米波人体图像性别识别方法
Rodriguez-Damian et al. Pollen classification using brightness-based and shape-based descriptors
Gupta et al. Adaptive thresholding for skin lesion segmentation using statistical parameters
Li et al. Seatbelt detection based on cascade adaboost classifier
Liu et al. Automatic grape bunch detection in vineyards for precise yield estimation
Salazar-Licea et al. Automatic segmentation of mammograms using a Scale-Invariant Feature Transform and K-means clustering algorithm
CN102129569A (zh) 基于多尺度对比特征的对象检测设备和方法
CN110363192A (zh) 物件影像辨识系统及物件影像辨识方法
Hadi et al. Automatic human ear detection approach using modified adaptive search window technique
Melouah A novel region growing segmentation algorithm for mass extraction in mammograms
Shareef et al. Finger vein recognition using haar wavelet transform
Najafi et al. A new iris identification method based on ridgelet transform

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant