CN113627310B - 一种背景与尺度感知的sar舰船目标检测方法 - Google Patents
一种背景与尺度感知的sar舰船目标检测方法 Download PDFInfo
- Publication number
- CN113627310B CN113627310B CN202110891175.6A CN202110891175A CN113627310B CN 113627310 B CN113627310 B CN 113627310B CN 202110891175 A CN202110891175 A CN 202110891175A CN 113627310 B CN113627310 B CN 113627310B
- Authority
- CN
- China
- Prior art keywords
- parameter
- scale
- image
- convolution
- sar
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 92
- 230000006870 function Effects 0.000 claims abstract description 47
- 238000012549 training Methods 0.000 claims abstract description 42
- 238000000605 extraction Methods 0.000 claims abstract description 34
- 230000008447 perception Effects 0.000 claims abstract description 29
- 238000013528 artificial neural network Methods 0.000 claims abstract description 22
- 238000004873 anchoring Methods 0.000 claims abstract description 19
- 238000000034 method Methods 0.000 claims description 25
- 238000004364 calculation method Methods 0.000 claims description 10
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 238000012546 transfer Methods 0.000 claims description 2
- 238000012544 monitoring process Methods 0.000 abstract description 3
- 238000013527 convolutional neural network Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000010606 normalization Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Life Sciences & Earth Sciences (AREA)
- Molecular Biology (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Radar Systems Or Details Thereof (AREA)
- Image Analysis (AREA)
Abstract
本申请公开了一种背景与尺度感知的SAR舰船目标检测方法，该方法包括：根据预设空洞卷积扩张率和预设卷积核大小，组成多组并行的背景特征提取模块，任一组背景特征提取模块的输入端连接于金字塔型卷积神经网络的第一层卷积层，背景特征提取模块的输出端与金字塔卷积神经网络的输出端串接，以生成初始检测模型；根据待识别舰船目标的边界框和锚定框，确定初始检测模型的尺度感知损失函数，并基于尺度感知损失函数与多尺度图像集，对初始检测模型进行迭代训练，确定训练好的检测模型；利用训练好的检测模型，检测SAR图像中的舰船。通过本申请中的技术方案，充分利用背景信息，有效降低了SAR图像监测的虚警率，提升了SAR图像中小目标的检测率。
Description
技术领域
本申请涉及合成孔径雷达目标检测的技术领域，具体而言，涉及一种背景与尺度感知的SAR舰船目标检测方法。
背景技术
海面舰船目标检测在海洋监管、渔业管理、船只搜救、海洋军事等领域有着广泛应用。合成孔径雷达(SAR，Synthetic Aperture Radar)具有全天时、全天候和大幅宽的特性，使得其在复杂的环境下也能对广阔海域进行成像，是海洋监控和海洋情报提取的重要信息来源。随着星载SAR和机载SAR传感器越来越多，对海SAR数据日益增加，急需一种快速实现SAR舰船目标检测的智能算法。得益于高速并行计算硬件(GPU、TPU、DPU等)和深度学习算法的快速发展，实现快速高精度舰船检测算法成为可能。
然而，现有的SAR图像舰船目标检测面临两个主要难点：
1)在海岸线、港口和岛礁附近对舰船进行检测时，陆地上的强散射物会形成强杂波，带来高虚警率。
2)中小渔船在海洋总船只数量中占比最大，而中小渔船尺寸较小，在SAR图像中占据较少像素，而小尺寸目标在神经网络传输过程中，信息容易丢失，造成较高的漏检率。
发明内容
本申请的目的在于：针对现有SAR舰船目标检测方法在陆地上虚警率高，以及对小尺寸舰船目标漏检率高的难题，提供一种背景与尺度感知的SAR舰船目标检测方法，该方法可以为基于SAR的海洋监管和海洋态势信息获取提供核心技术支撑。
本申请的技术方案是：提供了一种背景与尺度感知的SAR舰船目标检测方法，该方法适用于合成孔径雷达，方法包括：步骤1，根据预设空洞卷积扩张率和预设卷积核大小，组成多组并行的背景特征提取模块，任一组背景特征提取模块的输入端连接于金字塔型卷积神经网络的第一层卷积层，背景特征提取模块的输出端与金字塔卷积神经网络的输出端串接，以生成初始检测模型；步骤2，根据待识别舰船目标的边界框和锚定框，确定初始检测模型的尺度感知损失函数，并基于尺度感知损失函数与多尺度图像集，对初始检测模型进行迭代训练，确定训练好的检测模型；步骤3，利用训练好的检测模型，检测SAR图像中的舰船。
上述任一项技术方案中，进一步地，步骤2中，根据待识别舰船目标的边界框和锚定框，确定初始检测模型的尺度感知损失函数，具体包括：步骤201，通过计算真值框与锚定框的重叠率确定正负样本；步骤202，对预测框参数和真值框参数进行参数转换；步骤203，根据待识别舰船目标在SAR图像上的尺寸，计算目标在损失函数中的权重；步骤204，结合选择参数，确定尺度感知损失函数，其中，选择参数的取值由边界框与锚定框的重叠率确定。
上述任一项技术方案中，进一步地，选择参数包括第一选择参数和第二选择参数，选择参数取值的确定方法，具体包括：判断边界框与锚定框之间的重叠率是否为最大值，若是，将第一选择参数的取值设定为1，否则，将第一选择参数的取值设定为0；判断边界框与锚定框之间的重叠率是否小于重叠阈值且第一选择参数的取值为1，若是，将第二选择参数的取值设定为1，否则，将第二选择参数的取值设定为0。
上述任一项技术方案中，进一步地，选择参数包括第一选择参数和第二选择参数，尺度感知损失函数的计算公式为：
式中，L为尺度感知损失函数，i是锚定框的序号，M是锚定框的数量，j是SAR图像中待识别舰船目标的序号，N是SAR图像中待识别舰船目标的数量，为第一选择参数，为第二选择参数，σ()为坐标值转换函数，/>为第i个锚定框的x坐标，/>为第i个锚定框的y坐标，/>为第i个锚定框中经过坐标值转换的x坐标，/>为第i个锚定框中经过坐标值转换的y坐标，/>为第j个边界框中经过参数值转换的x轴坐标，/>为第j个边界框中经过参数值转换的y轴坐标，/>为第i个锚定框中的宽度参数，/>为第j个边界框中经过参数值转换的宽度参数，/>为第i个锚定框中的高度参数，/>为第j个边界框中经过参数值转换的高度参数，/>为第i个锚定框中的置信度参数，pj为第j个待识别舰船目标的权重。
上述任一项技术方案中，进一步地，待识别舰船目标的权重的计算公式：
式中，pj为权重，wj为待识别舰船目标在SAR图像上的宽度参数，hj为待识别舰船目标在SAR图像上的高度参数，W为SAR图像的宽度参数，H为SAR图像的高度参数，j为待识别舰船目标的边界框的标号。
上述任一项技术方案中，进一步地，多尺度图像集中包括多张图像尺寸一致的样本图像和尺寸参数集，尺寸参数集中设置有多个图像尺寸，步骤2中，基于尺度感知损失函数与多尺度图像集，对初始检测模型进行迭代训练，具体包括：步骤211，在每一次迭代训练中，随机在尺寸参数集中抽取任一图像尺寸，并根据抽取出的图像尺寸，在原始SAR图像上随机位置处按照抽取的图像尺寸进行裁剪，得到样本图像；步骤212，将裁剪后的样本图像缩放至预设图像尺寸；步骤213，根据预设的批大小(batch size)，迭代上述步骤，得到一批次训练图像；步骤214，基于尺度感知损失函数与一批次训练图像，采用迭代训练方法，对初始检测模型进行训练。
上述任一项技术方案中，进一步地，初始检测模型中包含至少三个背景特征提取模块，每个背景特征提取模块由至少三路空洞卷积通道组成，每路空洞卷积通道包含卷积核大小为1×9和9×1的两个卷积层，至少三路空洞卷积通道的扩张率分别为1、5、9，至少三路空洞卷积的输出先相互串接后再与各自对应的金字塔型卷积神经网络卷积特征串接。
本申请的有益效果是：
本申请中的技术方案，设计了具有背景感知功能的检测模型，作为舰船检测网络模型，充分利用SAR图像中的背景信息，有效降低了SAR图像中舰船目标检测的虚警率，并提高了在SAR图像中舰船目标检测的检测率，为基于SAR图像的海洋监管和海洋态势信息获取提供核心技术支撑。
在本申请的一个优选实现方式中，还根据不同的选择参数取值，设计了独特的尺度感知损失函数，使得检测模型在训练过程中能够更加关注小目标的检测，进而提升SAR图像中小目标检测率；并采用了不同于常规的多尺度训练策略，在保证多尺度训练的同时，使每次输入检测网络的图像尺寸大小固定，保证每次迭代所需时间以及所需硬件资源保持一致，优化了SAR图像的检测性能。
附图说明
本申请的上述和/或附加方面的优点在结合下面附图对实施例的描述中将变得明显和容易理解，其中：
图1是根据本申请的一个实施例的背景与尺度感知的SAR舰船目标检测方法的示意流程图；
图2是根据本申请的一个实施例的初始检测模型的示意框图；
图3是根据本申请的一个实施例的多路并行的空洞卷积通道的示意图；
图4是根据本申请的一个实施例的残差网络的示意框图；
图5是根据本申请的一个实施例的样本图像裁剪、缩放的示意图。
具体实施方式
为了能够更清楚地理解本申请的上述目的、特征和优点，下面结合附图和具体实施方式对本申请进行进一步的详细描述。需要说明的是，在不冲突的情况下，本申请的实施例及实施例中的特征可以相互结合。
在下面的描述中，阐述了很多具体细节以便于充分理解本申请，但是，本申请还可以采用其他不同于在此描述的其他方式来实施，因此，本申请的保护范围并不受下面公开的具体实施例的限制。
需要说明的是，SAR舰船目标有如下特点：1)海岸线、港口、岛礁附近陆地上强散射物体很容易形成强干扰，造成大量虚假舰船检测结果；2)大量中小型渔船和货船在SAR图像中尺寸较小，在神经网络传输过程中容易丢失信息，造成漏检。
因此，为了降低虚警，本实施例中的检测方法，通过设置多路并行背景特征提取模块，每一路背景特征提取模块中设置有至少三路空洞卷积通道，以便提取SAR图像中虚假目标背景特征，利用背景特征辅助剔除虚假目标，并重新定义了尺度感知损失函数，使模型在训练过程中更关注小目标，提升小目标检测率，进而提高SAR图像中舰船目标检测的准确度，避免高虚警率。
如图1所示，本实施例提供了一种背景与尺度感知的SAR舰船目标检测方法，适用于合成孔径雷达，该方法包括：
步骤1，根据预设空洞卷积扩张率和预设卷积核大小，组成多组并行的背景特征提取模块，任一组背景特征提取模块的输入端连接于金字塔型卷积神经网络的第一层卷积层，以便从第一层卷积层获取背景特征，背景特征提取模块的输出端与金字塔卷积神经网络的输出端串接，即背景特征提取模块的输出与金字塔卷积神经网络的卷积特征串接，进而生成初始检测模型；
本实施例中，为了抑制陆地上的虚警目标，设置了多组背景特征提取模块，该模块由多路并行的空洞卷积通道串接组成，利用该模块提取卷积神经网络浅层卷积层中的背景特征，然后通过串接的方式，将多路并行空洞卷积通道提取出的背景特征与金字塔卷积神经网络输出的卷积特征进行串接融合，利用陆地和海面的背景信息辅助舰船虚警检测，达到降低虚警率的目的。
本实施例中的卷积神经网络为金字塔型卷积神经网络，其结构为YOLOv3的网络结构，设定其在三个尺度上输出卷积特征，预测三种不同大小尺度的舰船目标。
本实施例中的初始检测模型总共包含三组背景特征提取模块，三组模块的输出端分别与金字塔卷积神经网络(特征金字塔)的三路输出串接，如图2和图3所示。每个背景特征提取模块包含三路空洞卷积通道，每路空洞卷积通道包含卷积核尺寸为1×9和9×1的两个空洞卷积层，以便减少卷积计算量和模型参数量。
三路空洞卷积通道采用的空洞卷积扩张率不同，分别为1、5、9，使它们有不同大小的感受野，最后将三路空洞卷积通道的输出串联，丰富卷积特征的表示能力。
背景特征提取模块的输入为金字塔型卷积神经网络的第一层卷积层的输出，以金字塔型卷积神经网络中的浅层特征作为输入，保证了背景特征提取模块能提取出图像中的背景细节信息，再利用背景特征提取模块中的长卷积核和空洞卷积保证了提取的特征拥有足够的感受野。
空洞卷积通道的参数包括(m1×n1，f1，s1，d1)，其中，m1×n1表示卷积核大小，f1为卷积核个数，s1为卷积步长，d1为空洞卷积扩张率。图2中从上至下的三个背景特征提取模块的卷积核个数f1分别为64、128和256，卷积步长s1分别为4、8和16。卷积步长的选择需要使背景特征提取模块输出的特征尺寸与对应的金字塔型卷积神经网络输出的特征尺寸大小相同，其他参数设置均通过实验获得。
需要说明的是，背景特征提取模块中所有卷积层后面都紧接批归一化层(BatchNormalization)和RELU激活层。
如图4所示，由于背景特征在浅层卷积层(金字塔型卷积神经网络的第一层卷积层)中提取，语义信息不足，因此为了保证足够的语义信息，在融合特征后接残差网络。残差网络的参数包括(m2×n2，f2)，m2×n2表示卷积核大小，f2为卷积核个数，残差网络中所有卷积层后面都紧接批归一化层。
本实施例中，由于海面和陆地对微波的散射分布有明显差异，陆地虚警的背景对微波的散射普遍比海面舰船的背景对微波的散射强，因此，通过设置多路并行空洞卷积通道，作为背景特征提取模块，从卷积神经网络的浅层卷积层中，提取不同尺度的背景特征，与卷积神经网络输出的特征进行融合，利用背景特征辅助舰船检测，降低陆地上的虚警率。
步骤2，根据待识别舰船目标的边界框和锚定框，确定初始检测模型的尺度感知损失函数，并基于尺度感知损失函数与多尺度图像集，对初始检测模型进行迭代训练，确定训练好的检测模型；
具体的，本实施例采用YOLOv3模型的锚定框(Anchor Box)和边界框，具体参数设置、实现方式不再赘述。由于本实施例中的舰船目标检测方法只检测舰船目标，并不对检测出的舰船目标做分类，因此，只需要得到舰船目标的x坐标、y坐标、宽度参数、高度参数和置信度参数5个输出。另外，YOLOv3模型在每个网格点处有5个锚定框，因此，最后的卷积层包含25个1×1的卷积核，组成的初始检测模型如图2所示。
由于只检测舰船，不对舰船进行分类，因此，无需设定类别相关的损失函数。锚定框(Anchor Box)采用YOLOv3模型在coco数据集上设定的锚定框。
本实施例中还示出了一种确定尺度感知损失函数的方法，该方法具体包括：
步骤201，通过计算真值框与锚定框的重叠率确定正负样本；其中，真值框为训练图像中舰船的边界框。
步骤202，对预测框参数和真值框参数进行参数转换；其中，预测框由网络最终输出的参数决定，至少包括预测的舰船的x坐标参数、y坐标参数、宽度参数、高度参数、置信度参数。
步骤203，根据待识别舰船目标在SAR图像上的尺寸，计算目标在损失函数中的权重；
步骤204，并结合选择参数，确定尺度感知损失函数。
具体的，采用YOLOv3模型在coco数据集上设定的锚定框，选择参数至少包括第一选择参数和第二选择参数，现对选择参数进行如下定义：
如果第j个目标的边界框与第i个锚定框有最大重叠率(IoU)，那么，定义第一选择参数表示该锚定框与该目标相匹配，需要计算它们的坐标参数损失函数与正样本置信度损失函数；否则第一选择参数/>表示该目标与锚定框不匹配，不需要计算坐标以及正样本置信度损失函数。
如果第j个目标的边界框与第i个锚定框的重叠率小于重叠阈值0.7，且第一选择参数那么，定义第二选择参数/>表示该锚定框相对于该目标为负样本，需要计算负样本置信度损失函数；否者第二选择参数/>表示不需要计算负样本置信度损失函数。
假设第i个锚定框对应网络输出的预测框参数：x坐标参数、y坐标参数、宽度参数、高度参数、置信度参数分别为：和/>将x坐标参数/>y坐标参数/>进行如下转换，对应的计算公式为：
式中，σ()为参数转换函数，可以为sigmoid函数。对图像中目标边界框的坐标变量进行转换，其转换公式如下：
其中，和/>为图像中第j个待识别舰船目标中心点在图像x，y轴上的坐标，wj和hj为该目标在图像上的宽和高，/>为与该目标边界框拥有最大重叠率的锚定框的坐标参数，其中，/>和/>为锚定框的宽和高，/>和/>为锚定框中心点在图像x，y轴上的坐标，s为当前输出特征图相对于输入SAR图像的总步长数(stride)，log()为对数函数。
为了使检测模型在训练过程中重点关注小目标，使得小尺度目标在损失函数中的权重增大，本实施例又示出一种待识别舰船目标的权重的计算方法，对应的计算公式为：
式中，pj为第j个待识别舰船目标的权重，wj为待识别舰船目标在SAR图像上的宽度参数，hj为待识别舰船目标在SAR图像上的高度参数，W为SAR图像的宽度参数，H为SAR图像的高度参数。
在上述实施例的基础上，本实施例中设定的尺度感知损失函数的计算公式为：
式中，L为尺度感知损失函数，i是锚定框的序号，M是总的锚定框数量，j是SAR图像中待识别舰船目标的序号，N是SAR图像中待识别舰船目标的数量。
本实施例中，通过设置上述尺度感知损失函数，使检测模型在训练过程能够中更关注小目标，提升小目标检测率，进而提高SAR图像中舰船目标检测的准确率，同时避免高虚警率。
在对生成的初始检测模型进行训练的过程中，传统多尺度训练是将原始SAR图像缩放到不同尺度再输入至网络模型进行训练，这种多尺度训练方法使每次输入网络的原始SAR图像尺寸发生变化，导致网络模型每次迭代训练消耗的计算资源和存储资源不同，并且由于显卡显存限制，输入的原始SAR图像尺寸会受到限制，不能过大，导致多尺度训练方法存在一定的局限性。
在上述实施例的基础上，为了提升方法在大、中、小多尺度待识别舰船目标上的检测效果，设定尺寸参数集，尺寸参数集中设置有多个图像尺寸，步骤2中，基于尺度感知损失函数与多尺度图像采集，对检测模型进行训练，具体包括：
步骤211，在每一次迭代训练中，随机在尺寸参数集中抽取任一图像尺寸，并根据抽取出的图像尺寸，在原始SAR图像上随机位置处按照抽取的图像尺寸进行裁剪，得到样本图像，其中，裁剪的样本图像不能超出原图边界；
步骤212，将裁剪后的样本图像缩放至预设图像尺寸；
步骤213，根据预设的批大小(batch size)，迭代上述步骤，得到一批次训练图像；
步骤214，基于尺度感知损失函数与上述训练图像获取方法得到的所述一批次训练图像，采用迭代训练方法，对初始检测模型进行训练。
具体的，如图5所示，设定原始样本图像大小为1000×1000像素，尺寸参数集为{384，416，448，480，512，544，576，608，640}，尺寸参数集中的元素可以根据需求自行设定。随机在尺寸参数集中抽取任一图像尺寸，然后以该图像尺寸，在原始样本图像上进行随机裁剪，再将裁剪出的图像统一缩放至512×512大小，组成训练图像，以对检测模型进行训练。
在训练过程中可以采用梯度下降(SGD)法，设定批大小(batch size)为8，总共训练200个周期(epoch)，初始学习率设置为0.001，每40个周期学习率乘0.5，所有训练过程中权值衰减(weight decay)设为0.0005，动量(momentum)设为0.9。
本实施例中的训练方法，在保证多尺度训练的同时，使每次输入网络的图像大小固定，实现每次迭代所需时间以及所需硬件资源保持一致。
步骤3，利用训练好的检测模型，检测SAR图像中的舰船。
将SAR图像送入训练好的模型得到初始舰船检测结果，再进行非极大值抑制(NMS)得到最终结果。检测过程中每个锚定框得到网络的5个输出，分别为tx、ty、tw、th和t0，将其转化为待识别舰船目标位置信息，对应的计算公式为：
px＝tx*s+Ax
py＝ty*s+Ay
p＝A et
po＝ο(to)
式中，Aw和Ah为锚定框的宽度参数和高度参数，Ax和Ay为锚定框中心点在SAR图像x，y轴上的坐标。px、py、pw、ph和po依次为该锚定框对应预测的待识别舰船目标的x轴坐标、y轴坐标、宽度参数、高度参数和置信度参数。
设定置信度阈值为0.15，IoU阈值为0.5，NMS阈值为0.65，在自制的多尺度图像集中进行舰船目标检测的测试，测试结果如下表1所示。
表1
| 检测率 | 虚警率 | |
| 本实施例 | 97.87％ | 3.12％ |
| YOLOv3 | 91.54％ | 10.91％ |
通过对比可知，相较于传统的YOLOv3检测方法，本实施例中的舰船目标检测方法对舰船检测的检测率提升了6.33％，虚警率降低了7.79％。
以上结合附图详细说明了本申请的技术方案，本申请提出了一种背景与尺度感知的SAR舰船目标检测方法，该方法包括：步骤1，根据预设空洞卷积扩张率和预设卷积核大小，组成多组并行的背景特征提取模块，任一组背景特征提取模块的输入端连接于金字塔型卷积神经网络的第一层卷积层，背景特征提取模块的输出端与金字塔卷积神经网络的输出端串接，以生成初始检测模型；步骤2，根据待识别舰船目标的边界框和锚定框，确定初始检测模型的尺度感知损失函数，并基于尺度感知损失函数与多尺度图像集，对初始检测模型进行迭代训练，确定训练好的检测模型；步骤3，利用训练好的检测模型，检测SAR图像中的舰船。通过本申请中的技术方案，充分利用背景信息，有效降低了SAR图像监测的虚警率，提升了小目标检测率。
本申请中的步骤可根据实际需求进行顺序调整、合并和删减。
本申请装置中的单元可根据实际需求进行合并、划分和删减。
尽管参考附图详地公开了本申请，但应理解的是，这些描述仅仅是示例性的，并非用来限制本申请的应用。本申请的保护范围由附加权利要求限定，并可包括在不脱离本申请保护范围和精神的情况下针对发明所作的各种变型、改型及等效方案。
Claims (6)
1.一种背景与尺度感知的SAR舰船目标检测方法，其特征在于，该方法适用于合成孔径雷达，所述方法包括：
步骤1，根据预设空洞卷积扩张率和预设卷积核大小，组成多组并行的背景特征提取模块，任一组背景特征提取模块的输入端连接于金字塔型卷积神经网络的第一层卷积层，所述背景特征提取模块的输出端与所述金字塔卷积神经网络的输出端串接，以生成初始检测模型，所述背景特征提取模块中设置有至少三路空洞卷积通道；
步骤2，根据待识别舰船目标的边界框和锚定框，确定初始检测模型的尺度感知损失函数，并基于尺度感知损失函数与多尺度图像集，对初始检测模型进行迭代训练，确定训练好的检测模型；
步骤3，利用所述训练好的检测模型，检测SAR图像中的舰船；
其中，所述步骤2中，根据待识别舰船目标的边界框和锚定框，确定所述初始检测模型的尺度感知损失函数，具体包括：
步骤201，通过计算真值框与锚定框的重叠率确定正负样本；
步骤202，对预测框参数和真值框参数进行参数转换；
步骤203，根据待识别舰船目标在SAR图像上的尺寸，计算目标在损失函数中的权重；
步骤204，结合选择参数，确定尺度感知损失函数，其中，所述选择参数的取值由所述边界框与所述锚定框的重叠率确定。
2.如权利要求1所述的背景与尺度感知的SAR舰船目标检测方法，其特征在于，所述选择参数包括第一选择参数和第二选择参数，所述选择参数取值的确定方法，具体包括：
判断所述边界框与所述锚定框之间的重叠率是否为最大值，若是，将所述第一选择参数的取值设定为1，否则，将所述第一选择参数的取值设定为0；
判断所述边界框与所述锚定框之间的重叠率是否小于重叠阈值且所述第一选择参数的取值为1，若是，将所述第二选择参数的取值设定为1，否则，将所述第二选择参数的取值设定为0。
3.如权利要求1所述的背景与尺度感知的SAR舰船目标检测方法，其特征在于，所述选择参数包括第一选择参数和第二选择参数，所述尺度感知损失函数的计算公式为：
式中，L为所述尺度感知损失函数，i是所述锚定框的序号，M是所述锚定框的数量，j是SAR图像中所述待识别舰船目标的序号，N是SAR图像中所述待识别舰船目标的数量，为所述第一选择参数，/>为所述第二选择参数，σ()为坐标值转换函数，/>为第i个锚定框的x坐标，/>为第i个锚定框的y坐标，/>为第i个锚定框中经过坐标值转换的x坐标，/>为第i个锚定框中经过坐标值转换的y坐标，/>为第j个边界框中经过参数值转换的x轴坐标，为第j个边界框中经过参数值转换的y轴坐标，/>为第i个锚定框中的宽度参数，/>为第j个边界框中经过参数值转换的宽度参数，/>为第i个锚定框中的高度参数，/>为第j个边界框中经过参数值转换的高度参数，/>为第i个锚定框中的置信度参数，pj为第j个待识别舰船目标的权重。
4.如权利要求3所述的背景与尺度感知的SAR舰船目标检测方法，其特征在于，所述待识别舰船目标的权重的计算公式：
式中，pj为权重，wj为待识别舰船目标在SAR图像上的宽度参数，hj为待识别舰船目标在SAR图像上的高度参数，W为SAR图像的宽度参数，H为SAR图像的高度参数，j为待识别舰船目标的边界框的标号。
5.如权利要求1所述的背景与尺度感知的SAR舰船目标检测方法，其特征在于，所述多尺度图像集中包括多张图像尺寸一致的样本图像和尺寸参数集，所述尺寸参数集中设置有多个图像尺寸，所述步骤2中，基于所述尺度感知损失函数与多尺度图像集，对所述初始检测模型进行迭代训练，具体包括：
步骤211，在每一次迭代训练中，随机在所述尺寸参数集中抽取任一图像尺寸，并根据抽取出的图像尺寸，在原始SAR图像上随机位置处按照抽取的图像尺寸进行裁剪，得到所述样本图像；
步骤212，将裁剪后的所述样本图像缩放至预设图像尺寸；
步骤213，根据预设的批大小(batchsize)，迭代上述步骤，得到一批次训练图像；
步骤214，基于所述尺度感知损失函数与所述一批次训练图像，采用迭代训练方法，对所述初始检测模型进行训练。
6.如权利要求1所述的背景与尺度感知的SAR舰船目标检测方法，其特征在于，初始检测模型中包含至少三个背景特征提取模块，每个所述背景特征提取模块由至少三路空洞卷积通道组成，每路所述空洞卷积通道包含卷积核大小为1×9和9×1的两个卷积层，所述至少三路空洞卷积通道的扩张率分别为1、5、9，所述至少三路空洞卷积的输出先相互串接后再与各自对应的金字塔型卷积神经网络卷积特征串接。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110891175.6A CN113627310B (zh) | 2021-08-04 | 2021-08-04 | 一种背景与尺度感知的sar舰船目标检测方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110891175.6A CN113627310B (zh) | 2021-08-04 | 2021-08-04 | 一种背景与尺度感知的sar舰船目标检测方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113627310A CN113627310A (zh) | 2021-11-09 |
| CN113627310B true CN113627310B (zh) | 2023-11-24 |
Family
ID=78382631
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110891175.6A Active CN113627310B (zh) | 2021-08-04 | 2021-08-04 | 一种背景与尺度感知的sar舰船目标检测方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113627310B (zh) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109522958A (zh) * | 2018-11-16 | 2019-03-26 | 中山大学 | 基于跨尺度特征融合的深度卷积神经网络目标检测方法 |
| CN109800629A (zh) * | 2018-12-05 | 2019-05-24 | 天津大学 | 一种基于卷积神经网络的遥感图像目标检测方法 |
| CN110135267A (zh) * | 2019-04-17 | 2019-08-16 | 电子科技大学 | 一种大场景sar图像细微目标检测方法 |
| CN110223302A (zh) * | 2019-05-08 | 2019-09-10 | 华中科技大学 | 一种基于旋转区域提取的舰船多目标检测方法 |
| CN110796048A (zh) * | 2019-10-18 | 2020-02-14 | 武汉大学 | 一种基于深度神经网络的船舰目标实时检测方法 |
| CN110796037A (zh) * | 2019-10-15 | 2020-02-14 | 武汉大学 | 基于轻量级感受野金字塔的星载光学遥感图像舰船目标检测方法 |
| CN112597815A (zh) * | 2020-12-07 | 2021-04-02 | 西北工业大学 | 一种基于Group-G0模型的合成孔径雷达图像舰船检测方法 |
| CN112766221A (zh) * | 2021-02-01 | 2021-05-07 | 福州大学 | 基于船舶方向和位置多任务的sar图像船舶目标检测方法 |
| CN112926486A (zh) * | 2021-03-16 | 2021-06-08 | 上海海事大学 | 一种舰船小目标的改进RFBnet目标检测算法 |
| CN113191372A (zh) * | 2021-04-29 | 2021-07-30 | 华中科技大学 | 一种舰船目标有向检测模型的构建方法及应用 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10621725B2 (en) * | 2017-04-12 | 2020-04-14 | Here Global B.V. | Small object detection from a large image |
| US10628705B2 (en) * | 2018-03-29 | 2020-04-21 | Qualcomm Incorporated | Combining convolution and deconvolution for object detection |
-
2021
- 2021-08-04 CN CN202110891175.6A patent/CN113627310B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109522958A (zh) * | 2018-11-16 | 2019-03-26 | 中山大学 | 基于跨尺度特征融合的深度卷积神经网络目标检测方法 |
| CN109800629A (zh) * | 2018-12-05 | 2019-05-24 | 天津大学 | 一种基于卷积神经网络的遥感图像目标检测方法 |
| CN110135267A (zh) * | 2019-04-17 | 2019-08-16 | 电子科技大学 | 一种大场景sar图像细微目标检测方法 |
| CN110223302A (zh) * | 2019-05-08 | 2019-09-10 | 华中科技大学 | 一种基于旋转区域提取的舰船多目标检测方法 |
| CN110796037A (zh) * | 2019-10-15 | 2020-02-14 | 武汉大学 | 基于轻量级感受野金字塔的星载光学遥感图像舰船目标检测方法 |
| CN110796048A (zh) * | 2019-10-18 | 2020-02-14 | 武汉大学 | 一种基于深度神经网络的船舰目标实时检测方法 |
| CN112597815A (zh) * | 2020-12-07 | 2021-04-02 | 西北工业大学 | 一种基于Group-G0模型的合成孔径雷达图像舰船检测方法 |
| CN112766221A (zh) * | 2021-02-01 | 2021-05-07 | 福州大学 | 基于船舶方向和位置多任务的sar图像船舶目标检测方法 |
| CN112926486A (zh) * | 2021-03-16 | 2021-06-08 | 上海海事大学 | 一种舰船小目标的改进RFBnet目标检测算法 |
| CN113191372A (zh) * | 2021-04-29 | 2021-07-30 | 华中科技大学 | 一种舰船目标有向检测模型的构建方法及应用 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113627310A (zh) | 2021-11-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110598029B (zh) | 基于注意力转移机制的细粒度图像分类方法 | |
| CN114119582B (zh) | 一种合成孔径雷达图像目标检测方法 | |
| CN109271856A (zh) | 基于扩张残差卷积的光学遥感图像目标检测方法 | |
| CN112766087A (zh) | 一种基于知识蒸馏的光学遥感图像舰船检测方法 | |
| CN113569667B (zh) | 基于轻量级神经网络模型的内河船舶目标识别方法及系统 | |
| CN109101897A (zh) | 水下机器人的目标检测方法、系统及相关设备 | |
| CN103413151B (zh) | 基于图正则低秩表示维数约简的高光谱图像分类方法 | |
| CN112149591B (zh) | 用于sar图像的ssd-aeff自动桥梁检测方法及系统 | |
| CN110647802A (zh) | 基于深度学习的遥感影像舰船目标检测方法 | |
| CN112434672A (zh) | 一种基于改进YOLOv3的海上人体目标检测方法 | |
| Gong et al. | Object detection based on improved YOLOv3-tiny | |
| CN109359661B (zh) | 一种基于卷积神经网络的Sentinel-1雷达图像分类方法 | |
| CN113643284B (zh) | 基于卷积神经网络的极化合成孔径雷达图像舰船检测方法 | |
| Miao et al. | An improved lightweight RetinaNet for ship detection in SAR images | |
| CN109726649B (zh) | 遥感影像云检测方法、系统及电子设备 | |
| CN112464787B (zh) | 基于空间融合注意力的遥感图像舰船目标细粒度分类方法 | |
| CN109859178A (zh) | 一种基于fpga的红外遥感图像实时目标检测方法 | |
| Cui et al. | A fast threshold neural network for ship detection in large-scene SAR images | |
| CN114241296A (zh) | 月面着陆陨石坑障碍检测方法以及存储介质和电子设备 | |
| CN116168240A (zh) | 基于注意力增强的任意方向密集舰船目标检测方法 | |
| Yaohua et al. | A SAR oil spill image recognition method based on densenet convolutional neural network | |
| CN113436125B (zh) | 基于风格迁移的侧扫声呐仿真图像生成方法、装置及设备 | |
| CN113627310B (zh) | 一种背景与尺度感知的sar舰船目标检测方法 | |
| CN115861595B (zh) | 一种基于深度学习的多尺度域自适应异源图像匹配方法 | |
| CN116486244A (zh) | 基于细节增强的水下目标检测方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |