CN113723572A - 船只目标识别方法、计算机系统及程序产品、存储介质 - Google Patents
船只目标识别方法、计算机系统及程序产品、存储介质 Download PDFInfo
- Publication number
- CN113723572A CN113723572A CN202111279250.XA CN202111279250A CN113723572A CN 113723572 A CN113723572 A CN 113723572A CN 202111279250 A CN202111279250 A CN 202111279250A CN 113723572 A CN113723572 A CN 113723572A
- Authority
- CN
- China
- Prior art keywords
- model
- working condition
- ship
- migration
- matrix
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2415—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Probability & Statistics with Applications (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种船只目标识别方法、计算机系统及程序产品、存储介质,采用人工智能中的迁移学习方法,结合图像目标识别技术,发明了一种基于迁移学习的船只目标识别范式方法,以实现具体应用场景的船只目标识别迁移学习方法的自动评估和筛选范式,形成迁移学习的诊断和选优能力并提升模型识别精度。迁移模型质量评价能力矩阵呈现了不同迁移模型与船只样本工况域之间的关联关系,构建迁移方法能力评估矩阵,为模型选择和模型差异比较提供参考依据。相比所有域仅使用单个最优基模型,本发明识别准确率提升了5.71%。
Description
技术领域
本发明涉及船只目标识别技术,特别是一种船只目标识别方法、计算机系统及程序产品、存储介质。
背景技术
船只目标识别技术在海上救援具有重要的地位,能够从成像中快速准确识别出船只,是了解被困船只的位置和动态,救援成功的基础。由于船只目标识别时容易受到海浪、云层等杂波的干扰,真实民用船只样本获取难度大,以及船只目标红外成像特性受气候、温度等因素影响较大,使得船只目标自动识别的准确率较低。在船只目标特性识别问题中,我们一般只有少量的真实感知域数据,虽然可以通过物理仿真来生成大量仿真域数据,但难以确保其数据分布与感知域高度一致,也无法确保涵盖了所有可能的实际场景。因此需要研究迁移识别方法,以确保我们的模型在实际应用中也有意义。
目前目标识别主要集中在针对图像的目标识别,其方法是通过已学习到的图像知识信息与当前面临未知图像数据进行比较,从而推导出未知图像的类型。目标识别的基础是对于图像或场景中各个目标的相关特征、目标之间的关系的描述,最终得到的是目标特征以及它们之间的关系的抽象表达。近些年来,深度学习被广泛用于图像中的船只识别,如SLS-CNN,一种船只检测框架,利用陆海分割获得船舶的候选位置,然后利用卷积神经网络对船舶进行识别[1];FBR-Net(特征平衡和细化网络),通过采用直接学习编码包围盒的一般无锚策略来消除锚的影响,然后使用提出的注意力引导的平衡金字塔来平衡不同层次的多个语义的特征,最后使用特征细化模块来细化对象特征[2];由于深度学习模型需要大量数据训练,同时对于不同的目标识别任务需要重新训练模型,训练时间长。所以近几年来,基于迁移学习的目标识别模型被广泛用于船只目标识别,比如使用SSD-512作为迁移学习的基模型,可以提高检测准确率和整体性能,识别速度快[3];使用单个ResNet(残差网络)模型作为迁移学习的基模型来识别船只的列表,使用前四层卷积层的参数作为迁移模型的参数,提取特征快,识别精度也高[4];使用VGG19对于源域中有限数据集通过数据增强的技术,可以解决迁移学习模型细粒度船型的分类,同时节省从头学习的时间[5];利用不同成像角度和不同分辨率的标记船舶,在固定角度识别未标记船舶,提出了一种不同于域自适应方法的映射子空间对齐方法[6]。但是基于迁移学习模型的目标识别只考虑了简单的工况或者没有考虑工况和模型之间的关系,无法成为实际情况中通用的模型。同时单个迁移学习模型只能学习部分的特征,识别精度有限,无法在现实生活中有实际的应用。
模型推荐要求在给定数据集、任务和评价方法的前提下,优先选择性能最佳的模型,即在模型推荐的过程中充分考虑模型本身特征、数据集的特征以及模型与数据集之间的相互关系[7]。对于机器学习的模型推荐方案,称为AutoML,主要基于贝叶斯优化、进化算法、深度强化学习和基于预测评估四类理论。通过AutoML方法,研究人员可以获得顶级的模型性能,实现专家级别算法选择。Shapira等人提出了一种高效且高精度的元学习算法选择方式,即AutoGRD框架。作者基于随机森林和图距离相关系数理论,提出了一种固定大小的数据集表征方法,并将该数据集表征与模型表征一同构成元特征,用于AutoGRD中的以XGBoost为主体的排序元模型学习特征[8]。除了监督学习,Shapira等人针对非监督学习,提出了一种高效的元学习聚类算法选择方案MARCO-GE,作者使用deepwalk随机游走获得作为数据集的特征嵌入表征形式,并结合图卷积神经网络和元学习构建算法排序模型[9]。区别机器学习,深度学习模型更为复杂且主要用以解决图像、音频和文本等非统计类数据。在面向多模型时,选择或组合成合适的深度学习模型,对优化计算复杂度更为关键。Taylor等人基于机器学习KNN方法提出了一种DNN深度学习模型选择方案,拟解决在算力不足的嵌入式设备高效执行图像识别和机器翻译任务的问题,但采用KNN的方法导致优先选择排名第一位的模型[10-11]。目前关于深度学习的模型推荐几乎没有涉及船只迁移学习目标识别。
总结而言,现有技术存在以下技术问题:
(1)常规目标识别的迁移模型只从单一维度考虑源域与目标域,而忽略了不同维度下数据域对模型的影响及模型对于特定特征的敏感性。
(2)在一个复杂的现实环境中,目前没有评价体系可以对迁移学习模型做出客观和合理的评价,即无法从多个维度衡量模型性能。
(3)在给定的工况下,无法利用先验知识能做出正确的指导,选择最优的模型。
(4)单个目标识别的模型学习的特征有限且不完备,目标识别的准确率难以大幅提高。
发明内容
本发明所要解决的技术问题是,针对现有技术不足,提供一种船只目标识别方法、计算机系统及程序产品、存储介质,提高目标识别的准确率。
为解决上述技术问题,本发明所采用的技术方案是:一种船只目标识别方法,包括以下步骤:
S1、依据船只工况将数据域划分为不同工况维度的源域Ds和目标域Dt;所述数据域包括船只在白天工况、夜间工况、雨天工况、远距工况、近距工况、以及角度工况下的图像数据;
S2、从所述源域Ds选择部分数据作为训练集,在训练集上训练多个基模型,得到各个基模型泛化权重参数,加入部分目标域数据微调基模型泛化权重参数,得到多个迁移基模型;
S3、构建每个工况下的能力矩阵,其中第k种工况下,能力矩阵第i行第j列的元素对应第j个迁移基模型在第i种指标下的性能表现值;i=1,2,……,n;j=1,2,……,m;k=1,2,……,p;n为指标种类数;m为迁移基模型个数;p为工况个数;
S4、将各能力矩阵对应的工况划分为多个工况区间,提取图像数据的离散工况值,并将所述离散工况值映射到指定工况区间;获取迁移基模型工况知识矩阵KM;所述知识矩阵包括所有迁移基模型对不同工况区间的识别概率值;知识矩阵的第ks行第j列的元素对应第j个迁移基模型在第ks种工况区间下的识别概率值;ks=1,2,……,ps;ps为工况区间的个数;
S5、定位目标域Dt实际待识别的数据所处的工况区间,根据迁移基模型的知识矩阵KM提取该工况区间下的子矩阵,获得所述子矩阵对应的二部图子图,使用二部图模型推荐算法,在候选基模型中推荐最优模型,该最优模型即最优推荐模型;其中,所述子矩阵的行和列分别对应工况区间和候选基模型。
区别于传统目标识别仅考虑数据本身,本发明综合考虑了船只数据及其所处的工况环境,考虑的工况因素众多,更具全面性。本发明提出将工况与模型结合建立知识矩阵,并引入二部图推荐算法实现多模型优选策略,可以实现对单张图片的细粒度模型推荐,填补了船只目标识别领域中迁移学习模型推荐方法的空白,极大地提高了目标识别的准确率。
步骤S2中,所述指标包括Accuracy、Precision和F1-score。本发明中采用的这三个指标均为常见的目标识别评价指标,可靠性高。Accuracy和Precision是精度单一指标,F1-score是综合指标,利用这些指标可以从不同维度更加全面的评价模型的目标识别性能。
步骤S4中,构建迁移基模型知识矩阵的具体实现过程包括:根据奖惩机制计算每一个候选基模型对输入的船只数据的更新概率,当候选基模型对船只分类正确时,更新概率为score*a1;当候选基模型对船只分类错误时,更新概率为-(0.5-score)*a2;其中score为每个候选基模型的船只识别置信度,a1和a2分别是奖励因子和惩罚因子,将更新概率保存至知识矩阵中离散工况值对应的工况区间位置,待所有工况数据输入完毕,归一化所有更新后的概率值,获得基模型的知识矩阵KM;所述候选基模型为多个基模型中的任意一个。相比于仅考虑识别正确情况,本发明使用奖惩机制,考虑更加全面,有利于进一步放大识别正确模型与识别错误模型在工况区间下的性能差异。本发明的归一化操作,有利于解决数据分布不平衡问题,提升知识矩阵的准确性。
步骤S5中,使用二部图模型推荐算法,在候选基模型中推荐最优模型的具体实现过程包括:使用步骤S3能力矩阵的性能表现值初始化候选基模型的模型资源,模型资源表征候选基模型的性能;经过一次模型至工况区间的资源分配,一次工况区间至模型的资源回流,资源积累最多的候选基模型即为最优推荐模型。本发明将能力矩阵的性能表现值与模型推荐的模型资源结合,解决二部图模型推荐的冷启动问题,有利于提升模型推荐精度。二部图模型推荐算法是经典的推荐算法,其推理速度快,时间复杂度低,满足实际应用中低延时性的要求。
进一步地,本发明的方法还包括将船只工况将数据域输入所述最优推荐模型,识别目标船只。
作为一个发明构思,本发明还提供了一种计算机系统,包括存储器、处理器及存储在存储器上的计算机程序;所述处理器执行所述计算机程序,以实现本发明方法的步骤。
作为一个发明构思,本发明还提供了一种计算机可读存储介质,其上存储有计算机程序/指令;所述计算机程序/指令被处理器执行时实现本发明方法的步骤。
作为一个发明构思,本发明还提供了一种计算机程序产品,包括计算机程序/指令;该计算机程序/指令被处理器执行时实现本发明方法的步骤。
与现有技术相比,本发明所具有的有益效果为:本发明采用人工智能中的迁移学习方法,结合图像目标识别技术,发明了一种基于迁移学习的船只目标识别范式方法,以实现具体应用场景的船只目标识别迁移学习方法的自动评估和优选范式,通过能力矩阵中的性能表现值评估迁移学习方法的优劣并指导优选,形成迁移学习的诊断和选优能力并提升模型识别精度。迁移模型质量评价能力矩阵呈现了不同迁移模型与船只样本工况域之间的关联关系,通过三种维度:迁移学习方法、船只工况、性能指标,构建迁移方法能力评估矩阵,对不同工况下使用何种模型效果最佳做出初步指导,为模型选择和模型差异比较提供参考依据;经过实验证明,选取的基模型有VGG16、ResNet18、AlexNet、SqueezeNet1.0,在距离、天顶角、方位角和温度跨域数据中采用本发明的模型推荐方法,实验证明不同工况域中最佳模型推荐准确率为85.65%,相比所有域仅使用单个最优基模型,本发明识别准确率提升了5.71%。
附图说明
图1为本发明实施例方法流程图;
图2为本发明实施例能力矩阵结构图。
具体实施方式
针对单个目标识别迁移模型只考虑了图像中特征,而忽略的不同的工况维度对目标识别迁移模型产生的影响,本发明提出了基于迁移学习的船只目标识别范式方法,研究了不同工况下的迁移学习基模型,找寻工况和模型之间的潜在关系,结合具体应用场景研究各迁移学习方法的能力特性以及最优组合策略,形成面向实际应用场景的迁移学习应用范式。针对于模型在复杂工况下的评估问题,本发明提出一种评估迁移学习模型的能力矩阵,使用不同评级指标,以不同维度评价迁移学习模型性能,将这些工况与迁移学习方法的结构超参数建立了关联表,为下一步进行迁移学习性能指标与工况变量关联分析奠定基础。针对于在给定的工况下,最优模型的选择问题,本发明使用二部图推荐算法,根据船只数据的特征、工况等,在给定的评价指标体系下,自适应地为不同船只工况智能推荐最优的模型。
基于迁移学习的船只目标识别范式包括两个步骤:构建目标迁移识别模型质量评价能力矩阵、目标迁移识别模型自动推荐。
构建目标迁移识别模型质量评价能力矩阵是针对不同的海上船只工况,即船只在白天工况、夜间工况、雨天工况、远距工况、近距工况、以及角度工况下的数据,如:风速、气温、海水温度、天气、天顶角、方位角、距离和视场角等,建立各种迁移学习方法在训练复杂度、识别精度和速度,以及针对不同数据域的泛化能力的衡量指标体系,通过系统测试各种迁移方法在指标体系中的能力,构建能力矩阵。目标迁移识别模型自动推荐是指采用基于二部图的模型推荐方法,根据船只数据的特征、工况等,在一定的评价指标体系下,自适应地为不同船只工况智能推荐最优的模型,优化整体目标识别效果,主要包括两个模块:知识构建和自适应推荐。
基于迁移学习的船只目标识别范式具体步骤如下:
第一步:可迁移域划分,将船只目标数据输入到迁移域划分模块中,依据船只工况将数据域划分为不同工况维度的源域Ds和目标域Dt。
第二步:训练迁移学习基模型,基模型采用经典目标识别模型VGG16、ResNet18、AlexNet、SqueezeNet1.0。使用第一步已划分的不同工况维度的源域Ds,使用80%源域数据作为训练集、20%源域作为验证集训练对应基模型,输出各模型泛化权重参数Wgen。使用第一步已划分的不同工况维度的目标域Dt,使用5%目标域数据微调模型泛化权重参数Wgen,输出各模型迁移权重参数Wtr。
第三步:构建模型质量评价能力矩阵,能力矩阵Matrix包括三个维度,其中以模型(Model)为第一维度、工况(Situation)为第二维度、指标(Performance)为第三维度。各个基模型加载第二步所得各模型迁移权重参数Wtr,分别采用工况i下目标域数据Di测量各个基模型在指标如Accuracy、Precision和F1-score[12]下的性能表现值,并将性能表现值填充到能力矩阵中对应的工况、模型与指标位置(如图2,模型1在工况2上的Precision指标值为0.995),输出填充后的能力矩阵Matrix。
第四步:模型推荐模块-知识构建:知识构建的目标是建立模型与工况的先验知识,为后续模型奠定基础。该模块主要步骤为:①工况定位。结合第三步三维度能力矩阵Matrix中的工况信息,将工况区间化,如将温度每5度独立划分为一个区间。根据图像数据的标签,采用正则表达式文本提取手段提取图像数据的离散工况值,并将其映射到指定工况区间。②知识矩阵。采用第二步不同工况维度下多个迁移学习基模型迁移权重参数Wtr,使用部分目标域Dt数据构建基模型知识矩阵:针对每一个输入数据,根据奖惩机制计算候选基模型的更新概率:当候选基模型识别正确时,更新概率为score*a1;当识别错误时,更新概率为-(0.5-score)*a2;其中score为候选基模型的识别置信度,a1和a2分别是奖励因子和惩罚因子,取值范围为(0,1)。将更新概率保存至知识矩阵中由①工况定位所得区间位置。待整个数据输入完毕,使用中值归一化方法更新所有概率值,则获得基模型的知识矩阵KM,可表征候选模型与工况区间之间的关系,输入到第五步自适应推荐。
第五步:模型推荐模块-自适应推荐:输入为与第四步②中不同部分的目标域Dt数据,输出为每个目标域Dt数据推荐最优的模型。关键步骤包括:①提取二部图子图:采用第四步①方法,定位目标域实际待识别的数据所处的工况区间信息,从第四步构建的基模型知识矩阵KM,提取该工况区间下的子矩阵。该子矩阵横行为工况区间,列为候选基模型列表(见下表1),使用图表示法获得此子矩阵对应的二部图子图,二部图子图中节点表示工况与模型,二部图子图中边表示子矩阵中的概率值。②二部图模型推荐:根据第五步①方法获得的二部图子图,使用二部图模型推荐算法[13]针对该二部图子图为该工况下舰船数据在候选基模型中推荐最优模型。二部图模型推荐算法使用第三步三维度能力矩阵Matrix中的模型性能表现值初始化算法的模型资源,经过一次模型至工况区间的资源分配,一次工况区间至模型的资源回流,资源积累最多的为最优推荐模型,输出最优推荐模型RModel [13]。
表1 候选基模型列表
模型1 | 模型2 | 模型3 | 模型4 | |
工况区间1 | 1 | 0.8 | 0.7 | 0.3 |
工况区间2 | 0.8 | 1 | 0.5 | 0.9 |
工况区间3 | 0.7 | 0.5 | 1 | 0.2 |
工况区间4 | 0.3 | 0.9 | 0.2 | 1 |
本发明采用人工智能中的迁移学习方法,结合图像目标识别技术,发明了一种基于迁移学习的船只目标识别范式方法,以实现具体应用场景的船只目标识别迁移学习方法的自动评估和筛选范式,形成迁移学习的诊断和选优能力并提升模型识别精度。迁移模型质量评价能力矩阵呈现了不同迁移模型与船只样本工况域之间的关联关系,通过三种维度:迁移学习方法、船只工况、性能指标,构建迁移方法能力评估矩阵,对不同工况下使用何种模型效果最佳做出初步指导,为模型选择和模型差异比较提供参考依据。
实验在Ubuntu Server 16.04 x64系统上完成,训练使用NVIDIA GeForce RTX2080ti 11G的GPU。所有实验都是基于PyTorch完成的,选择数据集是VAIS[14],采用基模型训练有AlexNet、VGG16、ResNet18、SuqeezeNet1.0,优化器选择是SGD,损失函数选择的是交叉熵,训练轮数设为200,具备提前停止训练功能(设置当模型在验证集连续精度降低次数或连续精度提升率小于0.001次数超过阈值则停止训练)。输入的图像尺寸为3*244*244RGB,为了处理红外图像,我们简单地复制单一的红外通道三次来创建RGB图像。
具体实验内容以一个域为例,源域为白天工况下的船只数据,目标域为夜间工况下的船只数据:
1)首先进行图像增强,泛化模型的识别能力,需要对图像进行中心化处理、标准化处理、适当的灰度变化与线性变化,同时获取图像的分类标签。
2)在源域中训练做训练,加入目标域中每类5张图像做微调,构建迁移学习基本模型。
3)对于训练好的迁移学习模型,使用Accuracy、Precision和F1-score等不同的评价指标从不同的维度构建能力矩阵来评价模型性能的好坏。
4)在模型推荐中,使用目标域8%的数据建立知识矩阵。以某一船只图像数据(处于高温、远距离和白天工况)为例,该图像经三个候选基模型后的的得分score依次为8.11e-38,1.0和0.953;设奖励因子和惩罚因子分别为1和0.5,则更新概率依次为-0.25,1.0和0.953,须分别将此更新概率累加至知识矩阵中三个候选基模型高温、远距离和白天工况对应的概率值。
5)在模型推荐中,使用与4)不同的剩余92%的图像进行模型推荐测试。首先分析图像所处的工况区间,然后提取知识矩阵中对应的二部图子图,使用自适应模型推荐方案进行模型推荐。
实验证明,在距离、天顶角、方位角和温度跨域数据中采用模型推荐方法,不同工况域中的最佳模型推荐准确率为85.65%,相比所有域仅使用单个最优基模型,本发明的识别准确率提升了5.71%。
参考文献:
[1] LIU Y, ZHANG M-H, XU P, et al. SAR ship detection using sea-landsegmentation-based convolutional neural network; proceedings of the 2017International Workshop on Remote Sensing with Intelligent Processing (RSIP),F, 2017 [C]. IEEE.
[2] FU J, SUN X, WANG Z, et al. An anchor-free method based onfeature balancing and refinement network for multiscale ship detection in SARimages [J]. IEEE Transactions on Geoscience and Remote Sensing, 2020
[3] WANG Y, WANG C, ZHANG H. Combining a single shot multiboxdetector with transfer learning for ship detection using sentinel-1 SARimages [J]. Remote sensing letters, 2018, 9(8): 780-8.
[4] XU Y, LANG H, NIU L, et al. Discriminative adaptationregularization framework-based transfer learning for ship classification inSAR images [J]. IEEE Geoscience and Remote Sensing Letters, 2019, 16(11):1786-90.
[5] MILICEVIC M, ZUBRINIC K, OBRADOVIC I, et al. Data augmentationand transfer learning for limited dataset ship classification [J]. WSEASTrans Syst Control, 2018, 13(460-5.
[6] LI H, GUO B, CHEN H, et al. A Transfer Learning Method for ShipTarget Recognition in Remote Sensing Image; proceedings of theCommunications, Signal Processing, and Systems, Singapore, F 2020//, 2020[C]. Springer Singapore.
[7] Emani M K, O'boyle M. Celebrating diversity: a mixture of expertsapproach for runtime mapping in dynamic environments[C].Proceedings of the36th ACM SIGPLAN Conference on Programming Language Design andImplementation,2015: 499–508.
[8] Cohen-Shapira N, Rokach L, Shapira B, et al. AutoGRD: ModelRecommendation Through Graphical Dataset Representation[C].Proceedings of the28th ACM International Conference on Information and Knowledge Management,2019: 821-830.
[9]Shapira, Noy Cohen, and LiorRokach. "Automatic selection ofclustering algorithms using supervised graph embedding." Information Sciences577 (2021): 824-851.
[10] Taylor B, Marco V S, Wolff W, et al. Adaptive deep learningmodel selection on embedded systems[C].Proceedings of the 19th ACM SIGPLAN/SIGBED International Conference on Languages, Compilers, and Tools forEmbedded Systems,2018: 31-43.
[11] Marco V S, Taylor B, Wang Z, et al.Optimizing Deep LearningInference on Embedded Systems Through Adaptive Model Selection[J].ACMTransactions on Embedded Computing Systems,2020, 19 (1): 1-28.
[12] Y. Sasaki, “The truth of the F-measure,” Teach Tutor Mater,pp.1–5, 2007.
[13] He X, Gao M, Kan M-Y, et al.BiRank: Towards Ranking on BipartiteGraphs[J].IEEE Transactions on Knowledge and Data Engineering,2017, 29 (1):57-71.
[14]Zhang M M, Choi J, Daniilidis K, et al. VAIS: A dataset forrecognizing maritime imagery in the visible and infrared spectrums[C].2015IEEE Conference on Computer Vision and Pattern Recognition Workshops (CVPRW),2015.
Claims (8)
1.一种船只目标识别方法,其特征在于,包括以下步骤:
S1、将船只工况数据域划分为不同工况维度的源域Ds和目标域Dt;所述数据域包括船只在白天工况、夜间工况、雨天工况、远距工况、近距工况、以及角度工况下的图像数据;
S2、从所述源域Ds选择部分数据作为训练集,在训练集上训练多个基模型,得到各个基模型泛化权重参数,加入部分目标域Dt数据微调基模型泛化权重参数,得到多个迁移基模型;
S3、构建每个工况下的能力矩阵,其中第k种工况下,能力矩阵第i行第j列的元素对应第j个迁移基模型在第i种指标下的性能表现值;i=1,2,……,n;j=1,2,……,m;k=1,2,……,p;n为指标种类数;m为迁移基模型个数;p为工况个数;
S4、将各能力矩阵对应的工况划分为多个工况区间,提取图像数据的离散工况值,并将所述离散工况值映射到指定工况区间;获取迁移基模型工况知识矩阵KM;所述知识矩阵包括所有迁移基模型对不同工况区间的识别概率值;知识矩阵的第ks行第j列的元素对应第j个迁移基模型在第ks种工况区间下的识别概率值;ks=1,2,……,ps;ps为工况区间的个数;
S5、定位目标域Dt实际待识别的数据所处的工况区间,根据迁移基模型的知识矩阵KM提取该工况区间下的子矩阵,获得所述子矩阵对应的二部图子图,使用二部图模型推荐算法,在候选基模型中推荐最优模型,该最优模型即最优推荐模型;其中,所述子矩阵的行和列分别对应工况区间和候选基模型。
2.根据权利要求1所述的船只目标识别方法,其特征在于,步骤S2中,所述指标包括Accuracy、Precision和F1-score。
3.根据权利要求1所述的船只目标识别方法,其特征在于,步骤S4中,构建迁移基模型知识矩阵KM的具体实现过程包括:根据奖惩机制计算每一个候选基模型对输入的船只数据的更新概率,当候选基模型对船只分类正确时,更新概率为score*a1;当候选基模型对船只分类错误时,更新概率为-(0.5-score)*a2;其中score为每个候选基模型的船只识别置信度,a1和a2分别是奖励因子和惩罚因子,将更新概率保存至知识矩阵中离散工况值对应的工况区间位置,待所有工况数据输入完毕,归一化所有更新后的概率值,获得迁移基模型的知识矩阵KM;所述候选基模型为多个迁移基模型中的任意一个。
4.根据权利要求1所述的船只目标识别方法,其特征在于,步骤S5中,使用二部图模型推荐算法,在候选基模型中推荐最优模型的具体实现过程包括:使用能力矩阵的性能表现值初始化候选基模型的模型资源,模型资源表征候选基模型的性能;经过一次模型至工况区间的资源分配,一次工况区间至模型的资源回流,资源积累最多的候选基模型即为最优推荐模型。
5.根据权利要求1所述的船只目标识别方法,其特征在于,将船只工况数据域输入所述最优推荐模型,识别目标船只。
6.一种计算机系统,包括存储器、处理器及存储在存储器上的计算机程序;其特征在于,所述处理器执行所述计算机程序,以实现权利要求1~5之一所述方法的步骤。
7.一种计算机可读存储介质,其上存储有计算机程序/指令;其特征在于,所述计算机程序/指令被处理器执行时实现权利要求1~5之一所述方法的步骤。
8.一种计算机程序产品,包括计算机程序/指令;其特征在于,该计算机程序/指令被处理器执行时实现权利要求1~5之一所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111279250.XA CN113723572B (zh) | 2021-11-01 | 2021-11-01 | 船只目标识别方法、计算机系统及程序产品、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111279250.XA CN113723572B (zh) | 2021-11-01 | 2021-11-01 | 船只目标识别方法、计算机系统及程序产品、存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113723572A true CN113723572A (zh) | 2021-11-30 |
CN113723572B CN113723572B (zh) | 2022-01-28 |
Family
ID=78686197
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111279250.XA Active CN113723572B (zh) | 2021-11-01 | 2021-11-01 | 船只目标识别方法、计算机系统及程序产品、存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113723572B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115167404A (zh) * | 2022-06-24 | 2022-10-11 | 大连海事大学 | 一种基于迁移强化学习的海上自主水面船舶避碰决策方法 |
CN116486238A (zh) * | 2023-04-26 | 2023-07-25 | 北京卫星信息工程研究所 | 联合点集表示与图分类的目标细粒度识别方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170300605A1 (en) * | 2016-04-19 | 2017-10-19 | General Electric Company | Creating predictive damage models by transductive transfer learning |
WO2018107128A1 (en) * | 2016-12-09 | 2018-06-14 | U2 Science Labs, Inc. | Systems and methods for automating data science machine learning analytical workflows |
CN109800796A (zh) * | 2018-12-29 | 2019-05-24 | 上海交通大学 | 基于迁移学习的船舶目标识别方法 |
CN112711995A (zh) * | 2020-12-22 | 2021-04-27 | 中南大学 | 一种基于图像的海上目标识别方法 |
CN113569667A (zh) * | 2021-07-09 | 2021-10-29 | 武汉理工大学 | 基于轻量级神经网络模型的内河船舶目标识别方法及系统 |
-
2021
- 2021-11-01 CN CN202111279250.XA patent/CN113723572B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170300605A1 (en) * | 2016-04-19 | 2017-10-19 | General Electric Company | Creating predictive damage models by transductive transfer learning |
WO2018107128A1 (en) * | 2016-12-09 | 2018-06-14 | U2 Science Labs, Inc. | Systems and methods for automating data science machine learning analytical workflows |
CN109800796A (zh) * | 2018-12-29 | 2019-05-24 | 上海交通大学 | 基于迁移学习的船舶目标识别方法 |
CN112711995A (zh) * | 2020-12-22 | 2021-04-27 | 中南大学 | 一种基于图像的海上目标识别方法 |
CN113569667A (zh) * | 2021-07-09 | 2021-10-29 | 武汉理工大学 | 基于轻量级神经网络模型的内河船舶目标识别方法及系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115167404A (zh) * | 2022-06-24 | 2022-10-11 | 大连海事大学 | 一种基于迁移强化学习的海上自主水面船舶避碰决策方法 |
CN115167404B (zh) * | 2022-06-24 | 2024-04-19 | 大连海事大学 | 一种基于迁移强化学习的海上自主水面船舶避碰决策方法 |
CN116486238A (zh) * | 2023-04-26 | 2023-07-25 | 北京卫星信息工程研究所 | 联合点集表示与图分类的目标细粒度识别方法 |
CN116486238B (zh) * | 2023-04-26 | 2023-09-15 | 北京卫星信息工程研究所 | 联合点集表示与图分类的目标细粒度识别方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113723572B (zh) | 2022-01-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110516095B (zh) | 基于语义迁移的弱监督深度哈希社交图像检索方法和系统 | |
CN110598029A (zh) | 基于注意力转移机制的细粒度图像分类方法 | |
KR20180120056A (ko) | 학습 데이터 전처리 방법 및 시스템 | |
CN113723572B (zh) | 船只目标识别方法、计算机系统及程序产品、存储介质 | |
CN111127364B (zh) | 图像数据增强策略选择方法及人脸识别图像数据增强方法 | |
Lee et al. | Localization uncertainty estimation for anchor-free object detection | |
Jiang et al. | Hyperspectral image classification with transfer learning and Markov random fields | |
Sun et al. | Image target detection algorithm compression and pruning based on neural network | |
Devi et al. | A review of image classification and object detection on machine learning and deep learning techniques | |
CN114821337B (zh) | 基于时相一致性伪标签的半监督sar图像建筑区提取方法 | |
CN115423091A (zh) | 一种条件对抗神经网络训练方法、场景生成方法和系统 | |
Gong et al. | KDCTime: Knowledge distillation with calibration on InceptionTime for time-series classification | |
CN113158806B (zh) | 一种基于OTD_Loglogistic的SAR数据海洋目标检测方法 | |
CN114879185A (zh) | 基于任务经验迁移的雷达目标智能识别方法 | |
Liu et al. | Object detection via inner-inter relational reasoning network | |
Jain et al. | Flynet–Neural Network Model for Automatic Building Detection from Satellite Images | |
Shi | Image Recognition of Skeletal Action for Online Physical Education Class based on Convolutional Neural Network | |
CN113657541B (zh) | 一种基于深度知识集成的领域自适应目标识别方法 | |
US20230041614A1 (en) | Method and apparatus for training artificial intelligence based on episode memory | |
CN114943344B (zh) | 联合svm和hmm的导航场景感知通用模型构建方法 | |
CN112819086B (zh) | 通过划分网络空间计算单隐层ReLU神经网络全局最优解的图像分类方法 | |
Kunt | Ship detection and classification using type of convolution neural networks | |
Fitra et al. | Deep transformer model with pre-layer normalization for covid-19 growth prediction | |
Ukwuoma et al. | Synthetic aperture radar automatic target recognition based on a simple attention mechanism | |
Zhao et al. | Learning General Representations for Semantic Segmentation and Height Estimation from Remote Sensing Images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |