CN109934261B - 一种知识驱动参数传播模型及其少样本学习方法 - Google Patents
一种知识驱动参数传播模型及其少样本学习方法 Download PDFInfo
- Publication number
- CN109934261B CN109934261B CN201910100364.XA CN201910100364A CN109934261B CN 109934261 B CN109934261 B CN 109934261B CN 201910100364 A CN201910100364 A CN 201910100364A CN 109934261 B CN109934261 B CN 109934261B
- Authority
- CN
- China
- Prior art keywords
- knowledge
- graph
- class
- samples
- category
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000013528 artificial neural network Methods 0.000 claims abstract description 28
- 238000012549 training Methods 0.000 claims abstract description 19
- 238000000605 extraction Methods 0.000 claims abstract description 9
- 230000006870 function Effects 0.000 claims description 30
- 239000013598 vector Substances 0.000 claims description 30
- 230000003993 interaction Effects 0.000 claims description 15
- 230000008569 process Effects 0.000 claims description 15
- 230000000875 corresponding effect Effects 0.000 claims description 9
- 230000003247 decreasing effect Effects 0.000 claims description 6
- 230000002596 correlated effect Effects 0.000 claims description 5
- 230000007246 mechanism Effects 0.000 claims description 5
- 239000011159 matrix material Substances 0.000 claims description 3
- 230000008859 change Effects 0.000 claims description 2
- 230000001902 propagating effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000005065 mining Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种知识驱动参数传播模型及其少样本学习方法,该模型包括:特征提取模块,用于在基础类别样本组成的数据集上对特征提取器进行训练,并利用训练好的特征提取器提取基础类别和只有少量样本的新类别的样本的特征;图神经网络模块,用于引入类别之间的关系作为先验知识,利用知识图表示类别之间的先验关系,并集成该知识图利用图神经网络通过图形式传播迭代更新分类器参数;分类预测模块,用于利用提取出的特征和更新后的分类器参数得到分类结果,本发明可提供提高少样本分类的精度及泛化能力。
Description
技术领域
本发明涉及计算机视觉领域,特别是涉及一种知识驱动参数传播模型及其少样本学习方法。
背景技术
目前卷积神经网络在多种视觉任务上得到了显著的成功,如物体识别和场景分割。为了很好地训练深的卷积神经网络识别系统,需要固定类别,且每个类别需要大量已标注的样本。如果这个识别系统需要识别一些新的类别,就需要对新的类别搜集大量的已标注数据来避免过拟合,同时开始代价巨大的训练过程。得益于日常积累的识别,人们可以从少量样本中学习新的类别,目前模仿这种从少样本中学习新类别的能力(即少样本学习)是计算机视觉领域一项重要且实际的任务。
现有的少样本学习有如下三种方法:
1、基于度量学习(metric learning)的方法:这种方法假设同类样本具有相似的特征表示,旨在学习一个用于估计基础类别样本相似性的距离度量,然后泛化到新的类别上,比如给定一个测试图像,计算该图像与不同类别样本的相似度数,该测试图像的类别即为与其相似度最高的样本的对应类别。然而,度量学习基于样本之间的相似性,难以很好地泛化到大规模的少样本学习。
2、基于生成样本(sample generation)的方法:利用生成对抗网络(GenerativeAdversarial Network,GAN)来给新的类别生成更多的样本,比如利用生成对抗网络学习基础类别中不同样本之间的变换,将这种变换用于生成新颖类别的新的样本。然而,这种方法的缺点是较大依赖于生成样本的质量。
3、基于权值预测(weight prediction)的方法:直接学习分类器参数。这种方法一般先学习基础类别的分类器,然后利用基础样本的分类器来生成新类别的分类器。比如在基础类别上学习一个分类器参数回归器,然后直接用这个分类器参数回归器得到新类别的分类器参数。这种方法的缺点是由于没有很好利用新类别的样本来构建新类别的分类器,使得泛化能力还有提升空间。
发明内容
为克服上述现有技术存在的不足,本发明之目的在于一种知识驱动参数传播模型及其少样本学习方法,其引入类别之间的相关性作为先验知识,以提高少样本分类的精度和泛化能力。
为达上述目的,本发明提出一种知识驱动参数传播模型,包括:
特征提取模块,用于在基础类别样本组成的数据集上对特征提取器进行训练,并利用训练好的特征提取器提取基础类别和只有少量样本的新类别的样本的特征;
图神经网络模块,用于引入类别之间的关系作为先验知识,利用知识图表示类别之间的先验关系,并集成该知识图利用图神经网络通过图形式传播迭代更新分类器参数。
分类预测模块,用于利用提取出的特征和更新后的分类器参数得到分类结果。
优选地,所述知识图基于语义相似性编码不同类别之间的关系,具体实现为:给定类别i和类别j的语义单词为wi和wj,首先利用GloVe模型抽取他们的语义特征向量和并计算他们的距离dij,然后应用一个单调递减函数来将距离映射为相关关系
优选地,所述图神经网络根据如下公式在类别先验关系的指导下迭代更新分类器参数W:
其中,φ(·)为在基础类别样本组成的数据集上训练好的特征提取器,它用于提取基础类别和新类别样本的特征,f(·)为参数传播和更新函数,在时间t,用上个时间t-1的参数Wt-1和图作为输入来计算得到精修的参数Wt。
优选地,所述图神经网络根据要解决的问题先初始化图节点,然后基于过去节点的状态和从他相邻节点集成的信息来更新自己的状态。
优选地,假设图编码了所有类别的相关关系,其中节点表示类别,边缘表示类别之间的关系,给定一个K=Kbase+Knovel类的数据集,V表示为其中节点vk表示第k类,新的类别记做{Kbase+1,Kbase+2,…,K},A是邻接矩阵,aij表示类别i和类别j的相关关系,对每次相互作用t,每个节点vk都有个隐含状态
在每次相互作用t,每个结点k集成与它有关的结点的信息,使得这些结点的参数向量帮助精修其自身的参数向量,该过程形式化表示为:
通过该方式,如果结点k和k′高相关,则鼓励信息从k′传播到k,否则抑制信息从k′传播到k,然后通过门机制,用集成好的特征向量和前一次相互作用后的隐含状态作为输入来更新自己的隐含状态;
优选地,所述模型采用两阶段的训练过程进行训练:
第二阶段:固定特征提取器的参数,用基础数据集和包含少量样本的新数据集来训练其他部分。
为达到上述目的,本发明还提供的一种知识驱动参数传播的少样本学习方法,包括如下步骤:
步骤S1,建立包括特征提取模块、图神经网络模块和分类预测模块的知识驱动参数传播模型;
步骤S2,进行模型训练,在基础类别样本组成的数据集上对特征提取器进行训练,并利用训练好的特征提取器提取基础类别和只有少量样本的新类别的样本的特征,引入类别之间的关系作为先验知识,利用知识图表示类别之间的先验关系,并集成该知识图利用图神经网络通过图形式传播迭代更新分类器参数;
步骤S3,利用提取出的特征和更新后的分类器参数得到分类结果。
与现有技术相比,本发明一种知识驱动参数传播模型及其少样本学习方法通过引入类别之间的关系(语义关系或层次关系)作为先验知识来辅助小样本分类,将这种先验知识以图神经网络的形式集成到原来的分类网络中,通过图形式传播这些参数来探索类别之间的相互作用,可以更好地利用基础类别的知识,在显式的类别相关性的指导下学习新类别的分类器参数,提高了少样本分类的精度和泛化能力。
附图说明
图1为本发明一种知识驱动参数传播模型模型的结构示意图;
图2为本发明具体实施例中图神经网络的参数更新过程示意图;
图3为本发明一种知识驱动参数传播的少样本学习方法的步骤流程图。
具体实施方式
以下通过特定的具体实例并结合附图说明本发明的实施方式,本领域技术人员可由本说明书所揭示的内容轻易地了解本发明的其它优点与功效。本发明亦可通过其它不同的具体实例加以施行或应用,本说明书中的各项细节亦可基于不同观点与应用,在不背离本发明的精神下进行各种修饰与变更。
少样本学习系统一般给定基础类别和相应的充足的样本,要求从非常少的样本中学习识别新的类别。在此定义完整的数据集为:
其中:
基础类别有Kbase类,新的类别有Knovel类,Nb为基础类别每类要采样出的样本数,N′n为新类别每类要采样出的样本数。
一般,基础类别有很多的样本,因此本发明用基础类别的样本直接训练,得到特征提取器φ(·)和基础类别分类器参数但是新的类别只有很少的几个样本,直接训练得到新的类别的分类器参数 是不可能的。因此,挖掘基础类别和新的类别之间的相关性对于迁移基础类别的知识来帮助学习新的类别的分类器参数W′n是很重要的。幸运的是,不同类别之间存在很强的先验关系,比如语义相似性,这种先验关系可以有效地辅助小样本分类。
图1为本发明一种知识驱动参数传播模型的结构示意图。如图1所示,本发明一种知识驱动参数传播模型,包括:
特征提取模块101,用于在基础类别样本组成的数据集上对特征提取器进行训练,并利用训练好的特征提取器提取基础类别和只有少量样本的新类别的样本的特征。
图神经网络模块102,用于引入类别之间的关系作为先验知识,利用知识图(Knowledge Graph)表示类别之间的先验关系,并集成该知识图利用图神经网络通过图形式传播迭代更新分类器参数。
分类预测模块103,用于利用提取出的特征和更新后的分类器参数得到分类结果。
具体地说,知识图编码了不同类别之间的关系,不同知识可以构建不同的知识图。在本发明具体实施例中,尝试使用了两种知识:语义相似性和类别层次关系。
语义相似性:每种类别的类别名本身就带有语义信息,两种类别的语义距离编码了他们之间的关系。换句话说,如果两个类别的语音距离小,则他们之间高度相关,否则不相关。因此,首先采用这种知识来构建知识图。具体的,给定类别i和类别j的语义单词(类别名)为wi和wj,首先利用GloVe模型抽取他们的语义特征向量和并计算他们的距离dij。然后应用一个单调递减函数来将距离映射为相关关系
类别层次关系:类别层级关系通过不同概念抽象来编码类别之间的关系。通常,一类到另一类的距离暗示着他们的相关关系,距离约小意味着高度相关,距离越大意味着不太相关。在本发明具体实施例中,可基于WordNet来构建类别层级图,具体的,给定类别i和类别j,计算从节点i到节点j的最短距离dij,然后同样应用一个单调递减函数来将距离映射为相关关系
如上所述,由于不同类别之间存在很强的先验关系,比如语义相似性,这种先验关系可以有效地辅助小样本分类。因此,在本发明中,以知识图的形式表示这种类别之间的先验关系,并集成这个图来指导类别之间的交互,即在类别先验关系的指导下迭代更新参数W:
其中,φ(·)是在基础类别样本组成的数据集上训练好的特征提取器,它用于提取基础类别和新类别样本的特征,f(·)是参数传播和更新函数。在时间t,用上个时间t-1的参数Wt-1和图作为输入来计算得到精修的参数Wt。
在本发明具体实施例中,图神经网络模块102采用图神经网络(Graph NeuralNetwork,GNN)来实现f(·)。图神经网络是全微分网络,他可以通过迭代传播更新节点信息来处理图结构的数据。形式化地,图神经网络根据要解决的问题先初始化图节点,然后基于过去节点的状态和从他相邻节点集成的信息来更新自己的状态。
具体地说,本发明基于GNN来迭代更新参数,假设图编码了所有类别的相关关系,其中节点表示类别,边缘表示类别之间的关系。给定一个K=Kbase+Knovel类的数据集,V表示为其中节点vk表示第k类。为了便于说明,将新的类别记做{Kbase+1,Kbase+2,…,K},A是邻接矩阵,aij表示类别i和类别j的相关关系。对每次相互作用t,每个节点vk都有个隐含状态在相互作用t=0时,隐含状态由对应类别的参数向量初始化,形式化表示为:
其中,Wb和W′n重组为Wb和W′n所有的参数都是随机初始化的,因此基础类别和新类别的分类器参数是从头更新的。在每次相互作用t,每个结点k集成与它有关的结点的信息,使得这些结点的参数向量可以帮助精修它自己的参数向量。这个过程形式化表示为:
通过这种方式,如果结点k和k′高相关,则鼓励信息从k′传播到k,否则抑制信息从k′传播到k,然后框架通过门机制,用集成好的特征向量和前一次相互作用后的隐含状态作为输入来更新自己的隐含状态,具体过程如下:
其中,σ(·)和tanh(·)分别是逻辑sigmoid函数和双曲正切函数,⊙是逐元乘法运算。通过这种方式,模型趋向于采用相关的信息来更新当前节点的参数,参数传播过程如图2所示:
图神经网络很适合上述提到的需求:第一,它可以自然地集成先验知识来正则化参数传播,从而更好地从基础类别中挖掘知识来学习新类别的分类器参数。第二,基础类别和新颖类别共享参数传播和更新机制,因此可以用大量的基础类别的样本来训练这个机制,然后泛化到更新新颖类别的参数。
以下将通过一具体实施例来说明本发明的训练过程:
在本发明具体实施例中,特征提取模块101采用ResNet-50来实现特征提取器,具体地,去除最后一层全连接层,然后对每张图片提取2048维的特征向量。每个参数向量和图神经网络隐含状态的维度也设置为2048维。输出网络o(·)为一个全连接网络,它将4096个神经元映射到2048维。
本发明采用两阶段的训练过程来训练所提出的模型:
其中Ii为第i张图片,yi是对应的类别标签。给定一张图片Ii,我们先计算它的特征得到分数向量并用softmax函数将它正则化为一个概率向量本发明采用交叉熵损失函数(cross entropy loss)作为目标函数,为了让学到的特征更好地泛化到新颖类别,引入平方渐变幅度损失(SquaredGradient Magnitude loss)来正规化表示学习。因此,本阶段的目标函数定义为:
其中:
其中,λ是平衡两种损失的参数,设为0.005。本阶段,模型用随机梯度下降法(SGD)进行训练,批大小(batch size)为256,动量(momentum)为0.9,权值衰减(weight decay)为0.0005。学习率设置为0.1,每30个epoches除以10。
其中Ii是第i张图片,yi是对应的类别。
给定图片Ii,用类似的过程得到概率向量这里也定义交叉熵作为目标函数。为了避免过拟合,在分类参数上引入一个正则项,因此整个目标函数定义为其中η设置为0.001,用于平衡两个损失项,也用SGD训练,批大小(batch size)为1000,动量(momentum)为0.9,权值衰减(weight decay)为0.0001。学习率设置为0.01。
图3为本发明一种知识驱动参数传播的少样本学习方法的步骤流程图。如图3所示,本发明一种知识驱动参数传播的少样本学习方法,包括如下步骤:
步骤S1,建立包括特征提取模块、图神经网络模块和分类预测模块的知识驱动参数传播模型;
步骤S2,进行模型训练,在基础类别样本组成的数据集上对特征提取器进行训练,并利用训练好的特征提取器提取基础类别和只有少量样本的新类别的样本的特征,引入类别之间的关系作为先验知识,利用知识图表示类别之间的先验关系,并集成该知识图利用图神经网络通过图形式传播迭代更新分类器参数。
步骤S3,利用提取出的特征和更新后的分类器参数得到分类结果。
在本发明具体实施例中,采用两阶段的训练过程来训练所提出的知识参数驱动模型:
其中Ii为第i张图片,yi是对应的类别标签。给定一张图片Ii,我们先计算它的特征得到分数向量并用softmax函数将它正则化为一个概率向量本发明采用交叉熵损失函数(cross entropy loss)作为目标函数,为了让学到的特征更好地泛化到新颖类别,引入平方渐变幅度损失(SquaredGradient Magnitude loss)来正规化表示学习。因此,本阶段的目标函数定义为:
其中:
其中,λ是平衡两种损失的参数,设为0.005。本阶段,模型用随机梯度下降法(SGD)进行训练,批大小(batch size)为256,动量(momentum)为0.9,权值衰减(weight decay)为0.0005。学习率设置为0.1,每30个epoches除以10。
其中Ii是第i张图片,yi是对应的类别。
给定图片Ii,用类似的过程得到概率向量这里也定义交叉熵作为目标函数。为了避免过拟合,在分类参数上引入一个正则项,因此整个目标函数定义为其中η设置为0.001,用于平衡两个损失项,也用SGD训练,批大小(batch size)为1000,动量(momentum)为0.9,权值衰减(weight decay)为0.0001。学习率设置为0.01。
综上所述,本发明一种知识驱动参数传播模型及其少样本学习方法通过引入类别之间的关系(语义关系或层次关系)作为先验知识来辅助小样本分类,将这种先验知识以图神经网络的形式集成到原来的分类网络中,通过图形式传播这些参数来探索类别之间的相互作用,可以更好地利用基础类别的知识,在显式的类别相关性的指导下学习新类别的分类器参数,提高了少样本分类的精度和泛化能力。
上述实施例仅例示性说明本发明的原理及其功效,而非用于限制本发明。任何本领域技术人员均可在不违背本发明的精神及范畴下,对上述实施例进行修饰与改变。因此,本发明的权利保护范围,应如权利要求书所列。
Claims (9)
1.一种知识驱动参数传播模型,包括:
特征提取模块,用于在基础类别样本组成的数据集上对特征提取器进行训练,并利用训练好的特征提取器提取基础类别和只有少量样本的新类别的样本的特征;
图神经网络模块,用于引入类别之间的关系作为先验知识,利用知识图表示类别之间的先验关系,并集成该知识图利用图神经网络通过图形式传播迭代更新分类器参数。
分类预测模块,用于利用提取出的特征和更新后的分类器参数得到分类结果;
所述图神经网络根据如下公式在类别先验关系的指导下迭代更新分类器参数W:
4.如权利要求1所述的一种知识驱动参数传播模型,其特征在于:所述图神经网络根据要解决的问题先初始化图节点,然后基于过去节点的状态和从他相邻节点集成的信息来更新自己的状态。
5.如权利要求1所述的一种知识驱动参数传播模型,其特征在于:假设图编码了所有类别的相关关系,其中节点表示类别,边缘表示类别之间的关系,给定一个K=Kbase+Knovel类的数据集,V表示为其中节点vk表示第k类,新的类别记做{Kbase+1,Kbase+2,…,K},A是邻接矩阵,aij表示类别i和类别j的相关关系,对每次相互作用t,每个节点vk都有个隐含状态
在每次相互作用t,每个结点k集成与它有关的结点的信息,使得这些结点的参数向量帮助精修其自身的参数向量,该过程形式化表示为:
通过该方式,如果结点k和k′高相关,则鼓励信息从k′传播到k,否则抑制信息从k′传播到k,然后通过门机制,用集成好的特征向量和前一次相互作用后的隐含状态作为输入来更新自己的隐含状态;
9.一种基于权利要求1至8任一所述的知识驱动参数传播模型的少样本学习方法,包括如下步骤:
步骤S1,建立包括特征提取模块、图神经网络模块和分类预测模块的知识驱动参数传播模型;
步骤S2,进行模型训练,在基础类别样本组成的数据集上对特征提取器进行训练,并利用训练好的特征提取器提取基础类别和只有少量样本的新类别的样本的特征,引入类别之间的关系作为先验知识,利用知识图表示类别之间的先验关系,并集成该知识图利用图神经网络通过图形式传播迭代更新分类器参数;
步骤S3,利用提取出的特征和更新后的分类器参数得到分类结果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910100364.XA CN109934261B (zh) | 2019-01-31 | 2019-01-31 | 一种知识驱动参数传播模型及其少样本学习方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910100364.XA CN109934261B (zh) | 2019-01-31 | 2019-01-31 | 一种知识驱动参数传播模型及其少样本学习方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109934261A CN109934261A (zh) | 2019-06-25 |
CN109934261B true CN109934261B (zh) | 2023-04-07 |
Family
ID=66985346
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910100364.XA Active CN109934261B (zh) | 2019-01-31 | 2019-01-31 | 一种知识驱动参数传播模型及其少样本学习方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109934261B (zh) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112287954A (zh) * | 2019-07-24 | 2021-01-29 | 华为技术有限公司 | 图像分类方法、图像分类模型的训练方法及其装置 |
CN110502659B (zh) * | 2019-08-23 | 2022-07-15 | 深圳市商汤科技有限公司 | 图像特征提取及网络的训练方法、装置和设备 |
CN111026544B (zh) * | 2019-11-06 | 2023-04-28 | 中国科学院深圳先进技术研究院 | 图网络模型的节点分类方法、装置及终端设备 |
CN111191723B (zh) * | 2019-12-30 | 2023-06-20 | 创新奇智(北京)科技有限公司 | 基于级联分类器的少样本商品分类系统及分类方法 |
CN111291618B (zh) * | 2020-01-13 | 2024-01-09 | 腾讯科技(深圳)有限公司 | 标注方法、装置、服务器和存储介质 |
CN111597943B (zh) * | 2020-05-08 | 2021-09-03 | 杭州火石数智科技有限公司 | 一种基于图神经网络的表格结构识别方法 |
CN112016601B (zh) * | 2020-08-17 | 2022-08-05 | 华东师范大学 | 基于知识图谱增强小样本视觉分类的网络模型构建方法 |
CN112183580B (zh) * | 2020-09-07 | 2021-08-10 | 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) | 一种基于动态知识路径学习的小样本分类方法 |
CN112364747B (zh) * | 2020-11-04 | 2024-02-27 | 重庆高新区飞马创新研究院 | 一种有限样本下的目标检测方法 |
CN112434754A (zh) * | 2020-12-14 | 2021-03-02 | 前线智能科技(南京)有限公司 | 一种基于图神经网络的跨模态医学影像域适应分类方法 |
CN112488038B (zh) * | 2020-12-15 | 2023-07-07 | 中国人民解放军国防科技大学 | 一种基于图网络学习的目标识别方法 |
CN112766354B (zh) * | 2021-01-13 | 2023-11-24 | 中国科学院计算技术研究所 | 一种基于知识图谱的小样本图片识别方法及系统 |
CN113052263A (zh) * | 2021-04-23 | 2021-06-29 | 东南大学 | 一种基于流形学习和高阶图神经网络的小样本图像分类方法 |
CN113283804B (zh) * | 2021-06-18 | 2022-05-31 | 支付宝(杭州)信息技术有限公司 | 一种风险预测模型的训练方法和系统 |
CN114266920A (zh) * | 2021-12-14 | 2022-04-01 | 北京邮电大学 | 基于知识驱动的深度学习图像分类方法和系统 |
CN114090780B (zh) * | 2022-01-20 | 2022-05-31 | 宏龙科技(杭州)有限公司 | 一种基于提示学习的快速图片分类方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108038498A (zh) * | 2017-12-05 | 2018-05-15 | 北京工业大学 | 一种基于子图匹配的室内场景对象语义标注方法 |
CN108563653A (zh) * | 2017-12-21 | 2018-09-21 | 清华大学 | 一种用于知识图谱中知识获取模型的构建方法及系统 |
CN108875827A (zh) * | 2018-06-15 | 2018-11-23 | 广州深域信息科技有限公司 | 一种细粒度图像分类的方法及系统 |
-
2019
- 2019-01-31 CN CN201910100364.XA patent/CN109934261B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108038498A (zh) * | 2017-12-05 | 2018-05-15 | 北京工业大学 | 一种基于子图匹配的室内场景对象语义标注方法 |
CN108563653A (zh) * | 2017-12-21 | 2018-09-21 | 清华大学 | 一种用于知识图谱中知识获取模型的构建方法及系统 |
CN108875827A (zh) * | 2018-06-15 | 2018-11-23 | 广州深域信息科技有限公司 | 一种细粒度图像分类的方法及系统 |
Non-Patent Citations (1)
Title |
---|
Structural Image Classification with Graph Neural Networks;Alyssa Quek,et al;《ues and Applications》;20120112;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN109934261A (zh) | 2019-06-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109934261B (zh) | 一种知识驱动参数传播模型及其少样本学习方法 | |
CN110084296B (zh) | 一种基于特定语义的图表示学习框架及其多标签分类方法 | |
CN108874782B (zh) | 一种层次注意力lstm和知识图谱的多轮对话管理方法 | |
CN108170816B (zh) | 一种基于深度神经网络的智能视觉问答方法 | |
CN110598005B (zh) | 一种面向公共安全事件的多源异构数据知识图谱构建方法 | |
CN110609891A (zh) | 一种基于上下文感知图神经网络的视觉对话生成方法 | |
CN111061856A (zh) | 一种基于知识感知的新闻推荐方法 | |
CN109947912A (zh) | 一种基于段落内部推理和联合问题答案匹配的模型方法 | |
CN110765775A (zh) | 一种融合语义和标签差异的命名实体识别领域自适应的方法 | |
CN112232087B (zh) | 一种基于Transformer的多粒度注意力模型的特定方面情感分析方法 | |
Zhang et al. | Quantifying the knowledge in a DNN to explain knowledge distillation for classification | |
CN113705218A (zh) | 基于字符嵌入的事件元素网格化抽取方法、存储介质及电子装置 | |
CN114911945A (zh) | 基于知识图谱的多价值链数据管理辅助决策模型构建方法 | |
CN117690098B (zh) | 一种基于动态图卷积的开放驾驶场景下多标签识别方法 | |
CN113255366B (zh) | 一种基于异构图神经网络的方面级文本情感分析方法 | |
CN111400494A (zh) | 一种基于GCN-Attention的情感分析方法 | |
CN114818703A (zh) | 基于BERT语言模型和TextCNN模型的多意图识别方法及系统 | |
CN116402066A (zh) | 多网络特征融合的属性级文本情感联合抽取方法及系统 | |
CN115687760A (zh) | 一种基于图神经网络的用户学习兴趣标签预测方法 | |
CN113392929B (zh) | 一种基于词嵌入与自编码器融合的生物序列特征提取方法 | |
CN114925205A (zh) | 基于对比学习的gcn-gru文本分类方法 | |
CN112560440B (zh) | 一种基于深度学习的面向方面级情感分析的句法依赖方法 | |
CN114169408A (zh) | 一种基于多模态注意力机制的情感分类方法 | |
JPH0934863A (ja) | ニューラルネットワークによる情報統合処理方法 | |
CN117436451A (zh) | 基于IDCNN-Attention的农业病虫害命名实体识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |