CN109272044A - 一种图像相似度确定方法、装置、设备及存储介质 - Google Patents

一种图像相似度确定方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN109272044A
CN109272044A CN201811118582.8A CN201811118582A CN109272044A CN 109272044 A CN109272044 A CN 109272044A CN 201811118582 A CN201811118582 A CN 201811118582A CN 109272044 A CN109272044 A CN 109272044A
Authority
CN
China
Prior art keywords
image
similarity
convolutional network
depth convolutional
network model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811118582.8A
Other languages
English (en)
Inventor
杨朔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201811118582.8A priority Critical patent/CN109272044A/zh
Publication of CN109272044A publication Critical patent/CN109272044A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种图像相似度确定方法，该方法包括以下步骤：获得待进行相似度确定的目标图像对，目标图像对包括第一图像和第二图像；提取目标图像对的至少两种图像特征；分别将目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果；基于每个深度卷积网络模型的相似度判定结果的加权运算，确定目标图像对中第一图像和第二图像的相似度。应用本发明实施例所提供的技术方案，有效提高了图像相似性的确定精度，对以此为基础的图像识别和目标跟踪任务的性能有一定提高。本发明还公开了一种图像相似度确定装置、设备及存储介质，具有相应技术效果。

Description

一种图像相似度确定方法、装置、设备及存储介质
技术领域
本发明涉及计算机应用技术领域，特别是涉及一种图像相似度确定方法、装置、设备及存储介质。
背景技术
在图像识别、目标跟踪等应用场景中，常常需要确定两个图像的相似度。
在现有技术中，可以使用孪生网络进行图像相似度的确定。孪生网络是一种特殊的深度卷积网络结构，该网络具有两个数据输入端，可以同时利用卷积网络结构对两个端口的图像数据进行卷积处理，最终提取到输入图像的特征向量，然后利用两个图像的特征向量和特定的相似度量函数进一步进行相似度判定。
这种方法使用单个网络模型进行两个图像的相似度判定，其判定结果高度依赖于该网络模型训练的可靠性，在该网络模型使用单一图像特征作为输入，对于图像的表征存在一定的片面性，从而使得对于图像相似度的确定精度不高。
发明内容
本发明的目的是提供一种图像相似度确定方法、装置、设备及存储介质，以有效提高图像相似度的确定精度。
为解决上述技术问题，本发明提供如下技术方案：
一种图像相似度确定方法，包括：
获得待进行相似度确定的目标图像对，所述目标图像对包括第一图像和第二图像；
提取所述目标图像对的至少两种图像特征；
分别将所述目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果；
基于每个深度卷积网络模型的相似度判定结果的加权运算，确定所述目标图像对中所述第一图像和所述第二图像的相似度。
在本发明的一种具体实施方式中，所述提取所述目标图像对的至少两种图像特征，包括：
提取所述目标图像对的RGB图像特征和颜色命名图像特征。
在本发明的一种具体实施方式中，通过以下步骤基于RGB图像特征预先训练得到第一深度卷积网络模型：
获得训练样本集和测试样本集，所述训练样本集和所述测试样本集中均包含多个图像对；
提取所述训练样本集的RGB图像特征和所述测试样本集的RGB图像特征；
利用所述训练样本集的RGB图像特征作为网络输入，对预先构建的初始深度卷积网络进行训练，获得训练后的第一深度卷积网络；
利用所述测试样本集的RGB图像特征作为网络输入，对所述训练后的第一深度卷积网络进行测试；
在测试结果未达到设定第一精确度时，重复执行训练、测试操作，在测试结果达到所述第一精确度时，得到第一深度卷积网络模型。
在本发明的一种具体实施方式中，通过以下步骤基于颜色命名图像特征预先训练得到第二深度卷积网络模型：
提取所述训练样本集的颜色命名图像特征和所述测试样本集的颜色命名图像特征；
基于所述训练样本集的RGB图像特征的图像格式，对提取的所述训练样本集和所述测试样本集的颜色命名图像特征进行数据格式处理；
利用所述训练样本集的颜色命名图像特征作为网络输入，对所述初始深度卷积网络进行训练，获得训练后的第二深度卷积网络；
利用所述测试样本集的颜色命名图像特征作为网络输入，对所述训练后的第二深度卷积网络进行测试；
在测试结果未达到设定第二精确度时，重复执行训练、测试操作，在测试结果达到所述第二精确度时，得到第二深度卷积网络模型。
在本发明的一种具体实施方式中，所述基于每个深度卷积网络模型的相似度判定结果的加权运算，确定所述目标图像对中所述第一图像和所述第二图像的相似度，包括：
将每个深度卷积网络模型的相似度判定结果的加权和，确定为所述目标图像对中所述第一图像和所述第二图像的相似度。
一种图像相似度确定装置，包括：
图像对获得模块，用于获得待进行相似度确定的目标图像对，所述目标图像对包括第一图像和第二图像；
图像特征提取模块，用于提取所述目标图像对的至少两种图像特征；
判定结果获得模块，用于分别将所述目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果；
相似度确定模块，用于基于每个深度卷积网络模型的相似度判定结果的加权运算，确定所述目标图像对中所述第一图像和所述第二图像的相似度。
在本发明的一种具体实施方式中，所述图像特征提取模块，具体用于：
提取所述目标图像对的RGB图像特征和颜色命名图像特征。
在本发明的一种具体实施方式中，所述相似度确定模块，具体用于：
将每个深度卷积网络模型的相似度判定结果的加权和，确定为所述目标图像对中所述第一图像和所述第二图像的相似度。
一种图像相似度确定设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现上述任一项所述图像相似度确定方法的步骤。
一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一项所述图像相似度确定方法的步骤。
应用本发明实施例所提供的技术方案，获得待进行相似度确定的目标图像对后，提取目标图像对的至少两种图像特征，分别将目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果，基于获得的相似度判定结果的加权运算，确定目标图像对中第一图像和第二图像的相似度。通过对不同深度卷积网络模型的相似度判定结果的加权计算，共同决定最终的判定结果，有效提高了图像相似性的确定精度，对以此为基础的图像识别和目标跟踪任务的性能有一定提高。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例中一种图像相似度确定方法的实施流程图；
图2为本发明实施例中一种深度卷积网络模型训练示意图；
图3为本发明实施例中一种图像相似度确定流程图；
图4为本发明实施例中一种图像相似度确定装置的结构示意图；
图5为本发明实施例中一种图像相似度确定设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1所示，为本发明实施例所提供的一种图像相似度确定方法的实施流程图，该方法可以包括以下步骤：
S110：获得待进行相似度确定的目标图像对。
其中，目标图像对包括第一图像和第二图像。
在图像识别、目标跟踪任务等应用场景中，通常会需要进行两个图像的相似度的确定。根据实际应用场景，可以获得待进行相似度确定的目标图像对。目标图像对包括第一图像和第二图像两个图像。
S120：提取目标图像对的至少两种图像特征。
一个图像存在多种图像特征，如RGB颜色特征、颜色命名(color name)图像特征、灰度图像特征等。
在获得待进行相似度确定的目标图像对后，可以提取目标图像对的至少两种图像特征。在本发明的一种具体实施方式中，可以提取目标图像对的RGB图像特征和颜色命名图像特征。
S130：分别将目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果。
在本发明实施例中，可以基于不同图像特征预先训练得到多个深度卷积网络模型。提取目标图像对的至少两种图像特征后，可以分别将目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得多个相似度判定结果。如将目标图像对的RGB图像特征输入到基于RGB图像特征预先训练得到的第一深度卷积网络模型中，得到第一相似度判定结果，将目标图像对的颜色命名图像特征输入到基于颜色命名图像特征预先训练得到的第二深度卷积网络模型中，得到第二相似度判定结果。
在本发明的一种具体实施方式中，可以通过以下步骤基于RGB图像特征预先训练得到第一深度卷积网络模型：
步骤一：获得训练样本集和测试样本集，训练样本集和测试样本集中包含多个训练图像对；
步骤二：提取训练样本集的RGB图像特征和测试样本集的RGB图像特征；
步骤三：利用训练样本集的RGB图像特征作为网络输入，对预先构建的初始深度卷积网络进行训练，获得训练后的第一深度卷积网络；
步骤四：利用测试样本集的RGB图像特征作为网络输入，对训练后的第一深度卷积网络进行测试；
步骤五：在测试结果未达到设定第一精确度时，重复执行训练、测试操作，在测试结果达到第一精确度时，得到第一深度卷积网络模型。
为便于描述，将上述五个步骤结合起来进行说明。
在实际应用中，可以通过图像采集、图像处理等方式获得训练样本集合测试样本集，训练样本集和测试样本集中均包含多个图像对，每个图像对中均包含两个图像，可以预先对每个图像对的两个图像的相似程度进行标记。
提取训练样本集的RGB图像特征和测试样本集的RGB图像特征，利用训练样本集的RGB图像特征作为网络输入，对预先构建的初始深度卷积网络进行训练，调整网络参数，得到训练后的第一深度卷积网络。初始深度卷积网络具体可以为孪生网络，或者其他可用于图像相似性判别的网络。
经过训练得到第一深度卷积网络后，可以利用测试样本集的RGB图像特征作为网络输入，对训练后的第一深度卷积网络进行测试。如果关于相似度的测试结果未达到设定第一精确度，则可以重复执行训练、测试操作，也可以增大训练样本集和测试样本集规模后，重复执行训练、测试操作。如果测试结果达到设定第一精确度，则可以将当前的第一深度卷积网络确定为待用的第一深度卷积网络模型。
在本发明的一种具体实施方式中，可以通过以下步骤基于颜色命名图像特征预先训练得到第二深度卷积网络模型：
第一个步骤：提取训练样本集的颜色命名图像特征和测试样本集的颜色命名图像特征；
第二个步骤：基于训练样本集的RGB图像特征的图像格式，对提取的训练样本集和测试样本集的颜色命名图像特征进行数据格式处理；
第三个步骤：利用训练样本集的颜色命名图像特征作为网络输入，对初始深度卷积网络进行训练，获得训练后的第二深度卷积网络；
第四个步骤：利用测试样本集的颜色命名图像特征作为网络输入，对训练后的第二深度卷积网络进行测试；
第五个步骤：在测试结果未达到设定第二精确度时，重复执行训练、测试操作，在测试结果达到第二精确度时，得到第二深度卷积网络模型。
为便于描述，将上述五个步骤结合起来进行说明。
获得训练样本集和测试样本集后，可以提取训练样本集的颜色命名图像特征和测试样本集的颜色命名图像特征。基于训练样本集的RGB图像特征的图像格式，对提取的训练样本集和测试样本集的颜色命名图像特征进行数据格式处理，使其与RGB图像特征的图像格式相同。
在实际应用中，颜色命名图像特征的通道数会远大于RGB图像特征的通道数，如果初始深度卷积网络的参数结构相同，则可以采用主元分析法获取颜色命名图像特征中三通道特征。主元分析法为现有技术，本发明实施例对此不再赘述。
利用训练样本集的颜色命名图像特征作为网络输入，对初始深度卷积网络进行训练，进行网络参数调整，获得训练后的第二深度卷积网络。
经过训练得到第二深度卷积网络后，可以利用测试样本集的颜色命名图像特征作为网络输入，对训练后的第二深度卷积网络进行测试。如果关于相似度的测试结果未达到设定第二精确度，则可以重复执行训练、测试操作，也可以增大训练样本集和测试样本集规模后，重复执行训练、测试操作。如果测试结果达到设定第二精确度，则可以将当前的第二深度卷积网络确定为待用的第二深度卷积网络模型。
图2所示为深度卷积网络模型训练示意图，x1、x2分别为两个图像的RGB图像特征，利用特征提取方法可以提取到两个图像的其他图像特征，如颜色命名图像特征，得到经过卷积特征的提取网络后，得到对应的卷积特征和再利用相似度量函数对输入图像的相似度Ew进行判定。
需要说明的是，基于不同图像特征预先训练的初始深度卷积网络的网络结构可以不同，即可以预先构建具有不同网络结构的初始深度卷积网络。
在实际应用中，在将目标图像对的每种图像特征输入到相应的深度卷积网络模型之前，可以先对图像特征进行数据格式处理，使其适应相应的深度卷积网络模型的输入格式。
S140：基于每个深度卷积网络模型的相似度判定结果的加权运算，确定目标图像对中第一图像和第二图像的相似度。
将目标图像对的每种图像特征分别输入到相应的深度卷积网络模型中后，可以获得每个深度卷积网络模型的相似度判定结果，基于每个深度卷积网络模型的相似度判定结果的加权运算，可以确定目标图像对中第一图像和第二图像的相似度。具体的，可以将每个深度卷积网络模型的相似度判定结果的加权和，确定为目标图像对中第一图像和第二图像的相似度。
如图3所示，深度卷积网络模型A为基于图像特征A预先训练得到的，其对应的权重为a，深度卷积网络模型B为基于图像特征B预先训练得到的，其对应的权重为b，将目标图像对(x1、x2)的图像特征A输入到深度卷积网络模型A中，得到相似度判定结果Ea，将目标图像对的图像特征B输入到深度卷积网络模型B中，得到相似度判定结果Eb，加权后得到目标图像对中第一图像和第二图像的相似度为E＝Ea+Eb。
每个深度卷积网络模型的具体权重可以根据实际情况进行设定和调整，本发明实施例对此不做限制。
应用本发明实施例所提供的方法，获得待进行相似度确定的目标图像对后，提取目标图像对的至少两种图像特征，分别将目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果，基于获得的相似度判定结果的加权运算，确定目标图像对中第一图像和第二图像的相似度。通过对不同深度卷积网络模型的相似度判定结果的加权计算，共同决定最终的判定结果，有效提高了图像相似性的确定精度，对以此为基础的图像识别和目标跟踪任务的性能有一定提高。
相应于上面的方法实施例，本发明实施例还提供了一种图像相似度确定装置，下文描述的一种图像相似度确定装置与上文描述的一种图像相似度确定方法可相互对应参照。
参见图4所示，该装置包括以下模块：
图像对获得模块410，用于获得待进行相似度确定的目标图像对，目标图像对包括第一图像和第二图像；
图像特征提取模块420，用于提取目标图像对的至少两种图像特征；
判定结果获得模块430，用于分别将目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果；
相似度确定模块440，用于基于每个深度卷积网络模型的相似度判定结果的加权运算，确定目标图像对中第一图像和第二图像的相似度。
应用本发明实施例所提供的装置，获得待进行相似度确定的目标图像对后，提取目标图像对的至少两种图像特征，分别将目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果，基于获得的相似度判定结果的加权运算，确定目标图像对中第一图像和第二图像的相似度。通过对不同深度卷积网络模型的相似度判定结果的加权计算，共同决定最终的判定结果，有效提高了图像相似性的确定精度，对以此为基础的图像识别和目标跟踪任务的性能有一定提高。
在本发明的一种具体实施方式中，图像特征提取模块420，具体用于：
提取目标图像对的RGB图像特征和颜色命名图像特征。
在本发明的一种具体实施方式中，还包括第一模型获得模块，用于通过以下步骤基于RGB图像特征预先训练得到第一深度卷积网络模型：
获得训练样本集和测试样本集，训练样本集和测试样本集中均包含多个图像对；
提取训练样本集的RGB图像特征和测试样本集的RGB图像特征；
利用训练样本集的RGB图像特征作为网络输入，对预先构建的初始深度卷积网络进行训练，获得训练后的第一深度卷积网络；
利用测试样本集的RGB图像特征作为网络输入，对训练后的第一深度卷积网络进行测试；
在测试结果未达到设定第一精确度时，重复执行训练、测试操作，在测试结果达到第一精确度时，得到第一深度卷积网络模型。
在本发明的一种具体实施方式中，还包括第二模型获得模块，用于通过以下步骤基于颜色命名图像特征预先训练得到第二深度卷积网络模型：
提取训练样本集的颜色命名图像特征和测试样本集的颜色命名图像特征；
基于训练样本集的RGB图像特征的图像格式，对提取的训练样本集和测试样本集的颜色命名图像特征进行数据格式处理；
利用训练样本集的颜色命名图像特征作为网络输入，对初始深度卷积网络进行训练，获得训练后的第二深度卷积网络；
利用测试样本集的颜色命名图像特征作为网络输入，对训练后的第二深度卷积网络进行测试；
在测试结果未达到设定第二精确度时，重复执行训练、测试操作，在测试结果达到第二精确度时，得到第二深度卷积网络模型。
在本发明的一种具体实施方式中，相似度确定模块440，具体用于：
将每个深度卷积网络模型的相似度判定结果的加权和，确定为目标图像对中第一图像和第二图像的相似度。
相应于上面的方法实施例，本发明实施例还提供了一种图像相似度确定设备，参见图5所示，该设备包括：
存储器510，用于存储计算机程序；
处理器520，用于执行计算机程序时实现上述图像相似度确定方法的步骤。
相应于上面的方法实施例，本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述图像相似度确定方法的步骤。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的技术方案及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (10)

1.一种图像相似度确定方法，其特征在于，包括：
获得待进行相似度确定的目标图像对，所述目标图像对包括第一图像和第二图像；
提取所述目标图像对的至少两种图像特征；
分别将所述目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果；
基于每个深度卷积网络模型的相似度判定结果的加权运算，确定所述目标图像对中所述第一图像和所述第二图像的相似度。
2.根据权利要求1所述的图像相似度确定方法，其特征在于，所述提取所述目标图像对的至少两种图像特征，包括：
提取所述目标图像对的RGB图像特征和颜色命名图像特征。
3.根据权利要求2所述的图像相似度确定方法，其特征在于，通过以下步骤基于RGB图像特征预先训练得到第一深度卷积网络模型：
获得训练样本集和测试样本集，所述训练样本集和所述测试样本集中均包含多个图像对；
提取所述训练样本集的RGB图像特征和所述测试样本集的RGB图像特征；
利用所述训练样本集的RGB图像特征作为网络输入，对预先构建的初始深度卷积网络进行训练，获得训练后的第一深度卷积网络；
利用所述测试样本集的RGB图像特征作为网络输入，对所述训练后的第一深度卷积网络进行测试；
在测试结果未达到设定第一精确度时，重复执行训练、测试操作，在测试结果达到所述第一精确度时，得到第一深度卷积网络模型。
4.根据权利要求3所述的图像相似度确定方法，其特征在于，通过以下步骤基于颜色命名图像特征预先训练得到第二深度卷积网络模型：
提取所述训练样本集的颜色命名图像特征和所述测试样本集的颜色命名图像特征；
基于所述训练样本集的RGB图像特征的图像格式，对提取的所述训练样本集和所述测试样本集的颜色命名图像特征进行数据格式处理；
利用所述训练样本集的颜色命名图像特征作为网络输入，对所述初始深度卷积网络进行训练，获得训练后的第二深度卷积网络；
利用所述测试样本集的颜色命名图像特征作为网络输入，对所述训练后的第二深度卷积网络进行测试；
在测试结果未达到设定第二精确度时，重复执行训练、测试操作，在测试结果达到所述第二精确度时，得到第二深度卷积网络模型。
5.根据权利要求1至4之中任一项所述的图像相似度确定方法，其特征在于，所述基于每个深度卷积网络模型的相似度判定结果的加权运算，确定所述目标图像对中所述第一图像和所述第二图像的相似度，包括：
将每个深度卷积网络模型的相似度判定结果的加权和，确定为所述目标图像对中所述第一图像和所述第二图像的相似度。
6.一种图像相似度确定装置，其特征在于，包括：
图像对获得模块，用于获得待进行相似度确定的目标图像对，所述目标图像对包括第一图像和第二图像；
图像特征提取模块，用于提取所述目标图像对的至少两种图像特征；
判定结果获得模块，用于分别将所述目标图像对的每种图像特征输入到基于相应图像特征预先训练得到的深度卷积网络模型中，获得每个深度卷积网络模型的相似度判定结果；
相似度确定模块，用于基于每个深度卷积网络模型的相似度判定结果的加权运算，确定所述目标图像对中所述第一图像和所述第二图像的相似度。
7.根据权利要求6所述的图像相似度确定装置，其特征在于，所述图像特征提取模块，具体用于：
提取所述目标图像对的RGB图像特征和颜色命名图像特征。
8.根据权利要求6或7所述的图像相似度确定装置，其特征在于，所述相似度确定模块，具体用于：
将每个深度卷积网络模型的相似度判定结果的加权和，确定为所述目标图像对中所述第一图像和所述第二图像的相似度。
9.一种图像相似度确定设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至5任一项所述图像相似度确定方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述图像相似度确定方法的步骤。
CN201811118582.8A 2018-09-19 2018-09-19 一种图像相似度确定方法、装置、设备及存储介质 Pending CN109272044A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811118582.8A CN109272044A (zh) 2018-09-19 2018-09-19 一种图像相似度确定方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811118582.8A CN109272044A (zh) 2018-09-19 2018-09-19 一种图像相似度确定方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN109272044A true CN109272044A (zh) 2019-01-25

Family

ID=65198331

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811118582.8A Pending CN109272044A (zh) 2018-09-19 2018-09-19 一种图像相似度确定方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN109272044A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110363296A (zh) * 2019-06-28 2019-10-22 腾讯科技（深圳）有限公司 任务模型获取方法和装置、存储介质及电子装置
CN111401422A (zh) * 2020-03-09 2020-07-10 南京览笛信息科技有限公司 一种基于多角度深度推理的深度网络图像分类方法
CN111753753A (zh) * 2020-06-28 2020-10-09 北京市商汤科技开发有限公司 图像识别方法及装置、电子设备和存储介质
CN112801217A (zh) * 2021-03-19 2021-05-14 北京世纪好未来教育科技有限公司 文本相似度判断方法、装置、电子设备以及可读存储介质
CN112836346A (zh) * 2021-01-07 2021-05-25 河南理工大学 基于cn和pca的电机故障诊断方法、电子设备及介质
CN113486804A (zh) * 2021-07-07 2021-10-08 科大讯飞股份有限公司 一种对象识别方法、装置、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104090972A (zh) * 2014-07-18 2014-10-08 北京师范大学 用于三维城市模型检索的图像特征提取和相似性度量方法
CN106228142A (zh) * 2016-07-29 2016-12-14 西安电子科技大学 基于卷积神经网络和贝叶斯决策的人脸验证方法
CN106407352A (zh) * 2016-09-06 2017-02-15 广东顺德中山大学卡内基梅隆大学国际联合研究院 基于深度学习的交通图像检索方法
CN108389614A (zh) * 2018-03-02 2018-08-10 西安交通大学 基于图像分割与卷积神经网络构建医学影像图谱的方法
CN108460114A (zh) * 2018-02-09 2018-08-28 福州大学 一种基于层次注意力模型的图像检索方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104090972A (zh) * 2014-07-18 2014-10-08 北京师范大学 用于三维城市模型检索的图像特征提取和相似性度量方法
CN106228142A (zh) * 2016-07-29 2016-12-14 西安电子科技大学 基于卷积神经网络和贝叶斯决策的人脸验证方法
CN106407352A (zh) * 2016-09-06 2017-02-15 广东顺德中山大学卡内基梅隆大学国际联合研究院 基于深度学习的交通图像检索方法
CN108460114A (zh) * 2018-02-09 2018-08-28 福州大学 一种基于层次注意力模型的图像检索方法
CN108389614A (zh) * 2018-03-02 2018-08-10 西安交通大学 基于图像分割与卷积神经网络构建医学影像图谱的方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110363296A (zh) * 2019-06-28 2019-10-22 腾讯科技（深圳）有限公司 任务模型获取方法和装置、存储介质及电子装置
CN110363296B (zh) * 2019-06-28 2022-02-08 腾讯医疗健康(深圳)有限公司 任务模型获取方法和装置、存储介质及电子装置
CN111401422A (zh) * 2020-03-09 2020-07-10 南京览笛信息科技有限公司 一种基于多角度深度推理的深度网络图像分类方法
CN111401422B (zh) * 2020-03-09 2024-03-08 南京览笛信息科技有限公司 一种基于多角度深度推理的深度网络图像分类方法
CN111753753A (zh) * 2020-06-28 2020-10-09 北京市商汤科技开发有限公司 图像识别方法及装置、电子设备和存储介质
CN112836346A (zh) * 2021-01-07 2021-05-25 河南理工大学 基于cn和pca的电机故障诊断方法、电子设备及介质
CN112836346B (zh) * 2021-01-07 2024-04-23 河南理工大学 基于cn和pca的电机故障诊断方法、电子设备及介质
CN112801217A (zh) * 2021-03-19 2021-05-14 北京世纪好未来教育科技有限公司 文本相似度判断方法、装置、电子设备以及可读存储介质
CN112801217B (zh) * 2021-03-19 2021-07-06 北京世纪好未来教育科技有限公司 文本相似度判断方法、装置、电子设备以及可读存储介质
CN113486804A (zh) * 2021-07-07 2021-10-08 科大讯飞股份有限公司 一种对象识别方法、装置、设备及存储介质
CN113486804B (zh) * 2021-07-07 2024-02-20 科大讯飞股份有限公司 一种对象识别方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN109272044A (zh) 一种图像相似度确定方法、装置、设备及存储介质
WO2020169043A1 (zh) 一种密集人群计数的方法、装置、设备以及存储介质
Wang et al. SaliencyGAN: Deep learning semisupervised salient object detection in the fog of IoT
CN109410261B (zh) 基于金字塔池化模块的单目图像深度估计方法
CN111161311A (zh) 一种基于深度学习的视觉多目标跟踪方法及装置
CN108230278B (zh) 一种基于生成对抗网络的图像去雨滴方法
CN111160229B (zh) 基于ssd网络的视频目标检测方法及装置
CN110084155B (zh) 一种密集人数计数的方法、装置、设备以及存储介质
CN110516716A (zh) 基于多分支相似度网络的无参考图像质量评价方法
CN109740019A (zh) 一种对短视频打标签的方法、装置及电子设备
CN106548169A (zh) 基于深度神经网络的模糊文字增强方法及装置
CN110570435A (zh) 用于对车辆损伤图像进行损伤分割的方法及装置
CN109919252A (zh) 利用少数标注图像生成分类器的方法
CN107729901A (zh) 图像处理模型的建立方法、装置及图像处理方法及系统
CN110210278A (zh) 一种视频目标检测方法、装置及存储介质
CN106204502B (zh) 基于混合阶l0正则化模糊核估计方法
CN107343196A (zh) 一种混合失真无参考图像质量评价方法
US20220377235A1 (en) Data simulation method and device for event camera
CN109409305A (zh) 一种人脸图像清晰度评价方法及装置
CN112733581A (zh) 车辆属性识别方法及系统
CN113869098A (zh) 植物病害识别方法、装置、电子设备及存储介质
CN113706472A (zh) 公路路面病害检测方法、装置、设备及存储介质
CN115147426A (zh) 基于半监督学习的模型训练与图像分割方法和系统
CN112614570B (zh) 样本集标注、病理图像分类、分类模型构建方法及装置
CN110287912A (zh) 基于深度学习的目标对象情感状态确定方法、装置及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190125

RJ01 Rejection of invention patent application after publication