JP6317715B2 - 画像認識装置、方法、及びプログラム - Google Patents
画像認識装置、方法、及びプログラム Download PDFInfo
- Publication number
- JP6317715B2 JP6317715B2 JP2015179873A JP2015179873A JP6317715B2 JP 6317715 B2 JP6317715 B2 JP 6317715B2 JP 2015179873 A JP2015179873 A JP 2015179873A JP 2015179873 A JP2015179873 A JP 2015179873A JP 6317715 B2 JP6317715 B2 JP 6317715B2
- Authority
- JP
- Japan
- Prior art keywords
- importance
- image
- reference image
- assigned
- calculated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Description
2−>I2、I3、I4
3−>I3、I4
I2−>1+1=2
I3−>1+1+1=3
I4−>1+1=2
I2−>0.5+0.3=0.8
I3−>0.5+0.3+0.7=1.5
I4−>0.3+0.7=1.0
I2−>0.8×1.2=0.96
I3−>1.5×1.3=1.95
I4−>1.0×1.4=1.4
20 演算部
30 特徴量抽出部
32 量子化器作成部
34 量子化器記憶部
36 量子化部
38 第一重要度算出部
40 第二重要度算出部
42 重要度A算出部
44 検索部
46 重要度B算出部
50 参照情報記憶部
52 正規化係数算出部
54、234 検索ランキング部
60 出力部
230 ランダム行列算出部
232 ベクトル化部
Claims (9)
- 画像の内容を表す参照ラベルが予め付与された参照画像群から、入力された検索キー画像と同一の物体を含む参照画像、又は前記参照画像に付与された情報を検索する画像認識装置であって、
前記参照画像群に含まれる参照画像の各々、及び前記検索キー画像から特徴量を抽出する特徴抽出部と、
学習画像の各々から抽出された一つ以上の特徴量に基づいて、前記特徴量からVisual Words(VW)への量子化を行うための量子化器を作成する量子化器作成部と、
前記参照画像の各々、及び前記検索キー画像について、抽出された一つ以上の特徴量と、前記作成された量子化器とに基づいて、前記抽出された一つ以上の特徴量に対してVWを割り当てることにより量子化する量子化部と、
前記参照画像群に含まれる前記参照画像毎にVWを割り当てた結果に基づいて、VWの各々の出現頻度から、VWの各々の第一重要度を算出する第一重要度算出部と、
前記参照画像群に含まれる前記参照画像毎にVWを割り当てた結果と、前記参照画像毎に付与された前記参照ラベルとに基づいて、前記参照画像の各々に対し、前記参照画像と同一の参照ラベルが付与された参照画像間におけるVWの各々の出現頻度、又は前記参照画像とは異なる参照ラベルが付与され、かつ、類似する参照画像間におけるVWの各々の出現頻度から、前記参照画像に割り当てられたVWの各々の重要度を算出し、前記参照画像に対して算出したVWの各々の重要度と、前記算出されたVWの各々の第一重要度とを掛けて、前記参照画像に割り当てられたVWの各々の第二重要度を算出する第二重要度算出部と、
前記参照画像の各々について、前記参照画像に割り当てられたVWと、前記第一重要度又は前記第二重要度とに基づいて、前記参照画像毎に割り当てられたVWの数の違いの影響を抑制するための正規化係数を算出する正規化係数算出部と、
前記検索キー画像に割り当てられたVWと、前記参照画像毎に割り当てられたVWと、前記第一重要度又は前記第二重要度と、前記正規化係数とに基づいて、前記検索キー画像に類似する上位X枚の参照画像を検索する検索ランキング部と、
を含む画像認識装置。 - 前記第二重要度算出部は、前記参照画像の各々に対し、前記参照画像と同一の参照ラベルが付与された参照画像間におけるVWの各々の出現頻度、及び前記参照画像と異なる参照ラベルが付与され、かつ、前記参照画像と類似する参照画像間におけるVWの各々の出現頻度から、前記参照画像に割り当てられたVWの各々の重要度を算出し、前記参照画像に対して算出したVWの各々の重要度と、前記算出されたVWの各々の第一重要度とを掛けて、前記参照画像に割り当てられたVWの各々の第二重要度を算出する請求項1に記載の画像認識装置。
- 画像の内容を表す参照ラベルが予め付与された参照画像群から、入力された検索キー画像と同一の物体を含む参照画像、又は前記参照画像に付与された情報を検索する画像認識装置であって、
前記参照画像群に含まれる参照画像の各々、及び前記検索キー画像から特徴量を抽出する特徴抽出部と、
前記参照画像の各々から抽出された一つ以上の特徴量に基づいて、前記特徴量からVisual Words(VW)への量子化を行うための量子化器を作成する量子化器作成部と、
前記参照画像の各々、及び前記検索キー画像について、抽出された一つ以上の特徴量と、前記作成された量子化器とに基づいて、前記抽出された一つ以上の特徴量に対してVWを割り当てることにより量子化する量子化部と、
前記参照画像の各々、及び前記検索キー画像について、前記抽出された一つ以上の特徴量と、前記作成された量子化器と、前記割り当てられたVWとに基づいて、前記割り当てられたVW毎の残差ベクトルを作成するベクトル作成部と、
前記参照画像群に含まれる前記参照画像毎にVWを割り当てた結果に基づいて、VWの各々の出現頻度から、VWの各々の第一重要度を算出する第一重要度算出部と、
前記参照画像群に含まれる前記参照画像毎にVWを割り当てた結果と、前記参照画像毎に付与された前記参照ラベルとに基づいて、前記参照画像の各々に対し、前記参照画像と同一の参照ラベルが付与された参照画像間におけるVWの各々の出現頻度、又は前記参照画像とは異なる参照ラベルが付与され、かつ、類似する参照画像間におけるVWの各々の出現頻度から、前記参照画像に割り当てられたVWの各々の重要度を算出し、前記参照画像に対して算出したVWの各々の重要度と、前記算出されたVWの各々の第一重要度とを掛けて、前記参照画像に割り当てられたVWの各々の第二重要度を算出する第二重要度算出部と、
前記参照画像の各々について、前記参照画像に割り当てられたVWと、前記第一重要度又は前記第二重要度とに基づいて、前記参照画像毎に割り当てられたVWの数の違いの影響を抑制するための正規化係数を算出する正規化係数算出部と、
前記検索キー画像について作成されたVW毎の残差ベクトルと、前記参照画像の各々について作成されたVW毎の残差ベクトルと、前記第一重要度又は前記第二重要度と、前記正規化係数とに基づいて、前記検索キー画像に類似する上位X枚の参照画像を検索する検索ランキング部と、
を含む画像認識装置。 - 前記第二重要度算出部は、前記参照画像の各々に対し、前記参照画像と同一の参照ラベルが付与された参照画像間におけるVWの各々の出現頻度、及び前記参照画像と異なる参照ラベルが付与され、かつ、前記参照画像と類似する参照画像間におけるVWの各々の出現頻度から、前記参照画像に割り当てられたVWの各々の重要度を算出し、前記参照画像に対して算出したVWの各々の重要度と、前記算出されたVWの各々の第一重要度とを掛けて、前記参照画像に割り当てられたVWの各々の第二重要度を算出する請求項3に記載の画像認識装置。
- 画像の内容を表す参照ラベルが予め付与された参照画像群から、入力された検索キー画像と同一の物体を含む参照画像、又は前記参照画像に付与された情報を検索する画像認識装置における画像認識方法であって、
特徴抽出部が、前記参照画像群に含まれる参照画像の各々、及び前記検索キー画像から特徴量を抽出するステップと、
量子化器作成部が、学習画像の各々から抽出された一つ以上の特徴量に基づいて、前記特徴量からVisual Words(VW)への量子化を行うための量子化器を作成するステップと、
量子化部が、前記参照画像の各々、及び前記検索キー画像について、抽出された一つ以上の特徴量と、前記作成された量子化器とに基づいて、前記抽出された一つ以上の特徴量に対してVWを割り当てることにより量子化するステップと、
第一重要度算出部が、前記参照画像群に含まれる前記参照画像毎にVWを割り当てた結果に基づいて、VWの各々の出現頻度から、VWの各々の第一重要度を算出するステップと、
第二重要度算出部が、前記参照画像群に含まれる前記参照画像毎にVWを割り当てた結果と、前記参照画像毎に付与された前記参照ラベルとに基づいて、前記参照画像の各々に対し、前記参照画像と同一の参照ラベルが付与された参照画像間におけるVWの各々の出現頻度、又は前記参照画像とは異なる参照ラベルが付与され、かつ、類似する参照画像間におけるVWの各々の出現頻度から、前記参照画像に割り当てられたVWの各々の重要度を算出し、前記参照画像に対して算出したVWの各々の重要度と、前記算出されたVWの各々の第一重要度とを掛けて、前記参照画像に割り当てられたVWの各々の第二重要度を算出するステップと、
正規化係数算出部が、前記参照画像の各々について、前記参照画像に割り当てられたVWと、前記第一重要度又は前記第二重要度とに基づいて、前記参照画像毎に割り当てられたVWの数の違いの影響を抑制するための正規化係数を算出するステップと、
検索ランキング部が、前記検索キー画像に割り当てられたVWと、前記参照画像毎に割り当てられたVWと、前記第一重要度又は前記第二重要度と、前記正規化係数とに基づいて、前記検索キー画像に類似する上位X枚の参照画像を検索するステップと、
を含む画像認識方法。 - 前記第二重要度算出部が算出するステップは、前記参照画像の各々に対し、前記参照画像と同一の参照ラベルが付与された参照画像間におけるVWの各々の出現頻度、及び前記参照画像と異なる参照ラベルが付与され、かつ、前記参照画像と類似する参照画像間におけるVWの各々の出現頻度から、前記参照画像に割り当てられたVWの各々の重要度を算出し、前記参照画像に対して算出したVWの各々の重要度と、前記算出されたVWの各々の第一重要度とを掛けて、前記参照画像に割り当てられたVWの各々の第二重要度を算出する請求項5に記載の画像認識方法。
- 画像の内容を表す参照ラベルが予め付与された参照画像群から、入力された検索キー画像と同一の物体を含む参照画像、又は前記参照画像に付与された情報を検索する画像認識装置における画像認識方法であって、
特徴抽出部が、前記参照画像群に含まれる参照画像の各々、及び前記検索キー画像から特徴量を抽出するステップと、
量子化器作成部が、前記参照画像の各々から抽出された一つ以上の特徴量に基づいて、前記特徴量からVisual Words(VW)への量子化を行うための量子化器を作成するステップと、
量子化部が、前記参照画像の各々、及び前記検索キー画像について、抽出された一つ以上の特徴量と、前記作成された量子化器とに基づいて、前記抽出された一つ以上の特徴量に対してVWを割り当てることにより量子化するステップと、
ベクトル作成部が、前記参照画像の各々、及び前記検索キー画像について、前記抽出された一つ以上の特徴量と、前記作成された量子化器と、前記割り当てられたVWとに基づいて、前記割り当てられたVW毎の残差ベクトルを作成するステップと、
第一重要度算出部が、前記参照画像群に含まれる前記参照画像毎にVWを割り当てた結果に基づいて、VWの各々の出現頻度から、VWの各々の第一重要度を算出するステップと、
第二重要度算出部が、前記参照画像群に含まれる前記参照画像毎にVWを割り当てた結果と、前記参照画像毎に付与された前記参照ラベルとに基づいて、前記参照画像の各々に対し、前記参照画像と同一の参照ラベルが付与された参照画像間におけるVWの各々の出現頻度、又は前記参照画像とは異なる参照ラベルが付与され、かつ、類似する参照画像間におけるVWの各々の出現頻度から、前記参照画像に割り当てられたVWの各々の重要度を算出し、前記参照画像に対して算出したVWの各々の重要度と、前記算出されたVWの各々の第一重要度とを掛けて、前記参照画像に割り当てられたVWの各々の第二重要度を算出するステップと、
正規化係数算出部が、前記参照画像の各々について、前記参照画像に割り当てられたVWと、前記第一重要度又は前記第二重要度とに基づいて、前記参照画像毎に割り当てられたVWの数の違いの影響を抑制するための正規化係数を算出するステップと、
検索ランキング部が、前記検索キー画像について作成されたVW毎の残差ベクトルと、前記参照画像の各々について作成されたVW毎の残差ベクトルと、前記第一重要度又は前記第二重要度と、前記正規化係数とに基づいて、前記検索キー画像に類似する上位X枚の参照画像を検索するステップと、
を含む画像認識方法。 - 前記第二重要度算出部が算出するステップは、前記参照画像の各々に対し、前記参照画像と同一の参照ラベルが付与された参照画像間におけるVWの各々の出現頻度、及び前記参照画像と異なる参照ラベルが付与され、かつ、前記参照画像と類似する参照画像間におけるVWの各々の出現頻度から、前記参照画像に割り当てられたVWの各々の重要度を算出し、前記参照画像に対して算出したVWの各々の重要度と、前記算出されたVWの各々の第一重要度とを掛けて、前記参照画像に割り当てられたVWの各々の第二重要度を算出する請求項7に記載の画像認識方法。
- コンピュータを、請求項1〜請求項4のいずれか1項に記載の画像認識装置の各部として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015179873A JP6317715B2 (ja) | 2015-09-11 | 2015-09-11 | 画像認識装置、方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015179873A JP6317715B2 (ja) | 2015-09-11 | 2015-09-11 | 画像認識装置、方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017054438A JP2017054438A (ja) | 2017-03-16 |
JP6317715B2 true JP6317715B2 (ja) | 2018-04-25 |
Family
ID=58316778
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015179873A Active JP6317715B2 (ja) | 2015-09-11 | 2015-09-11 | 画像認識装置、方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6317715B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2020100289A1 (ja) * | 2018-11-16 | 2021-11-04 | 富士通株式会社 | 類似度計算装置、類似度計算方法および類似度計算プログラム |
CN111476141A (zh) * | 2020-04-02 | 2020-07-31 | 吉林建筑大学 | 一种提高样本标签准确性的方法和装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5121917B2 (ja) * | 2010-12-21 | 2013-01-16 | ヤフー株式会社 | 画像検索装置、画像検索方法及びプログラム |
JP5577372B2 (ja) * | 2012-03-29 | 2014-08-20 | 楽天株式会社 | 画像検索装置、画像検索方法、プログラムおよびコンピュータ読取り可能な記憶媒体 |
JP5851381B2 (ja) * | 2012-11-15 | 2016-02-03 | 日本電信電話株式会社 | 画像検索装置、方法、及びプログラム |
-
2015
- 2015-09-11 JP JP2015179873A patent/JP6317715B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017054438A (ja) | 2017-03-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20160188633A1 (en) | A method and apparatus for tracking microblog messages for relevancy to an entity identifiable by an associated text and an image | |
CN110019794B (zh) | 文本资源的分类方法、装置、存储介质及电子装置 | |
Amato et al. | Large-scale image retrieval with elasticsearch | |
Huang et al. | Object-location-aware hashing for multi-label image retrieval via automatic mask learning | |
CN105095435A (zh) | 一种图像高维特征的相似比较方法及装置 | |
JP2013206187A (ja) | 情報変換装置、情報検索装置、情報変換方法、情報検索方法、情報変換プログラム、情報検索プログラム | |
JP5598925B2 (ja) | 高次元の特徴ベクトルを高精度で検索する検索装置及びプログラム | |
CN103699691A (zh) | 生成图像指纹及基于此进行相似图像检索的方法 | |
Solli et al. | Emotion related structures in large image databases | |
CN113536020A (zh) | 数据查询的方法、存储介质和计算机程序产品 | |
Gupta et al. | Visual semantic-based representation learning using deep CNNs for scene recognition | |
Mathan Kumar et al. | Multiple kernel scale invariant feature transform and cross indexing for image search and retrieval | |
Khalaf et al. | Robust partitioning and indexing for iris biometric database based on local features | |
JP6317715B2 (ja) | 画像認識装置、方法、及びプログラム | |
JP6373292B2 (ja) | 特徴量生成装置、方法、及びプログラム | |
US20200257934A1 (en) | Processing content | |
JP6017277B2 (ja) | 特徴ベクトルの集合で表されるコンテンツ間の類似度を算出するプログラム、装置及び方法 | |
JP6364387B2 (ja) | 特徴量生成装置、方法、及びプログラム | |
JP5833499B2 (ja) | 高次元の特徴ベクトル集合で表現されるコンテンツを高精度で検索する検索装置及びプログラム | |
Wu et al. | Codebook-free compact descriptor for scalable visual search | |
Li et al. | Near duplicate image detecting algorithm based on bag of visual word model | |
JP2017215784A (ja) | 物体検出装置、方法、及びプログラム | |
CN111090743B (zh) | 一种基于词嵌入和多值形式概念分析的论文推荐方法及装置 | |
Koga et al. | Effective construction of compression-based feature space | |
CN113076450A (zh) | 一种目标推荐列表的确定方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170512 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180327 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180323 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180330 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6317715 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |