JP6345520B2 - 画像検索装置と画像検索プログラムと画像検索方法 - Google Patents
画像検索装置と画像検索プログラムと画像検索方法 Download PDFInfo
- Publication number
- JP6345520B2 JP6345520B2 JP2014142389A JP2014142389A JP6345520B2 JP 6345520 B2 JP6345520 B2 JP 6345520B2 JP 2014142389 A JP2014142389 A JP 2014142389A JP 2014142389 A JP2014142389 A JP 2014142389A JP 6345520 B2 JP6345520 B2 JP 6345520B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- neuron
- neurons
- target
- activity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 38
- 210000002569 neuron Anatomy 0.000 claims description 144
- 230000000694 effects Effects 0.000 claims description 53
- 238000013528 artificial neural network Methods 0.000 claims description 27
- 238000000605 extraction Methods 0.000 claims description 15
- 239000000284 extract Substances 0.000 claims description 4
- 230000000007 visual effect Effects 0.000 description 19
- 238000010586 diagram Methods 0.000 description 11
- 238000003860 storage Methods 0.000 description 10
- 230000010365 information processing Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 3
- 101150112492 SUM-1 gene Proteins 0.000 description 2
- 101150096255 SUMO1 gene Proteins 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 101100204393 Arabidopsis thaliana SUMO2 gene Proteins 0.000 description 1
- 101100311460 Schizosaccharomyces pombe (strain 972 / ATCC 24843) sum2 gene Proteins 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 210000000653 nervous system Anatomy 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Description
図1は、本発明にかかる画像検索方法(以下「本方法」という。)の実施の形態を示すフローチャートである。本方法は、後述する本発明にかかる画像検査装置(以下「本装置」という。)により実行される。ここで、本装置では、本発明にかかる画像検索プログラム(以下「本プログラム」という。)が動作して、本装置を構成するハードウェアと協働して本方法を実現している。
先ず、本装置が画像検索を行うために用いる演算手段としてのニューラルネットワークの学習(S1)が行われる。ニューラルネットワークの学習とは、ニューラルネットワークを構成する各層の間でのニューロン同士の結合重みを設定することをいう。
次に、本装置の構成について説明する。
図2は、本装置の実施の形態を示すブロック図である。本装置1は、中間層選択部11、ニューロン特定部12、画像抽出部13、記憶部14と、を有してなる。
ここで、注目ニューロンの特定方法について説明する。
次に、注目画像の抽出方法について説明する。
図5は、注目画像の抽出処理(S3)の例を示すフローチャートである。本装置1は、画像抽出部13を用いて、同フローチャートに示す情報処理を実行して、注目画像を抽出する。
以上説明した実施の形態によれば、本装置1は、検索者が選択した注目層を構成するニューロンの一部の注目ニューロンのみを用いて画像認識を実行するため、注目ニューロンに応じて、参照画像との類否判断の視点が異なる画像を抽出することができる。すなわち、本装置1は、注目層を選択させる検索者に、参照画像と候補画像との類否判断の視点を調整させることができる。
2 検索端末
11 中間層選択部
12 ニューロン特定部
13 画像抽出部
14 記憶部
DB1 候補画像データベース
DB2 参照画像データベース
N ニューロン
A 活動度
SUM 活動和
Claims (9)
- 複数のニューロンを備えるニューラルネットワークで構成されていて、複数の参照画像に関連する注目画像を複数の候補画像の中から検索するための画像検索装置であって、
前記複数のニューロンのうち、前記注目画像を検索するために用いられる注目ニューロンを特定するニューロン特定部と、
前記複数のニューロンのうち前記注目ニューロンのみを用いて、前記複数の候補画像の中から前記注目画像を抽出する画像抽出部と、
を有してなり、
前記ニューロン特定部は、
前記参照画像それぞれに対する前記ニューロンごとの活動度を算出し、
前記ニューロンごとに、前記参照画像それぞれに対する活動度の順位和を算出し、
前記ニューロンごとの順位和に基づいて、前記注目ニューロンを特定する、
ことを特徴とする画像検索装置。 - 前記画像抽出部は、
前記候補画像それぞれに対する前記注目ニューロンごとの活動度を算出し、
前記注目ニューロンごとの活動度の和である活動和を算出し、
前記注目ニューロンごとの活動和に基づいて、前記注目画像を抽出する、 請求項1に記載の画像検索装置。 - 前記ニューラルネットワークは、複数の中間層を備え、
前記複数の中間層の中から注目層を選択する中間層選択部を有してなり、
前記ニューロン特定部は、前記注目層を構成するニューロンの中から前記注目ニューロンを特定する、
請求項1又は2のいずれかに記載の画像検索装置。 - 前記中間層選択部は、前記複数の中間層のいずれかの中間層を検索者に指定させるために、前記複数の中間層の選択肢を表示して、前記表示された選択肢の中から検索者が指定した中間層を前記注目層として選択する、
請求項3に記載の画像検索装置。 - 前記ニューロン特定部は、前記複数のニューロンのうち前記注目ニューロンとして特定されるニューロンの数を検索者に指定させる手段を備える、 請求項1乃至4のいずれかに記載の画像検索装置。
- 前記ニューロン特定部は、前記注目ニューロンを特定する際に用いられる前記ニューロンごとの順位和の順位を検索者に指定させる手段を備える、 請求項1乃至5のいずれかに記載の画像検索装置。
- 前記画像抽出部は、前記注目画像を抽出する際に用いられる前記注目ニューロンごとの活動和の順位を検索者に指定させる手段を備える、
請求項1乃至6のいずれかに記載の画像検索装置。 - コンピュータを、請求項1乃至7のいずれかに記載の画像検索装置として機能させることを特徴とする画像検索プログラム。
- 複数のニューロンを備えるニューラルネットワークで構成されていて、複数の参照画像に関連する注目画像を複数の候補画像の中から検索するための装置により実行される画像検索方法であって、
前記装置が、
前記複数のニューロンのうち、前記注目画像を検索するために用いられる注目ニューロンを特定するステップと、
前記複数のニューロンのうち前記注目ニューロンのみを用いて、前記複数の候補画像の中から前記注目画像を抽出するステップと、
を有してなり、
前記装置は、前記参照画像それぞれに対する前記ニューロンごとの活動度を算出し、前記ニューロンごとに、前記参照画像それぞれに対する活動度の順位和を算出し、前記ニューロンごとの順位和に基づいて、前記注目ニューロンを特定する、
ことを特徴とする画像検索方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014142389A JP6345520B2 (ja) | 2014-07-10 | 2014-07-10 | 画像検索装置と画像検索プログラムと画像検索方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014142389A JP6345520B2 (ja) | 2014-07-10 | 2014-07-10 | 画像検索装置と画像検索プログラムと画像検索方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016018486A JP2016018486A (ja) | 2016-02-01 |
JP6345520B2 true JP6345520B2 (ja) | 2018-06-20 |
Family
ID=55233637
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014142389A Active JP6345520B2 (ja) | 2014-07-10 | 2014-07-10 | 画像検索装置と画像検索プログラムと画像検索方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6345520B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6310529B1 (ja) * | 2016-11-01 | 2018-04-11 | ヤフー株式会社 | 検索装置、検索方法および検索プログラム |
CN108228696B (zh) * | 2017-08-31 | 2021-03-23 | 深圳市商汤科技有限公司 | 人脸图像检索方法和系统、拍摄装置、计算机存储介质 |
JP7135504B2 (ja) * | 2018-07-02 | 2022-09-13 | カシオ計算機株式会社 | 画像識別装置、画像識別方法及びプログラム |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02196366A (ja) * | 1989-01-25 | 1990-08-02 | Nippon Telegr & Teleph Corp <Ntt> | 神経回路網の構成方法および神経回路網 |
US5361326A (en) * | 1991-12-31 | 1994-11-01 | International Business Machines Corporation | Enhanced interface for a neural network engine |
JP2003256467A (ja) * | 2002-03-04 | 2003-09-12 | Seiko Epson Corp | 画像選択装置及び画像選択プログラム、並びに画像選択方法 |
JP4217664B2 (ja) * | 2004-06-28 | 2009-02-04 | キヤノン株式会社 | 画像処理方法、画像処理装置 |
JP2007193592A (ja) * | 2006-01-19 | 2007-08-02 | Konica Minolta Photo Imaging Inc | 画像処理装置、画像処理方法及び画像処理プログラム |
JP5153434B2 (ja) * | 2008-04-22 | 2013-02-27 | キヤノン株式会社 | 情報処理装置及び情報処理方法 |
US20130212053A1 (en) * | 2010-10-18 | 2013-08-15 | Takeshi Yagi | Feature extraction device, feature extraction method and program for same |
-
2014
- 2014-07-10 JP JP2014142389A patent/JP6345520B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016018486A (ja) | 2016-02-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Pyle et al. | An executive’s guide to machine learning | |
Manjunatha et al. | Explicit bias discovery in visual question answering models | |
US20200242153A1 (en) | Method, apparatus, electronic device and computer readable storage medium for image searching | |
Prosser et al. | Person re-identification by support vector ranking. | |
CN104504007B (zh) | 一种图像相似度的获取方法及系统 | |
US10664727B2 (en) | Image pattern recognition device and recording medium | |
Gürpinar et al. | Multimodal fusion of audio, scene, and face features for first impression estimation | |
KR20190117584A (ko) | 스트리밍 비디오 내의 객체를 검출하고, 필터링하고 식별하기 위한 방법 및 장치 | |
US20200019628A1 (en) | Visual intent triggering for visual search | |
KR102485503B1 (ko) | 이미지 데이터베이스 분석 기반 상품 추천 장치 및 방법 | |
WO2020253063A1 (zh) | 一种相似图片的检索方法及装置 | |
Połap | Human-machine interaction in intelligent technologies using the augmented reality | |
JP6345520B2 (ja) | 画像検索装置と画像検索プログラムと画像検索方法 | |
Shimoda et al. | Learning food image similarity for food image retrieval | |
CN111400525A (zh) | 基于视觉组合关系学习的时尚服装智能搭配与推荐方法 | |
CN112767038A (zh) | 基于美学特征的海报ctr预测方法及装置 | |
KR102208685B1 (ko) | 데이터 증강 기반 공간 분석 모델 학습 장치 및 방법 | |
CN115033700A (zh) | 基于相互学习网络的跨领域情感分析方法、装置以及设备 | |
JP7338690B2 (ja) | 学習装置、学習方法、推論装置、推論方法、及び、プログラム | |
Singla et al. | Age and gender detection using Deep Learning | |
SHAH et al. | Object detection using deep learning and artificial intelligence in E-Commerce | |
Lin et al. | Prompt Optimization with Human Feedback | |
Natesan et al. | Prediction of Healthy and Unhealthy Food Items using Deep Learning | |
Lou et al. | Food image aesthetic quality measurement by distribution prediction | |
Wang et al. | Deep Learning-Based Edge Detection Algorithm for Noisy Images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170316 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180403 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180423 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180522 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180523 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6345520 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |