JP2016134134A - 画像検索装置、画像検索方法および画像検索プログラム - Google Patents

画像検索装置、画像検索方法および画像検索プログラム Download PDF

Info

Publication number
JP2016134134A
JP2016134134A JP2015010399A JP2015010399A JP2016134134A JP 2016134134 A JP2016134134 A JP 2016134134A JP 2015010399 A JP2015010399 A JP 2015010399A JP 2015010399 A JP2015010399 A JP 2015010399A JP 2016134134 A JP2016134134 A JP 2016134134A
Authority
JP
Japan
Prior art keywords
image
search
database
query
search target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015010399A
Other languages
English (en)
Other versions
JP6420162B2 (ja
Inventor
悠一 吉田
Yuichi Yoshida
悠一 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso IT Laboratory Inc
Original Assignee
Denso IT Laboratory Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso IT Laboratory Inc filed Critical Denso IT Laboratory Inc
Priority to JP2015010399A priority Critical patent/JP6420162B2/ja
Publication of JP2016134134A publication Critical patent/JP2016134134A/ja
Application granted granted Critical
Publication of JP6420162B2 publication Critical patent/JP6420162B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

【課題】高精度に画像検索を行うことができる画像検索装置、画像検索方法および画像検索プログラムを提供する。
【解決手段】予め検索対象画像を記憶した親画像データベース41から、クエリ画像と対応する検索対象画像を検索する画像検索手段31と、クエリ画像を新たな検索対象画像として子画像データベース43に追加するクエリ画像追加手段32と、クエリ画像と既存の検索対象画像との関係を親子画像関係保存データベース45に追加する親子関係追加手段33と、を備える。
【選択図】図1

Description

本発明は、クエリ画像と対応する画像を検索する画像検索装置、画像検索方法および画像検索プログラムに関する。
近年、ある画像と別の画像とが同じ被写体を撮影したものであるか否かを判定する物体認識技術が発展しており、この技術を利用したサービスが普及しつつある(特許文献1,2など)。例えば、スマートフォンでDVDのパッケージを撮影すると特定の店の当該DVDの在庫情報が得られるサービスや、本の表紙を撮影するとその本を購入可能なWebページに簡単に移動できるサービスなどがある。
物体認識技術においては、予め準備された画像を検索対象として、クエリ画像と類似する画像の検索が行われる。
特開2014−081770号公報 国際公開第2011/081194号
しかしながら、クエリ画像は検索用に取得された画像でない場合も多く、検索に適した画像であるとは限らない。そのような場合、予め準備された画像中に、クエリ画像と同じ被写体を撮影した画像があるにも関わらず、クエリ画像と類似する画像がヒットしないこともある。そのため、検索の精度は必ずしも高いものとは言えない。
本発明はこのような問題点に鑑みてなされたものであり、本発明の課題は、高精度に画像検索を行うことができる画像検索装置、画像検索方法および画像検索プログラムを提供することである。
本発明の一態様によれば、予め検索対象画像を記憶した第1データベースから、クエリ画像と対応する検索対象画像を検索する画像検索手段と、前記クエリ画像を新たな検索対象画像として第2データベースに追加するクエリ画像追加手段と、前記クエリ画像と既存の検索対象画像との関係を第3データベースに追加する親子関係追加手段と、を備える画像検索装置が提供される。この構成により、クエリ画像を新たな検索対象画像として追加するため、検索精度が向上する。
前記検索対象画像に付随する付加情報が第4データベースに保存されており、前記画像検索手段は、前記第4データベースから、検索によって得られた検索対象画像に付随する付加情報も取得してもよい。また、前記クエリ画像追加手段は、前記クエリ画像に付随する付加情報を第5データベースに追加してもよい。この構成により、付加情報も保存するため、利便性が向上する。
前記画像検索手段は、前記第1データベースおよび前記第2データベースから、前記クエリ画像と対応する検索対象画像を検索するのが望ましい。この構成により、新たな検索対象画像も検索対象となり、検索精度が向上する。
前記クエリ画像を前記第2データベースに追加するか否かの判定を行う判定手段を備え、前記クエリ画像追加手段は、追加すると判定された場合のみ、前記クエリ画像を前記第2データベースに追加するのが望ましい。この構成により、クエリ画像を追加するか否かの判定を行うため、必要な場合にのみクエリ画像の追加を行うことができる。
具体的には、前記判定手段は、ユーザからの指示に基づいて判定を行ってもよい。
さらに具体的には、前記画像検索手段による検索結果を前記ユーザに提示する検索結果提示手段を備え、前記判定手段は、前記検索結果が適切か否かを示す前記ユーザからの指示に基づいて判定を行ってもよい。この構成により、検索結果が適切な場合にのみクエリ画像を追加するため、検索精度が向上する。
あるいは、前記判定手段は、前記クエリ画像を前記第2データベースに追加することを許可するか否かを示す前記ユーザからの指示に基づいて判定を行ってもよい。この構成により、ユーザの許可を得てクエリ画像を追加するため、ユーザの満足度を向上できる。
前記検索対象画像のそれぞれについて、前記画像検索手段による検索でヒットした回数をカウントするカウント手段を備え、前記画像検索手段は、検索でヒットした回数を考慮して、前記クエリ画像に対応する検索対象画像を検索するのが望ましい。この構成により、ヒット回数を考慮した検索結果を得ることができる。
また、本発明の別の態様によれば、予め検索対象画像を記憶した第1データベースから、クエリ画像と対応する検索対象画像を検索するステップと、前記クエリ画像を新たな検索対象画像として第2データベースに追加するステップと、前記クエリ画像と既存の検索対象画像との関係を第3データベースに追加するステップと、を備える画像検索方法が提供される。
また、本発明の別の態様によれば、コンピュータに、予め検索対象画像を記憶した第1データベースから、クエリ画像と対応する検索対象画像を検索するステップと、前記クエリ画像を新たな検索対象画像として第2データベースに追加するステップと、前記クエリ画像と既存の検索対象画像との関係を第3データベースに追加するステップと、を実行させるための画像検索プログラムが提供される。
クエリ画像を新たな検索対象画像として追加するため、検索精度が向上する。
本発明の第1の実施形態に係る画像検索システム100の概略構成を示すブロック図。 親画像データベース41の構造の一例を示す図。 親画像付加情報データベース42の構造の一例を示す図。 子画像データベース43の構造の一例を示す図。 親子関係保存データベース45の構造の一例を示す図。 図1の画像検索システム100の処理動作の一例を示すフローチャート。 本発明の第2の実施形態に係る画像検索システム100aの概略構成を示すブロック図。 図7の画像検索システム100aの処理動作の一例を示すフローチャート。 本発明の第3の実施形態に係る画像検索システム100bの概略構成を示すブロック図。 親画像データベース41の構造の一例を示す図。
以下、本発明に係る実施形態について、図面を参照しながら具体的に説明する。
(第1の実施形態)
第1の実施形態は、検索を行うたびに、クエリ画像を検索対象の画像に追加するものである。
図1は、本発明の第1の実施形態に係る画像検索システム100の概略構成を示すブロック図である。画像検索システム100は、入力インターフェース1と、出力インターフェース2と、制御部3と、記憶装置4とを備えている。
入力インターフェース1は、クエリ画像の指定など、ユーザが画像検索システム100に対して所定の指示などを行うためのものであり、マウス、キーボード、タッチパネル、マイクなどである。出力インターフェース2は、検索結果などをユーザに出力するものであり、ディスプレイやスピーカなどである。
制御部3は、画像検索手段31と、クエリ画像追加手段32と、親子関係追加手段33と、検索結果提示手段34とを有する。これら各部の少なくとも一部は、画像検索システム100におけるプロセッサが所定のプログラムを実行することによって実現されてもよいし、ハードウェアで実装されてもよい。
画像検索手段31は、ユーザから指定されたクエリ画像に対応する検索対象画像、すなわち、クエリ画像と類似する検索対象画像を、後述する親画像データベース41および子画像データベース43から検索する。
クエリ画像追加手段32は、クエリ画像を、後述する子画像データベース43に検索対象画像として追加する。
親子関係追加手段33は、クエリ画像と、親画像データベース41(および/または子画像データベース43)に記憶された検索対象画像との関係を、後述する親子関係保存データベース45に追加する。
検索結果提示手段34は、画像検索手段31による検索結果をユーザに提示すべく、検索結果を出力インターフェース2から出力する。
記憶装置4は、親画像データベース41と、親画像付加情報データベース42と、子画像データベース43と、子画像付加情報データベース44と、親子関係保存データベース45とを記憶している。なお、記憶装置4は、これらのデータベースを1つの記憶装置内に記憶してもよいし、複数の記憶装置に分散して記憶していてもよい。
図2は、親画像データベース41の構造の一例を示す図である。親画像データベース41は、検索対象となる多数の検索対象画像を、予め、すなわち、本画像検索システム100の使用前から記憶している。親画像データベース41に予め記憶されている検索対象画像を親画像とも呼ぶ。図示のように、各親画像には親画像IDが付されており、以下では、親画像IDがXである親画像を「親画像X」とも表記する。
図3は、親画像付加情報データベース42の構造の一例を示す図である。各親画像には付加情報が付随していてもよく、親画像付加情報データベース42は付加情報を記憶している。図示のように、各付加情報には、どの親に付随する付加情報であるかを特定すべく、親画像IDが関連付けられている。図3の例において、「いいね」および「きらい」なる付加情報は、親画像P01に付随していることを示す。
付加情報とは、親画像に関連する情報である。例えば、付加情報は親画像に対するユーザのコメントや評価などであってもよい。また、親画像が特定の製品の画像である場合にはその値段などでもよいし、親画像が特定の店舗の画像である場合にはその営業時間などでもよい。1つの親画像に対して、複数のユーザがコメントを付したり、1ユーザが複数のコメントを付したりすることもあるので、1つの親画像に複数の付加情報が付随していてもよい。
図4は、子画像データベース43の構造の一例を示す図である。子画像データベース43は、ユーザが指定して画像検索手段31によって検索に用いられたクエリ画像を、検索対象画像として追加的に記憶している。子画像データベース43に記憶されている検索対象画像を子画像とも呼ぶ。図示のように、各子画像には子画像IDが付されており、以下では、子画像IDがYである子画像を「子画像Y」とも表記する。
子画像付加情報データベース44は、親画像付加情報データベース42と同様の構造となっている。すなわち、付加情報が付随するクエリ画像がユーザにより指定された場合には、クエリ画像の付加情報が、子画像の付加情報として子画像付加情報データベース44に保存される。
図5は、親子関係保存データベース45の構造の一例を示す図である。親子関係保存データベース45は、子画像データベース43における各子画像が、親画像データベース41におけるどの親画像と対応しているのかを示す。すなわち、各子画像IDと、対応する親画像IDとが関連付けられている。
複数の子画像が1つの親画像に対応していてもよい。その場合には、親子関係保存データベース45は子画像同士の対応関係をさらに記憶していてもよい。同図の親子関係保存データベース45の例では、子画像C01,C03が親画像P01と対応することが記憶されており、さらに子画像C01と子画像C03とが対応することが記憶されていてもよい。
図6は、図1の画像検索システム100の処理動作の一例を示すフローチャートである。なお、親画像データベース41には予め多数の親画像が記憶されているが、子画像データベース43には初めは子画像が記憶されていなくてもよい。
まず、画像検索手段31はクエリ画像を設定する(ステップS1)。典型的には、画像検索手段31は、入力インターフェース1を介したユーザの操作に応じて、クエリ画像を受け取る。クエリ画像はユーザが任意に指定することができ、Web上の画像でもよいし、画像検索システム100内に保存されている画像でもよいし、SDカード(登録商標)など外部記憶装置に保存されている画像でもよい。また、クエリ画像は、例えばDVDのパッケージや本の表紙であってもよいし、動画における特定の1フレームであってもよい。
ここで、クエリ画像は必ずしも画像検索用に用意された画像であるとは限らず、歪んでいたり、被写体が正面から撮影されていなかったり、被写体への照明にムラがあったりすることもあり得る。
続いて、画像検索手段31はクエリ画像と対応する検索対象画像を検索する(ステップS2)。すなわち、画像検索手段31は親画像データベース41を参照し、親画像を検索対象画像として、クエリ画像と対応する親画像を検索する。子画像データベース43に子画像が既に保存されている場合、画像検索手段31は子画像データベース43も参照し、子画像も検索対象画像として、クエリ画像と対応する子画像を検索してもよい。対応する検索対象画像が見つかると、画像検索手段31は検索結果を取得する。
より具体的には、検索でヒットした検索対象画像が親画像である場合、画像検索手段31は、親画像データベース41からその親画像を取得する。さらに、画像検索手段31は、親子関係保存データベース45を参照して、その親画像に対応する子画像を子画像データベース43から取得してもよい。また、画像検索手段31は、親画像付加情報データベース42を参照して、取得された親画像に付随する付加情報を取得してもよい。さらに、画像検索手段31は、親子関係保存データベース45および子画像付加情報データベース44を参照して、親画像に対応する子画像に付随する付加情報を取得してもよい。
一方、検索でヒットした検索対象画像が子画像である場合、画像検索手段31は、親子関係保存データベース45を参照し、その子画像に対応する親画像を親画像データベース41から取得する。このとき、画像検索手段31は子画像も合わせて取得してもよい。また、画像検索手段31は、親画像付加情報データベース42を参照して、取得された親画像に付随する付加情報を取得してもよい。さらに、画像検索手段31は、親子関係保存データベース45および子画像付加情報データベース44を参照して、その親画像に対応する子画像(検索で得られた子画像に加え、親画像が共通する他の子画像であってもよい)に付随する付加情報を取得してもよい。
なお、画像検索手段31は、クエリ画像と最も類似する1つの検索対象画像を検索してもよいし、クエリ画像との類似度が所定の閾値以上である複数の検索対象画像を検索してもよい。
具体的な検索手法の例として、画像検索手段31は、クエリ画像における特徴点の局所画像特徴量および位置情報と、検索対象画像における特徴点の局所画像特徴量および位置情報とを比較し、一致点の数を類似度として、クエリ画像と類似する検索対象画像を検索することができる(例えば特開2014−178857号公報参照)。
検索結果は検索結果提示手段34によって出力インターフェース2から出力される(ステップS3)。出力の態様は任意でよく、上記のようにして取得された検索対象画像および/または付加情報が表示されればよい。一例として、検索結果提示手段34は、クエリ画像に対応する親画像と、その親画像および対応する子画像に付随する付加情報とを出力する。
次いで、クエリ画像追加手段32は、ステップS1で設定されたクエリ画像を、子画像すなわち新たな検索対象画像として、子画像データベース43に追加する(ステップS4)。このとき、子画像には子画像IDが付される。クエリ画像に付加情報が付随している場合、クエリ画像追加手段32は、その付随情報を子画像と関連付けて、子画像付加情報データベース44に追加してもよい。
また、親子関係追加手段33は、ステップS2で取得された既存の検索対象画像とそのクエリ画像とが対応することを、親子関係保存データベース45に保存する(ステップS5)。より具体的には、検索でヒットした検索対象画像が親画像である場合、親子関係追加手段33は、その親画像のIDと、クエリ画像のIDとを関連付けて保存する。一方、検索でヒットした検索対象画像が子画像である場合、親子関係追加手段33は、その子画像に対応する親画像のIDと、クエリ画像のIDとを関連付けて保存する。あるいは、親子関係追加手段33は、その子画像のIDと、クエリ画像のIDとを関連付けて保存してもよい。
以上のようにして、画像検索手段31が検索を行うたびに子画像データベース43に検索対象画像が追加されていく。例えば、ある親画像に対応する子画像として、歪んだ画像、被写体が正面から撮影されていない画像、被写体への照明にムラがある画像などが追加されることになる。そのため、クエリ画像によっては、対応する親画像がヒットしない場合でも、対応する追加された子画像であればヒットすることもある。そして、子画像がヒットすれば、対応する親画像を取得できる。
このように、第1の実施形態では、クエリ画像を検索対象画像として追加するため、検索の精度を向上することができる。
(第2の実施形態)
上述した第1の実施形態は、検索のたびにクエリ画像を子画像データベース43に追加するものであった。これに対し以下に説明する第2の実施形態では、クエリ画像を子画像データベース43に追加するか否かを判定した上で、追加するものである。以下、第1の実施形態との相違点を中心に説明する。
図7は、本発明の第2の実施形態に係る画像検索システム100aの概略構成を示すブロック図である。図7の制御部3aはさらに判定手段35を有する。判定手段35はクエリ画像を子画像データベース43に追加するか否かの判定を行う。
図8は、図7の画像検索システム100aの処理動作の一例を示すフローチャートである。本実施形態では、判定手段35がクエリ画像を子画像データベース43に追加するか否かの判定を行うステップS11を含む。そして、追加すると判定された場合に限って、ステップS4,S5の処理が行われる(ステップS11のYES)。
判定の一例として、判定手段35は、検索結果が適切な場合に、追加すると判定してもよい。より具体的には、ステップS3において、検索結果提示手段34は検索でヒットした検索対象画像を表示する。そして、判定手段35は、表示された検索対象画像が検索結果として適切か否かをユーザに問い合わせるためのGUIを、出力インターフェース2に表示する。そして、ユーザが、適切か否かを示す指示を入力インターフェース1を介して行い、その指示に基づいて判定手段35は判定を行う。
検索対象画像が表示されれば、ユーザは一見して検索結果が適切か否か分かることも少なくない。そのため、ユーザから見て検索結果が適切である場合にのみ、クエリ画像を子画像データベース43に追加することで、検索精度の向上を図れる。
判定の別の例として、判定手段35は、クエリ画像を追加することをユーザが許可する場合に限って、追加すると判定してもよい。より具体的院は、判定手段35は、クエリ画像の追加を許可するか否かをユーザに問い合わせるためのGUIを、出力インターフェース2に表示する。そして、ユーザが、許可するか否かを示す指示を入力インターフェース1を介して行い、その指示に基づいて判定手段35は判定を行う。
クエリ画像にユーザのプライバシー情報が含まれている場合など、クエリ画像が検索対象画像に追加されるのをユーザが好ましく思わないこともある。そのため、ユーザが追加されるのを望まないクエリ画像については、子画像データベース43に追加しないことで、ユーザの安全性や満足度の向上を図れる。
以上説明したように、判定手段35は、ユーザからの入力インターフェース1を介した指示に応じて、判定を行ってもよい。あるいは、判定手段35は、ユーザからの指示に基づかず、自動的に判定を行ってもよい。例えば、検索対象画像がヒットした場合でも、検索精度が低いと思われる場合、判定手段35はそのクエリ画像を追加しないと判定してもよい。あるいは、クエリ画像と、ヒットした検索対象画像とがほぼ一致する場合、そのようなクエリ画像を追加しても検索精度の向上はあまり期待できず記憶装置4の容量を消費してしまうだけなので、判定手段35はそのクエリ画像を追加しないと判定してもよい。
このように、第2の実施形態では、クエリ画像を追加するか否かの判定を行った上で、クエリ画像を子画像データベース43に追加する。そのため、検索精度やユーザの満足度向上が図れる。
(第3の実施形態)
上述した第1および第2の実施形態においては、画像検索システムを使用するほど、検索対象画像が増えていく。しかしながら、検索対象画像の中には、必ずしも検索対象画像として適切ではなく、あまり画像検索手段31による検索でヒットしないもの含まれ得る。そこで、以下に説明する第3の実施形態では、過去の検索でヒットした回数を考慮して、画像検索を行うものである。
図9は、本発明の第3の実施形態に係る画像検索システム100bの概略構成を示すブロック図である。図9の制御部3bはさらにカウント手段36(必要に応じて、図7と同様の判定手段33も)を有する。カウント手段36は、親画像のそれぞれについて、検索でヒットした回数をカウントし、親画像データベース41に記憶する。同様に、カウント手段36は、子画像のそれぞれについて、検索でヒットした回数をカウントし、子画像データベース43に記憶する。ただし、カウント手段36は親画像および子画像のいずれかのみのヒット回数をカウントしてもよい。
図10は、親画像データベース41の構造の一例を示す図である。図示のように、本実施形態では、各親画像について、検索でのヒット回数も記憶される。子画像データベース43も同様の構造である。
本実施形態において、画像検索手段31は、親画像データベース41および子画像データベース43からクエリ画像と対応する検索対象画像を検索する際、ヒット回数も参照し、ヒット回数も考慮して画像検索を行う。
例えば、画像検索手段31は、クエリ画像との類似度が等しい2つの検索対象画像(親画像であってもよいし子画像であってもよい、以下同じ)がある場合、ヒット回数が多い方を優先的に取得してもよい。また、画像検索手段31は、クエリ画像との類似度が閾値以上である検索対象画像が多数ある場合、ヒット回数が多い順に所定数だけ検索対象画像を取り出してもよい。そして、カウント手段36は、画像検索手段31が画像検索を行って取得された検索対象画像のヒット回数を、1だけインクリメントする。
また、検索結果提示手段34は、ヒット回数を考慮して、検索結果を出力インターフェース2から出力してもよい。例えば、検索結果提示手段34は、複数の検索対象画像が取得された場合、ヒット回数が多い順に並べて表示してもよい。また、ユーザが入力インターフェース1を介した所定の操作を行うことに応じて、検索結果提示手段34は、複数の検索対象画像をヒット回数順が多い順に並べるか、類似度が高い順に並べるかを切り替えるようにしてもよい。
なお、ヒット回数を他の用途に用いてもよい。例えば、カウント手段36は、ヒット回数が少ない子画像を子画像データベース43から削除してもよい。また、ある親画像のヒット数より、対応する子画像のヒット数の方が多い場合、カウント手段36はこれら親画像と子画像とを入れ替えてもよい。
このように、第3の実施形態では、過去の検索でヒットした回数をカウントする。そのため、ヒット回数を考慮して画像検索を行うことができ、検索精度が向上する。
なお、以上説明した図1などの画像検索システムは、その全体が1つの装置内にあってもよいし、複数の装置に分散していてもよい。複数の装置に分散する例として、画像検索システムは、入力インターフェース1および出力インターフェース2を含むユーザ端末(例えばスマートフォンやタブレット)、制御部3を含むサーバ(画像検索装置)、および、外付けの記憶装置4から構成され、これらがネットワークを介して接続されていてもよい。この場合、ユーザ端末から制御部3の画像検索手段31にクエリ画像が送信され、検索結果を示すデータが検索結果提示手段34からユーザ端末に送信されて出力インターフェース2から出力されるようにしてもよい。
上述した実施形態は、本発明が属する技術分野における通常の知識を有する者が本発明を実施できることを目的として記載されたものである。上記実施形態の種々の変形例は、当業者であれば当然になしうることであり、本発明の技術的思想は他の実施形態にも適用しうることである。したがって、本発明は、記載された実施形態に限定されることはなく、特許請求の範囲によって定義される技術的思想に従った最も広い範囲とすべきである。
1 入力インターフェース
2 出力インターフェース
3 制御部
31 画像検索手段
32 クエリ画像追加手段
33 親子関係追加手段
34 検索結果提示手段
35 判定手段
36 カウント手段
4 記憶装置
41 親画像データベース
42 親画像付加情報データベース
43 子画像データベース
44 子画像付加情報データベース
45 親子関係保存データベース
100,100a,100b 画像検索システム

Claims (11)

  1. 予め検索対象画像を記憶した第1データベースから、クエリ画像と対応する検索対象画像を検索する画像検索手段と、
    前記クエリ画像を新たな検索対象画像として第2データベースに追加するクエリ画像追加手段と、
    前記クエリ画像と既存の検索対象画像との関係を第3データベースに追加する親子関係追加手段と、を備える画像検索装置。
  2. 前記検索対象画像に付随する付加情報が第4データベースに保存されており、
    前記画像検索手段は、前記第4データベースから、検索によって得られた検索対象画像に付随する付加情報も取得する、請求項1に記載の画像検索装置。
  3. 前記クエリ画像追加手段は、前記クエリ画像に付随する付加情報を第5データベースに追加する、請求項1または2に記載の画像検索装置。
  4. 前記画像検索手段は、前記第1データベースおよび前記第2データベースから、前記クエリ画像と対応する検索対象画像を検索する、請求項1乃至3のいずれかに記載の画像検索装置。
  5. 前記クエリ画像を前記第2データベースに追加するか否かの判定を行う判定手段を備え、
    前記クエリ画像追加手段は、追加すると判定された場合のみ、前記クエリ画像を前記第2データベースに追加する、請求項1乃至4のいずれかに記載の画像検索装置。
  6. 前記判定手段は、ユーザからの指示に基づいて判定を行う、請求項5に記載の画像検索装置。
  7. 前記画像検索手段による検索結果を前記ユーザに提示する検索結果提示手段を備え、
    前記判定手段は、前記検索結果が適切か否かを示す前記ユーザからの指示に基づいて判定を行う、請求項6に記載の画像検索装置。
  8. 前記判定手段は、前記クエリ画像を前記第2データベースに追加することを許可するか否かを示す前記ユーザからの指示に基づいて判定を行う、請求項6に記載の画像検索装置。
  9. 前記検索対象画像のそれぞれについて、前記画像検索手段による検索でヒットした回数をカウントするカウント手段を備え、
    前記画像検索手段は、検索でヒットした回数を考慮して、前記クエリ画像に対応する検索対象画像を検索する、請求項1乃至8のいずれかに記載の画像検索装置。
  10. 予め検索対象画像を記憶した第1データベースから、クエリ画像と対応する検索対象画像を検索するステップと、
    前記クエリ画像を新たな検索対象画像として第2データベースに追加するステップと、
    前記クエリ画像と既存の検索対象画像との関係を第3データベースに追加するステップと、を備える画像検索方法。
  11. コンピュータに、
    予め検索対象画像を記憶した第1データベースから、クエリ画像と対応する検索対象画像を検索するステップと、
    前記クエリ画像を新たな検索対象画像として第2データベースに追加するステップと、
    前記クエリ画像と既存の検索対象画像との関係を第3データベースに追加するステップと、を実行させるための画像検索プログラム。
JP2015010399A 2015-01-22 2015-01-22 画像検索装置、画像検索方法および画像検索プログラム Active JP6420162B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015010399A JP6420162B2 (ja) 2015-01-22 2015-01-22 画像検索装置、画像検索方法および画像検索プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015010399A JP6420162B2 (ja) 2015-01-22 2015-01-22 画像検索装置、画像検索方法および画像検索プログラム

Publications (2)

Publication Number Publication Date
JP2016134134A true JP2016134134A (ja) 2016-07-25
JP6420162B2 JP6420162B2 (ja) 2018-11-07

Family

ID=56464377

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015010399A Active JP6420162B2 (ja) 2015-01-22 2015-01-22 画像検索装置、画像検索方法および画像検索プログラム

Country Status (1)

Country Link
JP (1) JP6420162B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021125110A (ja) * 2020-02-07 2021-08-30 エヌエイチエヌ コーポレーション 情報提供サーバ、情報提供方法、及びプログラム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005100160A (ja) * 2003-09-25 2005-04-14 Ricoh Co Ltd 画像管理方法及び画像管理プログラム
US20070065045A1 (en) * 2005-09-16 2007-03-22 Masajiro Iwasaki Information management apparatus, information management method, and computer program product
JP2010218372A (ja) * 2009-03-18 2010-09-30 Olympus Corp サーバシステム、端末装置、プログラム、情報記憶媒体及び画像検索方法
JP2011186733A (ja) * 2010-03-08 2011-09-22 Hitachi Kokusai Electric Inc 画像検索装置
JP2013065146A (ja) * 2011-09-16 2013-04-11 Rakuten Inc 画像検索装置およびプログラム
JP2013210974A (ja) * 2012-03-30 2013-10-10 Ntt Comware Corp 検索画像登録装置、検索画像表示システム、検索画像登録方法およびプログラム
JP2015022631A (ja) * 2013-07-22 2015-02-02 富士ゼロックス株式会社 情報処理装置、情報処理システム及びプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005100160A (ja) * 2003-09-25 2005-04-14 Ricoh Co Ltd 画像管理方法及び画像管理プログラム
US20070065045A1 (en) * 2005-09-16 2007-03-22 Masajiro Iwasaki Information management apparatus, information management method, and computer program product
JP2010218372A (ja) * 2009-03-18 2010-09-30 Olympus Corp サーバシステム、端末装置、プログラム、情報記憶媒体及び画像検索方法
JP2011186733A (ja) * 2010-03-08 2011-09-22 Hitachi Kokusai Electric Inc 画像検索装置
JP2013065146A (ja) * 2011-09-16 2013-04-11 Rakuten Inc 画像検索装置およびプログラム
JP2013210974A (ja) * 2012-03-30 2013-10-10 Ntt Comware Corp 検索画像登録装置、検索画像表示システム、検索画像登録方法およびプログラム
JP2015022631A (ja) * 2013-07-22 2015-02-02 富士ゼロックス株式会社 情報処理装置、情報処理システム及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021125110A (ja) * 2020-02-07 2021-08-30 エヌエイチエヌ コーポレーション 情報提供サーバ、情報提供方法、及びプログラム

Also Published As

Publication number Publication date
JP6420162B2 (ja) 2018-11-07

Similar Documents

Publication Publication Date Title
US11120078B2 (en) Method and device for video processing, electronic device, and storage medium
US10726063B2 (en) Topic profile query creation
WO2019019769A1 (zh) 业务功能实现的方法、装置、计算机设备及存储介质
US10769196B2 (en) Method and apparatus for displaying electronic photo, and mobile device
WO2017206376A1 (zh) 搜索方法、装置及非易失性计算机存储介质
JP2015233214A (ja) 情報表示処理システム、情報表示処理方法および情報表示処理プログラム
US20160371340A1 (en) Modifying search results based on context characteristics
JP2017182628A (ja) 拡張現実ユーザインタフェース適用装置および制御方法
JP6594317B2 (ja) ニュースタイムラインおよび薦められるニュースエディションの生成
JP6419969B2 (ja) 画像の提示情報を提供するための方法及び機器
JP2020501277A (ja) サービスオペレーションを実施するための画像ベースの方法および装置
TW202207049A (zh) 搜索方法、電子裝置及非暫時性電腦可讀記錄媒體
TW201629802A (zh) 資訊搜索系統及方法
US10185765B2 (en) Non-transitory computer-readable medium, information classification method, and information processing apparatus
US20170124120A1 (en) Information processing system, information processing method, and information processing program
JP6420162B2 (ja) 画像検索装置、画像検索方法および画像検索プログラム
US10380669B2 (en) Product browsing system and method
WO2020233093A1 (zh) 关联图谱生成方法、装置、计算机设备和存储介质
US11106737B2 (en) Method and apparatus for providing search recommendation information
JP2013222406A (ja) 画像検索システム、画像検索装置およびコンピュータプログラム
KR101531404B1 (ko) 검색 정보 수집 장치, 검색 정보 수집 방법 및 이를 이용한 검색 서비스 제공 방법
JP6955161B2 (ja) 情報処理プログラム、情報処理装置及び情報処理方法
US20150199429A1 (en) Automatic geo metadata gather based on user's action
JP6256079B2 (ja) 検索プログラム、検索方法及び検索装置
KR20200024540A (ko) 이미지 검색을 위한 요약 정보 제공 방법 및 이를 지원하는 서비스 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170526

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180313

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180918

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181011

R150 Certificate of patent or registration of utility model

Ref document number: 6420162

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250