JP5349004B2 - コンテンツ検索システムおよびコンテンツ検索プログラム - Google Patents
コンテンツ検索システムおよびコンテンツ検索プログラム Download PDFInfo
- Publication number
- JP5349004B2 JP5349004B2 JP2008275514A JP2008275514A JP5349004B2 JP 5349004 B2 JP5349004 B2 JP 5349004B2 JP 2008275514 A JP2008275514 A JP 2008275514A JP 2008275514 A JP2008275514 A JP 2008275514A JP 5349004 B2 JP5349004 B2 JP 5349004B2
- Authority
- JP
- Japan
- Prior art keywords
- content
- image
- information
- cluster
- landmark
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
従来から知られている写真共有サイト(例えば、Flickr(http://flickr.com/))では、コンテンツを公開するユーザが、公開するコンテンツを表す「タグ」を付与する機能がある。また、コンテンツの公開ユーザ以外のユーザが、それぞれコンテンツに対してタグ情報を付与する「ソーシャルタグ」という機能も備えている。これらの機能により、別のユーザがコンテンツを検索する場合、必要なコンテンツを表すキーワードを検索クエリとして入力すると、入力されたキーワードと同じタグが付与されているコンテンツを検索することができる。
上記のテキスト情報に基づく検索手法では、コンテンツそのものではなく、コンテンツに紐付けられているテキスト情報に基づいて検索が行なわれている。しかし、コンテンツの周辺のテキスト情報が実際のコンテンツの中身と無関係である場合は、ユーザの意図に反した検索結果が出てしまう。これに対し、実際のコンテンツから特徴を抽出し、その特徴を利用して検索を行なうcontent-based検索手法が盛んに提案されている。
図1は、第1の実施形態に係るコンテンツ検索システムの概略構成を示すブロック図である。図1に示すように、第1の実施形態に係るコンテンツ検索システム10は、位置情報クラスタリングモジュール11、ランドマーク候補情報収集モジュール12、ランドマーク関連画像収集モジュール13、クラスタ・ランドマーク相関算出モジュール14、ランドマーク関連結果提示モジュール15の5つのモジュールから構成される。
い。また、撮影可能な場所が非常に広範囲にわたるような一般に有名な巨大な被写体(例えば、富士山など)の場合においても、その広範囲な撮影区域で撮影された画像データの個数の密度は近隣区域と比較して大きい可能性が高い。このような知見に基づいて、第1の実施形態に係るクラスタリング処理では、ある区域で撮影された画像データの個数の密度が近隣区域の中で比較的大きい場合に、当該区域で撮影された画像データ群を抽出する。なお、ある区域で撮影された画像データの個数の密度が近隣区域の中で比較的大きいとは判定されなかった場合には、当該区域で撮影された画像データ群は抽出されない。この抽出されなかった画像データ群は、検索対象から除外されることになる。これは、その抽出されなかった画像データ群は、一般に有名な被写体が写っている画像データを含む確率が低いと考えられるので、検索対象から除外することにより検索精度の向上が期待できるからである。
Y. Rubner et al.: The Earth Mover’s Distance as a Metric for Image Retrieval, Int’l Journal of Computer Vision, 40(2), 2000.
例えば、下記の参考文献2では、EMDを元に、ショット数が異なる動画像間の類似度を算出する方法が提案されている。
Y. Peng et al.: “EMD-based video clip retrieval by many-to-many matching”, Proc CIVR 2005, pp. 71-81, 2005.
上記の参考文献では、EMD算出時に利用する特徴として、個々のショットから、キーフレーム画像から抽出したカラーヒストグラム特徴と、重み係数としてのショット長を利用している。参考文献1では、この特徴ベクトルと重み係数の組み合わせによる特徴情報を”signature”としており、複数のsignatureから構成されるデータ同士の類似度を算出している。
第1の実施形態では、検索対象コンテンツを、位置情報に基づいてクラスタリングする処理が適用されているが、例えば、都内の繁華街などでは、狭い範囲内に多数のランドマークが分布している可能性がある。その場合、位置情報のみでクラスタリングしても、複数のランドマークとの類似度が高くなってしまうため、撮影されているランドマークを特定することが困難になる。
11 位置情報クラスタリングモジュール
11a 位置情報付コンテンツDB
11b 位置情報付コンテンツクラスタDB
12 ランドマーク候補情報収集モジュール
13 ランドマーク関連画像収集モジュール
13a ランドマーク関連画像DB
14 クラスタ・ランドマーク相関算出モジュール
15 ランドマーク関連結果提示モジュール
16 色情報クラスタリングモジュール
20 コンテンツ検索システム
Claims (6)
- 地図上の位置情報が付加されている画像コンテンツ群から、前記位置情報に基づいて、
複数の画像コンテンツから構成されるクラスタを抽出するクラスタ抽出部と、
前記抽出されたクラスタを構成する画像コンテンツの位置情報から特定される範囲内に位置するランドマークの情報をランドマーク候補情報として収集するランドマーク候補情報収集部と、
前記収集されたランドマーク候補情報に関連する画像コンテンツをランドマーク候補コンテンツとして収集するコンテンツ収集部と、
前記クラスタを構成する各画像コンテンツと、前記ランドマーク候補コンテンツとしての画像コンテンツとの類似度を算出する類似度算出部と、
前記算出された類似度が所定の閾値よりも高いランドマーク候補コンテンツとしての画像コンテンツに対応するランドマーク候補情報を、前記クラスタを表わすものとして選定する選定部と、を備えることを特徴とするコンテンツ検索システム。 - 前記コンテンツ収集部は、インターネット上に掲載されている画像コンテンツから、前記収集されたランドマーク候補情報に関連する画像コンテンツをランドマーク候補コンテンツとして収集することを特徴とする請求項1記載のコンテンツ検索システム。
- 前記選定部は、前記算出された類似度が、所定の閾値よりも低いランドマーク候補コンテンツを除外することを特徴とする請求項1または請求項2記載のコンテンツ検索システム。
- 前記類似度算出部は、前記クラスタを構成する画像コンテンツと、前記ランドマーク候補コンテンツとしての画像コンテンツとの類似度を、色情報を用いて算出することを特徴とする請求項3記載のコンテンツ検索システム。
- 前記類似度算出部は、前記クラスタを構成する画像コンテンツと、前記ランドマーク候補コンテンツとしての画像コンテンツとの類似度を、EMD(Earth Mover's Distance)を用いて算出することを特徴とする請求項4記載のコンテンツ検索システム。
- 地図上の位置情報が付加されている画像コンテンツ群から、前記位置情報に基づいて、複数の画像コンテンツから構成されるクラスタを抽出する処理と、
前記抽出されたクラスタを構成する画像コンテンツの位置情報から特定される範囲内に位置するランドマーク情報をランドマーク候補情報として収集する処理と、
前記収集されたランドマーク候補情報に関連する画像コンテンツをランドマーク候補コンテンツとして収集する処理と、
前記クラスタを構成する各画像コンテンツと、前記ランドマーク候補コンテンツとしての画像コンテンツとの類似度を算出する処理と、
前記算出された類似度が所定の閾値よりも高いランドマーク候補コンテンツとしての画像コンテンツに対応するランドマーク候補情報を、前記クラスタを表わすものとして選定する処理と、を含む一連の処理を、コンピュータに実行させることを特徴とするコンテンツ検索プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008275514A JP5349004B2 (ja) | 2008-10-27 | 2008-10-27 | コンテンツ検索システムおよびコンテンツ検索プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008275514A JP5349004B2 (ja) | 2008-10-27 | 2008-10-27 | コンテンツ検索システムおよびコンテンツ検索プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010102629A JP2010102629A (ja) | 2010-05-06 |
JP5349004B2 true JP5349004B2 (ja) | 2013-11-20 |
Family
ID=42293203
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008275514A Expired - Fee Related JP5349004B2 (ja) | 2008-10-27 | 2008-10-27 | コンテンツ検索システムおよびコンテンツ検索プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5349004B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9152882B2 (en) * | 2011-06-17 | 2015-10-06 | Microsoft Technology Licensing, Llc. | Location-aided recognition |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001036842A (ja) * | 1999-07-16 | 2001-02-09 | Canon Inc | 画像処理装置、画像処理方法および記憶媒体 |
JP4457660B2 (ja) * | 2003-12-12 | 2010-04-28 | パナソニック株式会社 | 画像分類装置、画像分類システム、画像分類に関するプログラム、およびそのプログラムを記録したコンピュータ読み取り可能な記録媒体 |
-
2008
- 2008-10-27 JP JP2008275514A patent/JP5349004B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2010102629A (ja) | 2010-05-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9292766B2 (en) | Techniques for ground-level photo geolocation using digital elevation | |
US8483715B2 (en) | Computer based location identification using images | |
US8694515B2 (en) | Image search device and image search method | |
CN100371952C (zh) | 识别视频图像对象及应用视频图像注释的设备和方法 | |
CN109582880B (zh) | 兴趣点信息处理方法、装置、终端及存储介质 | |
US7882112B2 (en) | Image search device and image search method | |
US20080270378A1 (en) | Method, Apparatus and Computer Program Product for Determining Relevance and/or Ambiguity in a Search System | |
JP2009003415A (ja) | 地図データ更新方法および装置 | |
US20110218984A1 (en) | Method and system for searching for information pertaining target objects | |
JP5180922B2 (ja) | 画像検索システム及び画像検索方法 | |
CN108763481A (zh) | 一种基于大规模街景数据的图片地理定位方法和系统 | |
CN104520848A (zh) | 按照出席者搜索事件 | |
Yadav et al. | Identification of trees and their trunks from mobile laser scanning data of roadway scenes | |
Kalantar et al. | Smart counting–oil palm tree inventory with UAV | |
KR102468309B1 (ko) | 영상 기반 건물 검색 방법 및 장치 | |
CN104133819A (zh) | 信息检索方法及装置 | |
JP5289211B2 (ja) | 画像検索システム、画像検索プログラムおよびサーバ装置 | |
JP5356289B2 (ja) | 画像検索システム | |
JP5384979B2 (ja) | コンテンツ検索システムおよびコンテンツ検索プログラム | |
JP5349004B2 (ja) | コンテンツ検索システムおよびコンテンツ検索プログラム | |
JP2009301416A (ja) | コンテンツ分類装置、コンテンツ検索装置、コンテンツ検索システム及びコンピュータプログラム | |
CN115049731B (zh) | 一种基于双目摄像头的视觉建图和定位方法 | |
KR20200125383A (ko) | 지오 태그 사진들로부터 어트랙션 지역을 발견하는 방법 및 이를 수행하는 장치 | |
US20150379040A1 (en) | Generating automated tours of geographic-location related features | |
CN112015937B (zh) | 一种图片地理定位方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110826 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130115 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130313 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130430 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130627 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130723 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130820 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5349004 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |