JP2011511365A - 画像と位置による画像環境の認識 - Google Patents
画像と位置による画像環境の認識 Download PDFInfo
- Publication number
- JP2011511365A JP2011511365A JP2010545006A JP2010545006A JP2011511365A JP 2011511365 A JP2011511365 A JP 2011511365A JP 2010545006 A JP2010545006 A JP 2010545006A JP 2010545006 A JP2010545006 A JP 2010545006A JP 2011511365 A JP2011511365 A JP 2011511365A
- Authority
- JP
- Japan
- Prior art keywords
- image
- environment
- event
- position information
- aerial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
- G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/13—Satellite images
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Library & Information Science (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Astronomy & Astrophysics (AREA)
- Remote Sensing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Processing Or Creating Images (AREA)
- Navigation (AREA)
- Image Analysis (AREA)
Abstract
Description
(a)前記画像とそれに関連する位置情報とを取得する段階と、
(b)前記位置情報を用いて前記位置情報に関連する空間像を取得する段階と、
(c)前記関連する空間像から前記画像の環境を特定する段階と、
(d)後で使用するために前記画像と関連付けて前記画像の環境を記憶する段階とを有する。
12 計算デバイス
14 インデックスサーバ
16 空間像サーバ
20 通信ネットワーク
22 ステップ
24 ステップ
26 ステップ
28 ステップ
30 ステップ
32 ステップ
35 表
40 画像
42 取得空間像
44 リスト
46 リスト
48 画像
50 リスト
Claims (17)
- 画像と、その画像と関連する位置情報とから前記画像の環境を認識する方法であって、
(a)前記画像とそれに関連する位置情報とを取得する段階と、
(b)前記位置情報を用いて前記位置情報に関連する空間像を取得する段階と、
(c)前記関連する空間像から前記画像の環境を特定する段階と、
(d)後で使用するために前記画像と関連付けて前記画像の環境を記憶する段階とを有する方法。 - 前記空間像は衛星画像または飛行機から取得した画像である、請求項1に記載の方法。
- 前記空間像の取得は、前記画像の環境を特定するのに必要な適切な解像度の選択を含む、請求項2に記載の方法。
- 前記環境には、野球場、フットボール場、テニスコート、ゴルフコース、居住エリア、商業施設、学校、ショッピングモール、遊び場、公園、海岸、森林、またはテーマパークを含む、請求項1に記載の方法。
- 格納された前記画像の環境から、前記画像に関連するイベントまたはアクティビティの潜在的な性質に関する推論を行う段階と、
前記イベントの画像を検索する段階とをさらに含む、請求項1に記載の方法。 - 格納された前記画像の環境と前記画像とにより推論を行う、請求項5に記載の方法。
- 格納された環境を用いて前記イベントの画像を検索する、請求項5に記載の方法。
- 取得した空間像に関連するメタデータを取得する段階と、
後で使用するため、格納した環境に関連づけて前記メタデータを格納する段階とをさらに含む、請求項1に記載の方法。 - 格納された前記画像の環境と格納されたメタデータとから、前記画像に関連するイベントまたはアクティビティの潜在的な性質に関する推論を行う段階と、
前記イベントの画像を検索する段階とをさらに含む、請求項8に記載の方法。 - 格納された前記画像の環境と前記画像と前記メタデータとにより推論を行う、
請求項9に記載の方法。 - 画像と、その画像と関連する位置情報とから前記画像の環境を認識するシステムであって、
(a)前記画像とそれに関連する位置情報とをメモリに格納する手段と、
(b)空間像サーバと通信し、前記位置情報を用いて前記位置情報に関連する空間像を取得する手段と、
(c)取得した空間像に応じて、分類子を用いて、取得した空間像から前記画像の環境を特定するインデックスサーバと、
(d)後で使用するために前記画像と関連付けて前記画像の環境を記憶する手段とを有するシステム。 - 前記インデックスサーバは、異なる環境の特徴を特定する少なくとも1つの識別子を含む、請求項11に記載のシステム。
- 前記環境には、野球場、フットボール場、テニスコート、ゴルフコース、居住エリア、商業施設、学校、ショッピングモール、遊び場、公園、海岸、森林、またはテーマパークを含む、請求項11に記載のシステム。
- 格納された前記画像の環境から、前記画像に関連するイベントまたはアクティビティの潜在的な性質に関する推論を行う手段と、
前記イベントの画像を検索する手段とをさらに含む、請求項13に記載のシステム。 - 画像と、その画像と関連する位置情報とから前記画像の環境を認識する方法であって、
(a)前記画像とそれに関連する位置情報とを取得する段階と、
(b)前記位置情報を用いて前記位置情報に関連する空間像を取得する段階と、
(c)異なる環境の特徴を特定する少なくとも1つの分類子を提供して、取得した空間像から前記画像の環境を特定する段階と、
(d)後で使用するために前記画像と関連付けて前記画像の環境を記憶する段階とを有する方法。 - 前記環境には、野球場、フットボール場、テニスコート、ゴルフコース、居住エリア、商業施設、学校、ショッピングモール、遊び場、公園、海岸、森林、またはテーマパークを含む、請求項15に記載の方法。
- 格納された前記画像の環境から、前記画像に関連するイベントまたはアクティビティの潜在的な性質に関する推論を行う段階と、
前記イベントの画像を検索する段階とをさらに含む、請求項15に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US12/022,361 | 2008-01-30 | ||
US12/022,361 US8116596B2 (en) | 2008-01-30 | 2008-01-30 | Recognizing image environment from image and position |
PCT/US2009/000519 WO2009134292A2 (en) | 2008-01-30 | 2009-01-27 | Recognizing image environment from image and position |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011511365A true JP2011511365A (ja) | 2011-04-07 |
JP2011511365A5 JP2011511365A5 (ja) | 2012-03-08 |
JP5647523B2 JP5647523B2 (ja) | 2014-12-24 |
Family
ID=40899272
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010545006A Expired - Fee Related JP5647523B2 (ja) | 2008-01-30 | 2009-01-27 | 画像と位置による画像環境の認識 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8116596B2 (ja) |
EP (2) | EP2320351A1 (ja) |
JP (1) | JP5647523B2 (ja) |
CN (1) | CN101911098B (ja) |
WO (1) | WO2009134292A2 (ja) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016113732A1 (en) * | 2015-01-15 | 2016-07-21 | Wakingapp Ltd | System for content matching and triggering for reality-virtuality continuum-based environment and methods thereof |
US20100292917A1 (en) * | 2009-05-13 | 2010-11-18 | International Business Machines Corporation | System and method for guiding a user through a surrounding environment |
US8233711B2 (en) * | 2009-11-18 | 2012-07-31 | Nec Laboratories America, Inc. | Locality-constrained linear coding systems and methods for image classification |
US8427536B2 (en) * | 2009-11-19 | 2013-04-23 | Qualcomm Incorporated | Orientation determination of a mobile station using side and top view images |
US9298982B2 (en) | 2011-07-26 | 2016-03-29 | Xerox Corporation | System and method for computing the visual profile of a place |
US9105128B2 (en) | 2011-08-26 | 2015-08-11 | Skybox Imaging, Inc. | Adaptive image acquisition and processing with image analysis feedback |
US8873842B2 (en) | 2011-08-26 | 2014-10-28 | Skybox Imaging, Inc. | Using human intelligence tasks for precise image analysis |
WO2013032823A1 (en) | 2011-08-26 | 2013-03-07 | Skybox Imaging, Inc. | Adaptive image acquisition and processing with image analysis feedback |
US9031326B2 (en) | 2012-02-16 | 2015-05-12 | Sony Corporation | System and method for effectively performing an image categorization procedure |
DE102012024873A1 (de) * | 2012-12-19 | 2014-06-26 | Audi Ag | Verfahren und Steuervorrichtung zum Bereitstellen eines vorausliegenden Straßenverlaufs |
US8761457B1 (en) | 2013-11-27 | 2014-06-24 | Google Inc. | Aligning ground based images and aerial imagery |
CN103760917B (zh) * | 2013-12-31 | 2016-05-11 | 河南理工大学 | 航空摄影仪智能旋像设备及智能旋像方法 |
CN103713655B (zh) * | 2014-01-17 | 2016-08-17 | 中测新图(北京)遥感技术有限责任公司 | 数字航摄仪旋偏角修正系统及方法 |
US9530235B2 (en) | 2014-11-18 | 2016-12-27 | Google Inc. | Aligning panoramic imagery and aerial imagery |
US10217379B2 (en) * | 2015-01-30 | 2019-02-26 | Toyota Motor Engineering & Manufacturing North America, Inc. | Modifying vision-assist device parameters based on an environment classification |
US10037712B2 (en) | 2015-01-30 | 2018-07-31 | Toyota Motor Engineering & Manufacturing North America, Inc. | Vision-assist devices and methods of detecting a classification of an object |
CN105354252A (zh) * | 2015-10-19 | 2016-02-24 | 联想(北京)有限公司 | 一种信息处理方法和装置 |
CN105389555A (zh) * | 2015-11-06 | 2016-03-09 | 天津航天中为数据系统科技有限公司 | 基于航拍图像的隐患目标分析方法及系统 |
US11423651B2 (en) * | 2016-02-09 | 2022-08-23 | Hrl Laboratories, Llc | System and method for the fusion of bottom-up whole-image features and top-down enttiy classification for accurate image/video scene classification |
CN105963951A (zh) * | 2016-05-03 | 2016-09-28 | 北京高携科技发展有限公司 | 一种高尔夫球定位方法及装置 |
IL273722A (en) * | 2020-03-31 | 2021-09-30 | Israel Aerospace Ind Ltd | Automatic labeling of objects in images |
CN113936248B (zh) * | 2021-10-12 | 2023-10-03 | 河海大学 | 一种基于图像识别的海滩人员危险性预警方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1091634A (ja) * | 1996-08-15 | 1998-04-10 | Hewlett Packard Co <Hp> | 写真画像検索システム |
US20060277188A1 (en) * | 2005-06-01 | 2006-12-07 | Irish Jeremy A | System and method for facilitating ad hoc compilation of geospatial data for on-line collaboration |
JP2006350879A (ja) * | 2005-06-20 | 2006-12-28 | Nikon Corp | 情報提供システム |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8432414B2 (en) | 1997-09-05 | 2013-04-30 | Ecole Polytechnique Federale De Lausanne | Automated annotation of a view |
US6895126B2 (en) * | 2000-10-06 | 2005-05-17 | Enrico Di Bernardo | System and method for creating, storing, and utilizing composite images of a geographic location |
CA2559726C (en) * | 2004-03-24 | 2015-10-20 | A9.Com, Inc. | System and method for displaying images in an online directory |
JP4611675B2 (ja) * | 2004-06-30 | 2011-01-12 | 本田技研工業株式会社 | 顧客応対ロボット |
US20060190812A1 (en) * | 2005-02-22 | 2006-08-24 | Geovector Corporation | Imaging systems including hyperlink associations |
US20070032945A1 (en) * | 2005-08-02 | 2007-02-08 | Jason Kaufman | System and method for providing location related information to a network user |
US20070055441A1 (en) * | 2005-08-12 | 2007-03-08 | Facet Technology Corp. | System for associating pre-recorded images with routing information in a navigation system |
US8160400B2 (en) * | 2005-11-17 | 2012-04-17 | Microsoft Corporation | Navigating images using image based geometric alignment and object based controls |
US7539557B2 (en) * | 2005-12-30 | 2009-05-26 | Irobot Corporation | Autonomous mobile robot |
US8139514B2 (en) * | 2006-02-24 | 2012-03-20 | Yahoo! Inc. | Method and system for communicating with multiple users via a map over the internet |
US9507778B2 (en) * | 2006-05-19 | 2016-11-29 | Yahoo! Inc. | Summarization of media object collections |
-
2008
- 2008-01-30 US US12/022,361 patent/US8116596B2/en not_active Expired - Fee Related
-
2009
- 2009-01-27 WO PCT/US2009/000519 patent/WO2009134292A2/en active Application Filing
- 2009-01-27 EP EP11155930A patent/EP2320351A1/en not_active Ceased
- 2009-01-27 EP EP09739095A patent/EP2238561A2/en not_active Withdrawn
- 2009-01-27 CN CN200980102296.5A patent/CN101911098B/zh not_active Expired - Fee Related
- 2009-01-27 JP JP2010545006A patent/JP5647523B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1091634A (ja) * | 1996-08-15 | 1998-04-10 | Hewlett Packard Co <Hp> | 写真画像検索システム |
US20060277188A1 (en) * | 2005-06-01 | 2006-12-07 | Irish Jeremy A | System and method for facilitating ad hoc compilation of geospatial data for on-line collaboration |
JP2006350879A (ja) * | 2005-06-20 | 2006-12-28 | Nikon Corp | 情報提供システム |
Non-Patent Citations (5)
Title |
---|
CSNG200700013012; 橋本 明将、外2名: '"異種センサを用いた屋外アノテーションシステム"' 電子情報通信学会技術研究報告 Vol.106, No.234, 20060905, p.97-102, 社団法人電子情報通信学会 * |
CSNG200800150006; 渡辺 和宏、外2名: '"屋外型アノテーションシステムにおける高性能化の検討"' 電子情報通信学会技術研究報告 Vol.107, No.454, 20080117, p.27-32, 社団法人電子情報通信学会 * |
JPN6013017229; 橋本 明将、外2名: '"異種センサを用いた屋外アノテーションシステム"' 電子情報通信学会技術研究報告 Vol.106, No.234, 20060905, p.97-102, 社団法人電子情報通信学会 * |
JPN6013017230; 渡辺 和宏、外2名: '"屋外型アノテーションシステムにおける高性能化の検討"' 電子情報通信学会技術研究報告 Vol.107, No.454, 20080117, p.27-32, 社団法人電子情報通信学会 * |
JPN7014000791; Toni Navarrete: '"Semantic integration of thematic geographic informationin a multimedia context"' Ph.D. Thesis, Doctorate in Computer Science and CommunicationDepartment of Technology, Universitat P , 20060630, p.215-223, Universitat Pompeu Fabra * |
Also Published As
Publication number | Publication date |
---|---|
EP2320351A1 (en) | 2011-05-11 |
US20090190797A1 (en) | 2009-07-30 |
CN101911098B (zh) | 2014-09-17 |
WO2009134292A3 (en) | 2010-05-06 |
CN101911098A (zh) | 2010-12-08 |
EP2238561A2 (en) | 2010-10-13 |
US8116596B2 (en) | 2012-02-14 |
WO2009134292A2 (en) | 2009-11-05 |
JP5647523B2 (ja) | 2014-12-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5647523B2 (ja) | 画像と位置による画像環境の認識 | |
US8391617B2 (en) | Event recognition using image and location information | |
Weyand et al. | Planet-photo geolocation with convolutional neural networks | |
US8055081B2 (en) | Image classification using capture-location-sequence information | |
Workman et al. | A unified model for near and remote sensing | |
US20110184953A1 (en) | On-location recommendation for photo composition | |
US8180146B2 (en) | Method and apparatus for recognizing and localizing landmarks from an image onto a map | |
Hays et al. | Large-scale image geolocalization | |
US9298982B2 (en) | System and method for computing the visual profile of a place | |
Joshi et al. | Inferring generic activities and events from image content and bags of geo-tags | |
Chen et al. | Clues from the beaten path: Location estimation with bursty sequences of tourist photos | |
CN102591868A (zh) | 用于拍照指南自动生成的系统和方法 | |
JP5626042B2 (ja) | 画像集合における代表画像の検索システム、方法及びプログラム | |
Cao et al. | Learning human photo shooting patterns from large-scale community photo collections | |
Qian et al. | On combining social media and spatial technology for POI cognition and image localization | |
Singh et al. | Semantically guided geo-location and modeling in urban environments | |
Alzu’bi et al. | Learning transfer using deep convolutional features for remote sensing image retrieval | |
Kim et al. | Classification and indexing scheme of large-scale image repository for spatio-temporal landmark recognition | |
Weng et al. | Semantic signatures for large-scale visual localization | |
Li et al. | Global-scale location prediction for social images using geo-visual ranking | |
Newsam et al. | Georeferenced Social Multimedia as Volunteered Geographic Information | |
Yaegashi et al. | Can geotags help image recognition? | |
Rischka et al. | Landmark Recognition: State-of-the-Art Methods in a Large-Scale Scenario. | |
Luo et al. | Recognizing picture-taking environment from satellite images: a feasibility study | |
Song et al. | Semantic features for food image recognition with geo-constraints |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120117 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130404 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20130404 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130416 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20130716 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20130723 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130814 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140311 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140611 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141014 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141107 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5647523 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |