JP2013186478A - 画像処理システム及び画像処理方法 - Google Patents
画像処理システム及び画像処理方法 Download PDFInfo
- Publication number
- JP2013186478A JP2013186478A JP2012048416A JP2012048416A JP2013186478A JP 2013186478 A JP2013186478 A JP 2013186478A JP 2012048416 A JP2012048416 A JP 2012048416A JP 2012048416 A JP2012048416 A JP 2012048416A JP 2013186478 A JP2013186478 A JP 2013186478A
- Authority
- JP
- Japan
- Prior art keywords
- image
- reference image
- data
- feature
- point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 44
- 238000003672 processing method Methods 0.000 title claims description 4
- 238000000034 method Methods 0.000 claims abstract description 29
- 238000004364 calculation method Methods 0.000 claims description 33
- 238000001514 detection method Methods 0.000 claims description 29
- 230000005540 biological transmission Effects 0.000 claims description 5
- 238000000605 extraction Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 10
- 239000011159 matrix material Substances 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】 画像処理システムは、サーバに記憶された複数の参照画像の中から、端末にて入力された入力画像に対応する対応参照画像を検索し、入力画像上の点と対応参照画像上の点の位置関係を求めるシステムである。サーバは、複数の参照画像中の複数の特徴点の特徴量のデータとその特徴点を含む参照画像の識別子とを記憶したデータベースと、参照画像中の特徴点の特徴量及び位置のデータであり、かつ、データを特徴量から検索するためのインデックスが参照画像ごとに設定されたトラッキングデータを記憶したトラッキグデータベースを備える。サーバは、対応参照画像を特定した後、その対応参照画像のトラッキングデータを端末に送信する。
【選択図】 図1
Description
図1は、第1の実施の形態の画像処理システムの構成を示すブロック図である。画像処理システムは、携帯電話端末10と、コンテンツサーバ30とがネットワークによって接続されて構成されている。
携帯電話端末10は、画像取得部12と、取得した画像から複数の特徴点を検出する特徴点検出部14と、コンテンツサーバ30と通信を行う通信部16とを有している。画像取得部12は、携帯電話端末10に備えられたカメラで撮影をすることにより画像を生成し、これを入力画像として取得する。画像取得部12は、外部で生成された画像を通信又は記録媒体を介して取得してもよい。画像取得部12は、取得した画像を画像記憶部18に記憶する。
x=A・X
このホモグラフィー行列Aを用いると、対応参照画像上の任意の点を入力画像上の点に写像させることができる。
コンテンツサーバ30は、携帯電話端末10と通信する通信部32と、複数の参照画像の特徴点の特徴量のデータを参照画像のIDに関連付けて記憶した特徴量データベース(以下、「特徴量DB」という)34と、特徴量DB34のデータを用いて入力画像に対応する対応参照画像を検出する対応参照画像検出部36と、入力画像と参照画像との位置関係の算出に用いられるトラッキングデータを記憶したトラッキングデータベース(以下、「トラッキングDB」という)38と、トラッキングDB38から対応参照画像のトラッキングデータを取得するトラッキングデータ取得部40と、コンテンツを記憶したコンテンツデータベース(以下、「コンテンツDB」という)42と、コンテンツDB42からコンテンツを抽出するコンテンツ抽出部44とを有している。
次に、本発明の第2の実施の形態の画像処理システムについて説明する。第2の実施の形態の画像処理システムの基本的な構成は、第1の実施の形態と同じであるが(図1参照)、第2の実施の形態では、トラッキングDB38に記憶されたデータが異なり、対応参照画像と入力画像との位置関係を求める処理も異なる。
12 画像取得部
14 特徴点検出部
16 通信部
18 画像記憶部
20 特徴点記憶部
22 位置関係算出部
24 コンテンツ重畳部
26 表示部
30 コンテンツサーバ
32 通信部
34 特徴量DB
36 対応参照画像検出部
38 トラッキングDB
40 トラッキングデータ取得部
42 コンテンツDB
44 コンテンツ抽出部
Claims (6)
- サーバに記憶された複数の参照画像の中から、端末にて入力された入力画像に対応する対応参照画像を検索し、前記入力画像上の点と前記対応参照画像上の点の位置関係を求める画像処理システムであって、
前記サーバは、
複数の参照画像中の複数の特徴点の特徴量のデータとその特徴点を含む参照画像の識別子とを記憶すると共に、データを特徴量から検索するためのインデックスが設定された特徴量データベースと、
前記入力画像上の点と前記参照画像上の点の位置関係の計算に用いられる当該参照画像の特徴部分に関連するデータをトラッキングデータとして記憶したトラッキングデータベースと、
前記入力画像中の複数の特徴点の特徴量のデータを前記端末から受信する受信部と、
前記特徴量データベースを用いて、前記入力画像の特徴量データに対応する特徴点を最も多く含む参照画像を前記対応参照画像として検出する対応参照画像検出部と、
前記トラッキングデータベースから前記対応参照画像のトラッキングデータを取得するトラッキングデータ取得部と、
前記対応参照画像のトラッキングデータを前記端末に送信する送信部と、
を備え、
前記端末は、
前記入力画像中の特徴点の位置およびその特徴量を検出する特徴点検出部と、
前記サーバに前記入力画像中の複数の特徴点の特徴量のデータを送信する送信部と、
前記サーバから、前記対応参照画像のトラッキングデータを受信する受信部と、
前記トラッキングデータに基づいて、前記入力画像上の点と前記対応参照画像上の点の位置関係を計算する位置関係算出部と、
を備える画像処理システム。 - 前記トラッキングデータベースは、複数の参照画像のそれぞれについて、当該参照画像中の特徴点の特徴量及び位置のデータであり、かつ、データを特徴量から検索するためのインデックスが参照画像ごとに設定されたトラッキングデータを記憶しており、
前記端末の位置関係算出部は、前記トラッキングデータに基づいて、前記入力画像中の各特徴点に対応する前記対応参照画像の特徴点を求め、対応する各特徴点の位置関係に基づいて、前記入力画像上の点と前記参照画像上の点の位置関係を計算する請求項1に記載の画像処理システム。 - 前記トラッキングデータは、参照画像中の特徴部分を表したテンプレート画像及びその位置データであり、
前記端末の位置関係算出部は、前記入力画像と前記テンプレート画像とのマッチングを行うことにより、前記入力画像上の点と前記対応参照画像上の点の位置関係を計算する請求項1に記載の画像処理システム。 - 前記サーバは、
前記参照画像に関連付けて、参照画像に重畳されるコンテンツ及びその重畳位置のデータを記憶したコンテンツデータベースと、
前記コンテンツデータベースから、前記対応参照画像に対応するコンテンツ及びその重畳位置のデータを読み出すコンテンツ抽出部と、
前記コンテンツ及びその重畳位置のデータを前記端末に送信する送信部と、
を備え、
前記端末は、
前記コンテンツ及びその重畳位置のデータを受信する受信部と、
前記位置関係算出部にて検出された位置関係に基づいて、前記コンテンツの重畳位置を前記入力画像上の座標系に変換し、前記入力画像に前記コンテンツを重畳する重畳部と、
前記コンテンツを重畳した画像を表示する表示部と、
を備える請求項1乃至3のいずれかに記載の画像処理システム。 - サーバに記憶された複数の参照画像の中から、端末にて入力された入力画像に対応する対応参照画像を検索し、前記入力画像上の点と前記対応参照画像上の点の位置関係を求める画像処理システムであって、
複数の参照画像中の複数の特徴点の特徴量のデータとその特徴点を含む参照画像の識別子とを記憶すると共に、データを特徴量から検索するためのインデックスが設定された特徴量データベースと、
前記入力画像上の点と前記参照画像上の点の位置関係の計算に用いられる当該参照画像の特徴部分に関連するデータをトラッキングデータとして記憶したトラッキングデータベースと、
前記入力画像中の特徴点の位置およびその特徴量を検出する特徴点検出部と、
前記特徴量データベースを用いて、前記入力画像の特徴量データに対応する特徴点を最も多く含む参照画像を前記対応参照画像として検出する対応参照画像検出部と、
前記トラッキングデータベースから前記対応参照画像のトラッキングデータを取得するトラッキングデータ取得部と、
前記対応参照画像のトラッキングデータに基づいて、前記入力画像上の点と前記対応参照画像上の点の位置関係を計算する位置関係算出部と、
を備える画像処理システム。 - サーバに記憶された複数の参照画像の中から、端末にて入力された入力画像に対応する対応参照画像を検索し、前記入力画像上の点と前記対応参照画像上の点の位置関係を求める方法であって、
前記端末が、前記入力画像中の特徴点の位置およびその特徴量を検出するステップと、
前記端末が、前記サーバに前記入力画像中の複数の特徴点の特徴量のデータを送信するステップと、
前記サーバが、複数の参照画像中の特徴点の特徴量のデータとその特徴点を含む参照画像の識別子とを記憶すると共に、データを特徴量から検索するためのインデックスが設定された特徴量データベースの中から、前記入力画像の特徴量データに対応する特徴点を最も多く含む参照画像を前記対応参照画像として検出するステップと、
前記サーバが、前記入力画像上の点と前記参照画像上の点の位置関係の計算に用いられる当該参照画像の特徴部分に関連するデータをトラッキングデータとして記憶したトラッキングデータベースから、前記対応参照画像のトラッキングデータを取得するステップと、
前記サーバが、前記対応参照画像のトラッキングデータを前記端末に送信するステップと、
前記端末が、前記トラッキングデータに基づいて、前記入力画像上の点と前記対応参照画像上の点の位置関係を計算するステップと、
を備える画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012048416A JP5536124B2 (ja) | 2012-03-05 | 2012-03-05 | 画像処理システム及び画像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012048416A JP5536124B2 (ja) | 2012-03-05 | 2012-03-05 | 画像処理システム及び画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013186478A true JP2013186478A (ja) | 2013-09-19 |
JP5536124B2 JP5536124B2 (ja) | 2014-07-02 |
Family
ID=49387901
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012048416A Expired - Fee Related JP5536124B2 (ja) | 2012-03-05 | 2012-03-05 | 画像処理システム及び画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5536124B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016066187A (ja) * | 2014-09-24 | 2016-04-28 | Kddi株式会社 | 画像処理装置 |
JP2017046324A (ja) * | 2015-08-28 | 2017-03-02 | 株式会社オプティム | ユーザ端末、物体認識サーバ、通知方法及びユーザ端末用プログラム |
JP2017117051A (ja) * | 2015-12-22 | 2017-06-29 | Kddi株式会社 | 情報処理システム、情報処理方法、情報処理装置、サーバ及びプログラム |
JP2017224013A (ja) * | 2016-06-13 | 2017-12-21 | 日本電信電話株式会社 | 表示制御システム、表示制御方法、および表示制御プログラム |
WO2020261338A1 (ja) * | 2019-06-24 | 2020-12-30 | 日本電信電話株式会社 | 支援装置、支援方法、プログラム、及び支援システム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006092957A1 (ja) * | 2005-03-01 | 2006-09-08 | Osaka Prefecture University Public Corporation | 文書・画像検索方法とそのプログラム、文書・画像登録装置および検索装置 |
JP2009271655A (ja) * | 2008-05-02 | 2009-11-19 | Sharp Corp | 画像照合方法、画像照合装置、画像データ出力処理装置、プログラム及び記憶媒体 |
JP2011086265A (ja) * | 2009-10-19 | 2011-04-28 | Canon Inc | 画像処理装置及び方法、プログラム及び記憶媒体 |
-
2012
- 2012-03-05 JP JP2012048416A patent/JP5536124B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006092957A1 (ja) * | 2005-03-01 | 2006-09-08 | Osaka Prefecture University Public Corporation | 文書・画像検索方法とそのプログラム、文書・画像登録装置および検索装置 |
JP2009271655A (ja) * | 2008-05-02 | 2009-11-19 | Sharp Corp | 画像照合方法、画像照合装置、画像データ出力処理装置、プログラム及び記憶媒体 |
JP2011086265A (ja) * | 2009-10-19 | 2011-04-28 | Canon Inc | 画像処理装置及び方法、プログラム及び記憶媒体 |
Non-Patent Citations (2)
Title |
---|
CSNG200900566006; 内山英昭, 外1名: '"文書を対象とした拡張現実のためのLLAHを用いたカメラトラッキング"' 電子情報通信学会技術研究報告 第109巻, 第215号, 20091001, p.29-34, 社団法人電子情報通信学会 * |
JPN6014000731; 内山英昭, 外1名: '"文書を対象とした拡張現実のためのLLAHを用いたカメラトラッキング"' 電子情報通信学会技術研究報告 第109巻, 第215号, 20091001, p.29-34, 社団法人電子情報通信学会 * |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016066187A (ja) * | 2014-09-24 | 2016-04-28 | Kddi株式会社 | 画像処理装置 |
JP2017046324A (ja) * | 2015-08-28 | 2017-03-02 | 株式会社オプティム | ユーザ端末、物体認識サーバ、通知方法及びユーザ端末用プログラム |
JP2017117051A (ja) * | 2015-12-22 | 2017-06-29 | Kddi株式会社 | 情報処理システム、情報処理方法、情報処理装置、サーバ及びプログラム |
JP2017224013A (ja) * | 2016-06-13 | 2017-12-21 | 日本電信電話株式会社 | 表示制御システム、表示制御方法、および表示制御プログラム |
WO2020261338A1 (ja) * | 2019-06-24 | 2020-12-30 | 日本電信電話株式会社 | 支援装置、支援方法、プログラム、及び支援システム |
JPWO2020261338A1 (ja) * | 2019-06-24 | 2020-12-30 | ||
JP7265199B2 (ja) | 2019-06-24 | 2023-04-26 | 日本電信電話株式会社 | 支援装置、支援方法、プログラム、及び支援システム |
Also Published As
Publication number | Publication date |
---|---|
JP5536124B2 (ja) | 2014-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020259481A1 (zh) | 定位方法及装置、电子设备、可读存储介质 | |
US11501514B2 (en) | Universal object recognition | |
US8798357B2 (en) | Image-based localization | |
CN106920279B (zh) | 三维地图构建方法和装置 | |
US10210423B2 (en) | Image match for featureless objects | |
US8442307B1 (en) | Appearance augmented 3-D point clouds for trajectory and camera localization | |
CN106203242B (zh) | 一种相似图像识别方法及设备 | |
US9076069B2 (en) | Registering metadata apparatus | |
JP5563494B2 (ja) | 対応参照画像検索装置及び方法、コンテンツ重畳装置、システム、及び方法、並びにコンピュータプログラム | |
US11704357B2 (en) | Shape-based graphics search | |
US20100135527A1 (en) | Image recognition algorithm, method of identifying a target image using same, and method of selecting data for transmission to a portable electronic device | |
JP5536124B2 (ja) | 画像処理システム及び画像処理方法 | |
WO2019029156A1 (zh) | 一种室内目标位置的导航方法、装置、电子设备及介质 | |
TW201222288A (en) | Image retrieving system and method and computer program product thereof | |
JP2015111339A (ja) | 画像検索システム、画像検索装置、検索サーバ装置、画像検索方法、及び画像検索プログラム | |
CN112419388A (zh) | 深度检测方法、装置、电子设备和计算机可读存储介质 | |
CN111784776A (zh) | 视觉定位方法及装置、计算机可读介质和电子设备 | |
KR20190124436A (ko) | 영상 기반 건물 검색 방법 및 장치 | |
CN113592015B (zh) | 定位以及训练特征匹配网络的方法和装置 | |
CN112102404B (zh) | 物体检测追踪方法、装置及头戴显示设备 | |
CN109376581B (zh) | 对象关系识别方法和装置、存储介质及电子装置 | |
JP2014038566A (ja) | 画像処理装置 | |
JP6281207B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
Choi et al. | Smart Booklet: Tour guide system with mobile augmented reality | |
JP2014225168A (ja) | 特徴点集合で表される画像間の類似度を算出するプログラム、装置及び方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140114 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140214 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140408 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140423 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5536124 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |