JP2018151829A - プログラム、情報端末、情報表示方法及び情報表示システム - Google Patents
プログラム、情報端末、情報表示方法及び情報表示システム Download PDFInfo
- Publication number
- JP2018151829A JP2018151829A JP2017047253A JP2017047253A JP2018151829A JP 2018151829 A JP2018151829 A JP 2018151829A JP 2017047253 A JP2017047253 A JP 2017047253A JP 2017047253 A JP2017047253 A JP 2017047253A JP 2018151829 A JP2018151829 A JP 2018151829A
- Authority
- JP
- Japan
- Prior art keywords
- subject
- feature information
- captured image
- information
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 18
- 238000000605 extraction Methods 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 6
- 230000007423 decrease Effects 0.000 claims description 2
- 238000003384 imaging method Methods 0.000 description 22
- 238000004891 communication Methods 0.000 description 17
- 230000008569 process Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 7
- 235000010724 Wisteria floribunda Nutrition 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 239000000284 extract Substances 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
[情報表示システムSの概要]
図1は、情報表示システムSの概要について説明するための図である。情報表示システムSは、情報端末1と、管理装置2と、撮影装置3とを備える。
複数の撮影装置3は、ユーザが画像を撮影すると撮像画像を生成し、ユーザの操作に応じて、生成した撮像画像と、画像が撮影された位置を示す位置情報とを関連付けて、管理装置2に送信する(図1における(1))。
図3は、情報端末1の構成を示す図である。情報端末1は、カメラ11と、GPS(Global Positioning System)受信機12と、通信部13と、表示部14と、操作部15と、記憶部16と、制御部17とを有する。制御部17は、操作受付部171と、画像生成部172と、位置特定部173と、データ取得部174と、判定部175と、表示制御部176とを有する。
GPS受信機12は、情報端末1の位置を検出するデバイスである。GPS受信機12は、例えばGPS衛星から緯度・経度を示す信号を受信し、受信した信号を位置特定部173に入力する。
操作部15は、ユーザの操作を受け付けるデバイスである。操作部15は、例えば、表示部14に重ねて設けられたタッチパネルである。
続いて、管理装置2の構成について説明する。図6は、管理装置2の構成を示す図である。管理装置2は、通信部21と、記憶部22と、制御部23とを有する。制御部23は、特徴情報生成部231と、撮影位置取得部232と、抽出部233と、情報送信部234とを有する。
情報送信部234は、抽出部233が抽出した認識条件データを情報端末1に送信する。
図8は、判定部175の動作について説明するための図である。以下、図8を参照しながら、判定部175の動作について説明する。図8においては、第1被写体が富士山であり、第2被写体が芦ノ湖であるとする。
図9は、制御部17の動作フローチャートである。まず、画像生成部172は、ユーザの操作に応じて撮像画像を生成する(S11)。画像生成部172は、例えば所定のフレームレートで連続して撮像画像を生成することで、ユーザが撮影操作をしてから継続的に撮像画像を生成する。
管理装置2は、認識条件データの管理者(例えば管理装置2の管理者)が認定した認定特徴情報を含む認定認識条件データと、上記の管理者が認定していない非認定特徴情報を含む非認定認識条件データとを区別して管理してもよい。認定認識条件データは、適切な内容であることが管理者によって確認されたデータであって、非認定認識条件データよりも信頼性が高い。
表示制御部176は、撮影位置を起点とする複数の角度範囲のそれぞれに対して、画像詳細情報の有無を示すシンボル画像を表示部14に表示させてもよい。図11は、変形例2の表示制御部176が表示する撮像画像の例を示す図である。
以上説明したように、情報端末1のデータ取得部174は、撮影位置から所定の範囲内の位置で撮影された第1被写体の特徴を示す第1特徴情報、及び撮影位置から所定の範囲内の位置で撮影された第2被写体の特徴を示す第2特徴情報を含む組合せ認識条件データを、管理装置2から取得する。判定部175は、第1特徴情報に基づいて、撮像画像に第1被写体が含まれ得るものの、第1被写体が含まれる蓋然性が十分に高くないと判定した場合、第2特徴情報に基づいて、撮像画像に第2被写体が含まれる蓋然性を算出する。そして、判定部175は、撮像画像に第2被写体が含まれる蓋然性が所定の閾値以上である場合に、撮像画像に第1被写体が含まれていると判定する。このようにすることで、一つの特徴情報を用いただけでは被写体が含まれているかどうかの判定精度が低い場合であっても、判定精度を向上させることができる。
第1の実施形態では、第2被写体が建物や自然物等の物体の画像であったのに対して、第2の実施形態では、第2被写体が、バーコード、QRコード又は文字等のように情報を含む画像である点で第1の実施形態と異なる。
以上説明したように、第2の実施形態に係る情報端末1の判定部175は、組合せ認識条件データに含まれている第2特徴情報に基づいて、バーコード、QRコード又は文字のように情報を含む画像が、第2被写体として撮像画像に含まれているか否かを判定する。そして、表示制御部176は、撮像画像に、バーコード、QRコード又は文字が含まれる蓋然性が高いと判定部175が判定した場合に、第1被写体に関連する情報を表示部14に表示させる。このようにすることで、情報端末1は、第1被写体の認識精度が低い場合であっても、第1被写体に関連する情報を適切に表示することが可能になる。
2 管理装置
3 撮影装置
11 カメラ
12 GPS受信機
13 通信部
14 表示部
15 操作部
16 記憶部
17 制御部
21 通信部
22 記憶部
23 制御部
171 操作受付部
172 画像生成部
173 位置特定部
174 データ取得部
175 判定部
176 表示制御部
231 特徴情報生成部
232 撮影位置取得部
233 抽出部
234 情報送信部
Claims (16)
- コンピュータを、
画像を撮影して撮像画像を生成する画像生成部、
前記画像の撮影位置を特定する位置特定部、
前記撮影位置から所定の範囲内の位置で撮影された第1被写体の特徴を示す第1特徴情報、及び前記撮影位置から所定の範囲内の位置で撮影された第2被写体の特徴を示す第2特徴情報を含む組合せ認識条件データを取得するデータ取得部、
前記第1特徴情報に基づいて前記撮像画像に前記第1被写体が含まれている蓋然性が単体認識閾値以上である場合、及び前記撮像画像に前記第1被写体が含まれている蓋然性が前記単体認識閾値よりも小さい第1組合せ認識閾値以上、前記単体認識閾値未満であり、かつ前記第2特徴情報に基づいて前記撮像画像に前記第2被写体が含まれていると判定した場合に、前記撮像画像に前記第1被写体が含まれていると判定する判定部、及び
前記判定部が、前記撮像画像に前記第1被写体が含まれていると判定した場合に、前記第1被写体に対応する被写体情報を、前記撮像画像に重ねて表示部に表示させる表示制御部、
として機能させるためのプログラム。 - 前記データ取得部は、前記第2特徴情報を含まず、前記第1特徴情報を含む単体認識条件データをさらに取得し、
前記判定部は、前記単体認識条件データに含まれる前記第1特徴情報に基づいて前記撮像画像に第1被写体が含まれている蓋然性が前記単体認識閾値以上であると判定した場合に、前記撮像画像に前記第1被写体が含まれていると判定する、
請求項1に記載のプログラム。 - 前記位置特定部は、前記画像の撮影向きをさらに特定し、
前記データ取得部は、前記撮影位置から所定の範囲内の位置を起点とし、かつ前記撮影向きを中心として所定の角度範囲に関連付けられた前記第1特徴情報及び前記第2特徴情報を含む組合せ認識条件データを取得する、
請求項1又は2に記載のプログラム。 - 前記データ取得部は、前記第1被写体と前記第2被写体との間の位置関係を示す情報を含む前記組合せ認識条件データを取得し、
前記判定部は、前記第2特徴情報に基づいて前記撮像画像に含まれている蓋然性があると判定した前記第2被写体と、前記撮像画像に含まれている蓋然性が前記第1組合せ認識閾値以上であると判定した前記第1被写体との位置関係が、前記位置関係を示す情報に対応する位置関係を満たす場合に、前記撮像画像に前記第1被写体が含まれていると判定する、
請求項1から3のいずれか一項に記載のプログラム。 - 前記判定部は、前記撮像画像に前記第2被写体が含まれている蓋然性が前記第1組合せ認識閾値よりも小さい第2組合せ認識閾値以上である場合に、前記撮像画像に前記第2被写体が含まれていると判定する、
請求項1から4のいずれか一項に記載のプログラム。 - 前記データ取得部は、前記組合せ認識条件データの管理者により認定された認定第1特徴情報を含む前記組合せ認識条件データと、前記管理者により認定されていない非認定第1特徴情報を含む前記組合せ認識条件データとを取得し、
前記判定部は、所定の数以上の前記認定第1特徴情報を取得した場合、前記非認定第1特徴情報を用いず、前記認定第1特徴情報に基づいて、前記撮像画像に前記第1被写体が含まれている蓋然性が前記組合せ認識閾値以上であるか否かを判定する、
請求項1から5のいずれか一項に記載のプログラム。 - 前記データ取得部は、複数の前記組合せ認識条件データと、前記複数の組合せ認識条件データに含まれる複数の前記第1特徴情報及び複数の前記第2特徴情報の信頼度を示す情報を取得し、
前記判定部は、前記複数の第1特徴情報及び前記複数の第2特徴情報のそれぞれの信頼度を示す情報に基づいて選択した特徴情報に基づいて、前記撮像画像に前記第1被写体又は前記第2被写体が含まれているか否かを判定する、
請求項1から6のいずれか一項に記載のプログラム。 - 前記表示制御部は、前記撮影位置を起点とする複数の角度範囲のそれぞれに対して、前記被写体情報の有無を示すシンボル画像を前記表示部に表示させる、
請求項1から7のいずれか一項に記載のプログラム。 - 前記表示制御部は、前記複数の角度範囲内に含まれる前記被写体情報の数を示す前記シンボル画像を前記表示部に表示させる、
請求項8に記載のプログラム。 - 前記表示制御部は、ユーザが前記シンボル画像を選択したことに応じて、前記複数の角度範囲内に含まれる前記被写体情報の内容を示すリストを前記表示部に表示させる、
請求項8又は9に記載のプログラム。 - 前記判定部は、前記撮影位置と前記第1特徴情報に対応する前記第1被写体との距離、又は前記撮影位置と前記第2特徴情報に対応する前記第2被写体との距離が小さければ小さいほど、前記第1被写体又は前記第2被写体が前記撮像画像に含まれる蓋然性の算出精度を低くする、
請求項1から10のいずれか一項に記載のプログラム。 - 前記データ取得部は、前記撮影位置の後方の所定の位置から前方で撮影された画像に基づいて生成された前記第1特徴情報を取得する、
請求項1から11のいずれか一項に記載のプログラム。 - 前記判定部は、同一の前記第1特徴情報に対応する被写体が前記撮像画像の複数の位置に検出された場合、前記第1特徴情報に関連付けられた向きに最も近い領域にある被写体が前記第1被写体であると判定する、
請求項1から12のいずれか一項に記載のプログラム。 - 画像を撮影して撮像画像を生成する画像生成部と、
前記画像の撮影位置を特定する位置特定部と、
前記撮影位置から所定の範囲内の位置で撮影された第1被写体の特徴を示す第1特徴情報、及び前記撮影位置から所定の範囲内の位置で撮影された第2被写体の特徴を示す第2特徴情報を含む組合せ認識条件データを取得するデータ取得部と、
前記第1特徴情報に基づいて前記撮像画像に前記第1被写体が含まれている蓋然性が単体認識閾値以上である場合、及び前記撮像画像に前記第1被写体が含まれている蓋然性が前記単体認識閾値よりも小さい組合せ認識閾値以上、前記単体認識閾値未満であり、かつ前記第2特徴情報に基づいて前記撮像画像に前記第2被写体が含まれていると判定した場合に、前記撮像画像に前記第1被写体が含まれていると判定する判定部と、
前記判定部が、前記撮像画像に前記第2被写体が含まれていると判定した場合に、前記第1被写体に対応する被写体情報を、前記撮像画像に重ねて表示部に表示させる表示制御部と、
を有する情報端末。 - 画像を撮影して撮像画像を生成するステップと、
前記画像の撮影位置を特定するステップと、
前記撮影位置から所定の範囲内の位置で撮影された第1被写体の特徴を示す第1特徴情報、及び前記撮影位置から所定の範囲内の位置で撮影された第2被写体の特徴を示す第2特徴情報を含む組合せ認識条件データを取得するステップと、
前記第1特徴情報に基づいて前記撮像画像に前記第1被写体が含まれている蓋然性が単体認識閾値以上である場合、及び前記撮像画像に前記第1被写体が含まれている蓋然性が前記単体認識閾値よりも小さい組合せ認識閾値以上、前記単体認識閾値未満であり、かつ前記第2特徴情報に基づいて前記撮像画像に前記第2被写体が含まれていると判定した場合に、前記撮像画像に前記第1被写体が含まれていると判定するステップと、
前記撮像画像に前記第2被写体が含まれていると判定した場合に、前記第1被写体に対応する被写体情報を、前記撮像画像に重ねて表示部に表示させるステップと、
を有する情報表示方法。 - 画像を表示する情報端末と、前記情報端末と通信可能な管理装置と、を備える情報表示システムであって、
前記情報端末は、
画像を撮影して撮像画像を生成する画像生成部と、
前記画像の撮影位置を特定する位置特定部と、
を有し、
前記管理装置は、
位置に関連付けて、第1被写体の特徴を示す第1特徴情報、及び第2被写体の特徴を示す第2特徴情報を含む複数の組合せ認識条件データを記憶する記憶部と、
前記情報端末から前記撮影位置を取得する撮影位置取得部と、
前記記憶部が記憶する前記複数の組合せ認識条件データから、前記撮影位置取得部が取得した前記撮影位置から所定の範囲内の位置で撮影された前記第1被写体及び前記第2被写体にそれぞれ対応する前記第1特徴情報及び前記第2特徴情報を含む組合せ認識条件データを抽出する抽出部と、
を有し、
前記情報端末又は前記管理装置は、
前記第1特徴情報に基づいて前記撮像画像に前記第1被写体が含まれている蓋然性が単体認識閾値以上である場合、及び前記撮像画像に前記第1被写体が含まれている蓋然性が前記単体認識閾値よりも小さい組合せ認識閾値以上、前記単体認識閾値未満であり、かつ前記第2特徴情報に基づいて前記撮像画像に前記第2被写体が含まれていると判定した場合に、前記撮像画像に前記第1被写体が含まれていると判定する判定部と、
前記判定部が、前記撮像画像に前記第2被写体が含まれていると判定した場合に、前記第1被写体に対応する被写体情報を、前記撮像画像に重ねて表示部に表示させる表示制御部と、
を有する情報表示システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017047253A JP6909022B2 (ja) | 2017-03-13 | 2017-03-13 | プログラム、情報端末、情報表示方法及び情報表示システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017047253A JP6909022B2 (ja) | 2017-03-13 | 2017-03-13 | プログラム、情報端末、情報表示方法及び情報表示システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018151829A true JP2018151829A (ja) | 2018-09-27 |
JP6909022B2 JP6909022B2 (ja) | 2021-07-28 |
Family
ID=63681729
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017047253A Active JP6909022B2 (ja) | 2017-03-13 | 2017-03-13 | プログラム、情報端末、情報表示方法及び情報表示システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6909022B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11373351B2 (en) | 2019-03-26 | 2022-06-28 | Fujifilm Corporation | Image processing method, program, and image processing system |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006209511A (ja) * | 2005-01-28 | 2006-08-10 | Aisin Aw Co Ltd | 画像認識装置及び画像認識方法、並びにそれを用いた位置特定装置、車両制御装置及びナビゲーション装置 |
JP2014099055A (ja) * | 2012-11-14 | 2014-05-29 | Canon Inc | 検出装置、検出方法、及びプログラム |
JP2014206878A (ja) * | 2013-04-12 | 2014-10-30 | オムロン株式会社 | 画像認識装置、画像認識プログラム、記録媒体、および画像認識方法 |
-
2017
- 2017-03-13 JP JP2017047253A patent/JP6909022B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006209511A (ja) * | 2005-01-28 | 2006-08-10 | Aisin Aw Co Ltd | 画像認識装置及び画像認識方法、並びにそれを用いた位置特定装置、車両制御装置及びナビゲーション装置 |
JP2014099055A (ja) * | 2012-11-14 | 2014-05-29 | Canon Inc | 検出装置、検出方法、及びプログラム |
JP2014206878A (ja) * | 2013-04-12 | 2014-10-30 | オムロン株式会社 | 画像認識装置、画像認識プログラム、記録媒体、および画像認識方法 |
Non-Patent Citations (1)
Title |
---|
鎌原 淳三、他2名: "位置座標付き画像データベースによる類似度とGPS座標を用いた撮影対象建物特定手法", 電子情報通信学会技術研究報告, vol. 106, no. 100, JPN6020044151, 9 June 2006 (2006-06-09), JP, pages 13 - 18, ISSN: 0004389787 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11373351B2 (en) | 2019-03-26 | 2022-06-28 | Fujifilm Corporation | Image processing method, program, and image processing system |
Also Published As
Publication number | Publication date |
---|---|
JP6909022B2 (ja) | 2021-07-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210181902A1 (en) | Digital image tagging apparatuses, systems, and methods | |
US10339383B2 (en) | Method and system for providing augmented reality contents by using user editing image | |
EP2698980B1 (en) | Camera device and methods for aiding users in use thereof | |
CN108875460B (zh) | 增强现实处理方法及装置、显示终端及计算机存储介质 | |
US20180188033A1 (en) | Navigation method and device | |
US9159169B2 (en) | Image display apparatus, imaging apparatus, image display method, control method for imaging apparatus, and program | |
KR101790655B1 (ko) | 버스 정보 조회, 피드백 방법, 모바일 단말 및 서버 | |
KR101239284B1 (ko) | 증강현실 컨텐츠를 통해 타겟장치를 제어하는 제어단말기 및 서버 | |
JP2015090553A (ja) | 端末装置、付加情報管理装置、および付加情報管理方法 | |
CN109040960A (zh) | 一种实现位置服务的方法和装置 | |
EP3110131A1 (en) | Method for processing image and electronic apparatus therefor | |
US20150269782A1 (en) | Augmented reality display system, augmented reality information generating apparatus, augmented reality display apparatus, and server | |
KR20140102181A (ko) | 정보 처리 장치, 정보 처리 방법 및 프로그램 | |
CN111897507A (zh) | 投屏方法、装置、第二终端和存储介质 | |
JP2014139732A (ja) | 画像処理装置、画像処理方法、プログラムおよび表示装置 | |
US8996577B2 (en) | Object information provision device, object information provision system, terminal, and object information provision method | |
JP6171705B2 (ja) | 地図情報取得プログラム、地図情報取得方法及び地図情報取得装置 | |
JPWO2011096343A1 (ja) | 撮影位置提案システム、撮影位置提案装置、撮影位置提案方法、及び撮影位置提案用プログラム | |
WO2012144124A1 (ja) | 撮影画像処理システム、撮影画像処理方法、携帯端末及び情報処理装置 | |
JP6909022B2 (ja) | プログラム、情報端末、情報表示方法及び情報表示システム | |
JP6001057B2 (ja) | 情報生成及び処理のための方法、装置、及び端末機器 | |
KR20110094970A (ko) | 멀티미디어 컨텐츠의 태그 관리 방법 및 장치 | |
JP2017046324A (ja) | ユーザ端末、物体認識サーバ、通知方法及びユーザ端末用プログラム | |
CN110858198A (zh) | 撷取联系人信息的系统、非暂时性计算机可读介质和方法 | |
KR101625751B1 (ko) | 바운더리 코드를 포함하는 ar 마커 장치, 이를 이용한 ar 제공 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170613 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20170613 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191101 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210615 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210702 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6909022 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |