JP2016071496A - 情報端末装置、方法及びプログラム - Google Patents
情報端末装置、方法及びプログラム Download PDFInfo
- Publication number
- JP2016071496A JP2016071496A JP2014198392A JP2014198392A JP2016071496A JP 2016071496 A JP2016071496 A JP 2016071496A JP 2014198392 A JP2014198392 A JP 2014198392A JP 2014198392 A JP2014198392 A JP 2014198392A JP 2016071496 A JP2016071496 A JP 2016071496A
- Authority
- JP
- Japan
- Prior art keywords
- information
- orientation
- related information
- image
- captured image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Processing Or Creating Images (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】撮像部1は、撮像を行って撮像画像を取得する。推定部2は、前記撮像画像より所定の撮像対象を特定すると共に、当該撮像対象と撮像部1との相対的な位置姿勢を推定する。記憶部3は、撮像対象ごとにその位置姿勢の各々に応じて予め描画された関連情報を記憶する。制御部4は、前記特定された撮像対象及び前記推定された位置姿勢に応じた関連情報を記憶部3から読み出して提示情報を生成する。提示部5は、前記生成された提示情報を提示する。
【選択図】図1
Description
非特許文献3 「H.Bay, T.Tuytelaars, and L.V.Gool, SURF: Speed Up Robust Features, Proc. of Int. Conf. of ECCV, (2006)」
非特許文献4 「Ethan Rublee, Vincent Rabaud, Kurt Konolige, Gary R. Bradski: ORB: An efficient alternative to SIFT or SURF. ICCV 2011: 2564-2571.」
Claims (11)
- 撮像を行って撮像画像を取得する撮像部と、
前記撮像画像より所定の撮像対象を特定すると共に、当該撮像対象と前記撮像部との相対的な位置姿勢を推定する推定部と、
撮像対象ごとにその位置姿勢の各々に応じて予め描画された関連情報を記憶する記憶部と、
前記特定された撮像対象及び前記推定された位置姿勢に応じた関連情報を前記記憶部から読み出して提示情報を生成する制御部と、
前記生成された提示情報を提示する提示部と、を備えることを特徴とする情報端末装置。 - 前記制御部は、前記推定部が前記撮像画像より所定の撮像対象を特定できた場合には、前記読み出した関連情報を前記取得した撮像画像に重畳することによって前記提示情報を生成し、前記推定部が前記撮像画像より所定の撮像対象を特定できなかった場合には、前記取得した撮像画像を前記提示情報とすることを特徴とする請求項1に記載の情報端末装置。
- 前記記憶部は、撮像対象ごとにその位置姿勢に応じた所定の拡張現実表示を構成するような情報として関連情報を記憶することを特徴とする請求項1または2に記載の情報端末装置。
- 前記記憶部は、撮像画像の全範囲に渡る実写画像として構成された画像を含んで、撮像対象ごとにその位置姿勢に応じた所定の拡張現実表示を構成するような情報として、前記関連情報を記憶することを特徴とする請求項1ないし3のいずれかに記載の情報端末装置。
- 前記記憶部は、前記実写画像を、撮像画像に対して所定の重畳表示を加えた画像として記憶し、当該実写画像に紐付けて当該所定の重畳表示を省略した際の撮像画像に対応する背景画像を記憶し、
前記制御部は、前記撮像画像の全範囲に渡る実写画像として構成された画像としての関連情報を前記記憶部より読み出した際には、前記取得された撮像画像と、前記読み出した関連情報に前記紐付く背景画像と、の差分をなす領域を外部領域として求め、当該外部領域を前記読み出した関連情報に重畳することで、前記提示情報を生成することを特徴とする請求項4に記載の情報端末装置。 - 前記記憶部は、撮像画像の一部分の領域においてコンピュータグラフィックスにより生成された画像を含んで、撮像対象ごとにその位置姿勢に応じた所定の拡張現実表示を構成するような情報として、前記関連情報を記憶することを特徴とする請求項1ないし5のいずれかに記載の情報端末装置。
- 前記記憶部は、撮像対象ごとにその離散的な位置姿勢の各々に応じて予め描画された関連情報を記憶し、
前記制御部は、前記特定された撮像対象に応じた関連情報を、前記推定された位置姿勢が近いと判定される上位の所定数について前記記憶部より読み出し、当該上位の所定数の関連情報に対してモーフィングを施して生成される関連情報により、前記提示情報を生成することを特徴とする請求項1ないし6のいずれかに記載の情報端末装置。 - 前記撮像部は時間軸上の所定サンプリングレートで連続的に撮像を行って撮像画像を取得し、
前記制御部は、各時刻において、当該現時刻において前記特定された撮像対象及び前記推定された位置姿勢と、所定範囲の直近の過去時刻において前記読み出された関連情報に対する位置姿勢と、に応じた関連情報を前記記憶部から読み出して提示情報を生成することを特徴とする請求項1ないし7のいずれかに記載の情報端末装置。 - 前記推定部は、所定の撮像対象につきあらかじめ抽出された画像特徴量と、前記撮像画像より抽出した画像特徴量と、をマッチングすることにより、前記撮像画像より所定の撮像対象を特定すると共に、当該撮像対象と前記撮像部との相対的な位置姿勢を推定し、
前記記憶部は、撮像対象ごとにその位置姿勢の各々に応じて予め描画された関連情報を、当該位置姿勢における撮像対象の画像より予め抽出される画像特徴量と紐付けて記憶し、
前記制御部は、前記推定された位置姿勢に応じた関連情報を前記記憶部から読み出すに際して、前記記憶部に紐付けて記憶された画像特徴量の画像座標のうち、前記推定された位置姿勢において前記抽出された画像特徴量の画像座標に一致していると判定されるものに対応する関連情報を読み出すことを特徴とする請求項1ないし8のいずれかに記載の情報端末装置。 - 撮像を行って撮像画像を取得する撮像段階と、
前記撮像画像より所定の撮像対象を特定すると共に、当該撮像対象と前記撮像部との相対的な位置姿勢を推定する推定段階と、
撮像対象ごとにその位置姿勢の各々に応じて予め描画された関連情報を記憶する記憶段階と、
前記特定された撮像対象及び前記推定された位置姿勢に応じた関連情報を前記記憶段階で記憶された関連情報から読み出して提示情報を生成する制御部と、
前記生成された提示情報を提示する提示段階と、を備えることを特徴とする方法。 - コンピュータを請求項1ないし9のいずれかに記載の情報端末装置として機能させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014198392A JP6341540B2 (ja) | 2014-09-29 | 2014-09-29 | 情報端末装置、方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014198392A JP6341540B2 (ja) | 2014-09-29 | 2014-09-29 | 情報端末装置、方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016071496A true JP2016071496A (ja) | 2016-05-09 |
JP6341540B2 JP6341540B2 (ja) | 2018-06-13 |
Family
ID=55866942
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014198392A Active JP6341540B2 (ja) | 2014-09-29 | 2014-09-29 | 情報端末装置、方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6341540B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019043755A1 (ja) * | 2017-08-28 | 2019-03-07 | 三菱電機株式会社 | 拡張現実コンテンツ生成装置および拡張現実コンテンツ生成方法 |
JP2019075018A (ja) * | 2017-10-18 | 2019-05-16 | Kddi株式会社 | 撮影画像からカメラの位置姿勢の類似度を算出する装置、プログラム及び方法 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012175668A (ja) * | 2011-02-24 | 2012-09-10 | Ohbayashi Corp | 画像合成方法 |
-
2014
- 2014-09-29 JP JP2014198392A patent/JP6341540B2/ja active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012175668A (ja) * | 2011-02-24 | 2012-09-10 | Ohbayashi Corp | 画像合成方法 |
Non-Patent Citations (3)
Title |
---|
三箇恵里歌, 外1名: ""バーチャル3Dビュー:3次元復元を行わない物体の全周表示システムの開発"", 情報処理学会 研究報告 コンピュータビジョンとイメージメディア(CVIM), vol. 第2014−CVIM−192巻, 第8号, JPN6018007370, 8 May 2014 (2014-05-08), JP, pages 1 - 7, ISSN: 0003751411 * |
大倉史生, 外2名: ""事前レンダリング画像群を用いた自由視点画像生成に基づく写実的な拡張現実画像合成"", ヒューマンインタフェース学会 研究報告集, vol. 第15巻, 第7号, JPN6018007367, 31 December 2013 (2013-12-31), JP, pages 11 - 16, ISSN: 0003751412 * |
赤熊高行, 外3名: ""事前生成型モバイルAR"", 第18回 日本バーチャルリアリティ学会大会論文集, JPN6018007369, 18 September 2013 (2013-09-18), pages 513 - 516, ISSN: 0003751413 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019043755A1 (ja) * | 2017-08-28 | 2019-03-07 | 三菱電機株式会社 | 拡張現実コンテンツ生成装置および拡張現実コンテンツ生成方法 |
JPWO2019043755A1 (ja) * | 2017-08-28 | 2019-12-19 | 三菱電機株式会社 | 拡張現実コンテンツ生成装置および拡張現実コンテンツ生成方法 |
JP2019075018A (ja) * | 2017-10-18 | 2019-05-16 | Kddi株式会社 | 撮影画像からカメラの位置姿勢の類似度を算出する装置、プログラム及び方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6341540B2 (ja) | 2018-06-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Kawai et al. | Diminished reality based on image inpainting considering background geometry | |
JP6438403B2 (ja) | 結合された深度キューに基づく平面視画像からの深度マップの生成 | |
US8933966B2 (en) | Image processing device, image processing method and program | |
KR102097016B1 (ko) | 동작 분석 장치 및 방법 | |
US20190228263A1 (en) | Training assistance using synthetic images | |
Kawai et al. | Diminished reality considering background structures | |
US20110267344A1 (en) | Method for estimating a pose of an articulated object model | |
CN106981078B (zh) | 视线校正方法、装置、智能会议终端及存储介质 | |
EP3681144B1 (en) | Video processing method and apparatus based on augmented reality, and electronic device | |
CN108958469B (zh) | 一种基于增强现实的在虚拟世界增加超链接的方法 | |
CN103345736A (zh) | 一种虚拟视点绘制方法 | |
US10726612B2 (en) | Method and apparatus for reconstructing three-dimensional model of object | |
JP6420605B2 (ja) | 画像処理装置 | |
WO2023066120A1 (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN111402412A (zh) | 数据采集方法及装置、设备、存储介质 | |
CN105488846A (zh) | 一种显示方法及电子设备 | |
CN111192308B (zh) | 图像处理方法及装置、电子设备和计算机存储介质 | |
CN110310325B (zh) | 一种虚拟测量方法、电子设备及计算机可读存储介质 | |
JP6272071B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6521352B2 (ja) | 情報提示システム及び端末 | |
US10861138B2 (en) | Image processing device, image processing method, and program | |
JP6341540B2 (ja) | 情報端末装置、方法及びプログラム | |
CN110177216B (zh) | 图像处理方法、装置、移动终端以及存储介质 | |
JP6086491B2 (ja) | 画像処理装置およびそのデータベース構築装置 | |
JP6931267B2 (ja) | 原画像を目標画像に基づいて変形した表示画像を生成するプログラム、装置及び方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20160823 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180307 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180423 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180510 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6341540 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |