JP2014132488A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2014132488A5 JP2014132488A5 JP2014041047A JP2014041047A JP2014132488A5 JP 2014132488 A5 JP2014132488 A5 JP 2014132488A5 JP 2014041047 A JP2014041047 A JP 2014041047A JP 2014041047 A JP2014041047 A JP 2014041047A JP 2014132488 A5 JP2014132488 A5 JP 2014132488A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- key frame
- feature
- captured
- reconstruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 claims 11
- 230000000875 corresponding Effects 0.000 claims 4
- 230000003190 augmentative Effects 0.000 claims 3
- 238000004590 computer program Methods 0.000 claims 1
- 238000001514 detection method Methods 0.000 claims 1
Claims (9)
- 撮像装置の位置姿勢を推定するために用いられるキーフレーム画像を選択する方法であって、
前記撮像装置によって撮像された撮像画像を取得する画像取得ステップと、
前記撮像画像から、キーフレーム画像の第1の画像特徴に対応する第2の画像特徴を検出する検出ステップと、
前記キーフレーム画像を撮像した時の前記撮像装置の位置姿勢と前記撮像画像を撮像した時の前記撮像装置の位置姿勢と前記キーフレーム画像中の前記第1の画像特徴の位置と前記撮像画像中の前記第2の画像特徴の位置とに基づいて、3次元(3D)空間における前記第1の画像特徴及び前記第2の画像特徴に対応する特徴の再構成位置を決定する決定ステップと、
前記再構成位置及び前記3D空間における前記特徴の所定の位置に基づいて再構成誤差を決定するステップと、
前記再構成誤差が所定の基準を満たす場合、前記撮像画像を新たにキーフレーム画像として選択するステップと
を備えることを特徴とする方法。 - 前記所定の基準は、拡張現実システムのユーザにより設定される該拡張現実システムの精度に応じて動的に調整されることを特徴とする請求項1に記載の方法。
- 前記所定の基準は、前記再構成誤差の平均及び分散に応じて動的に調整されることを特徴とする請求項1に記載の方法。
- 前記再構成誤差は、拡張現実システムの構成後の座標系において測定されることを特徴とする請求項1に記載の方法。
- 1つのシーンについてキーフレーム画像を選択した後に前記シーンから前記特徴を除去するステップを更に備えることを特徴とする請求項1に記載の方法。
- 前記撮像装置は、複数のカメラを備えたマルチビューカメラシステムであることを特徴とする請求項1に記載の方法。
- 前記再構成誤差が前記所定の基準を満たさない場合、ユーザを移動させるための命令を生成するステップを更に備えることを特徴とする請求項1に記載の方法。
- 撮像装置の位置姿勢を推定するために用いられるキーフレーム画像を選択する装置であって、
前記撮像装置によって撮像された撮像画像を取得する画像取得手段と、
前記撮像画像から、キーフレーム画像の第1の画像特徴に対応する第2の画像特徴を検出する検出手段と、
前記キーフレーム画像を撮像した時の前記撮像装置の位置姿勢と前記撮像画像を撮像した時の前記撮像装置の位置姿勢と前記キーフレーム画像中の前記第1の画像特徴の位置と前記撮像画像中の前記第2の画像特徴の位置とに基づいて、3次元(3D)空間における前記第1の画像特徴及び前記第2の画像特徴に対応する特徴の再構成位置を決定する決定手段と、
前記再構成位置及び前記3D空間における前記特徴の所定の位置に基づいて再構成誤差を決定する手段と、
前記再構成誤差が所定の基準を満たす場合、前記撮像画像を新たにキーフレーム画像として選択する手段と
を備えることを特徴とする装置。 - コンピュータに請求項1乃至7の何れか1項に記載の各ステップを実行させるためのコンピュータプログラムを格納したコンピュータ読み取り可能な記憶媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
AU2011253973 | 2011-12-12 | ||
AU2011253973A AU2011253973B2 (en) | 2011-12-12 | 2011-12-12 | Keyframe selection for parallel tracking and mapping |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012269788A Division JP5491611B2 (ja) | 2011-12-12 | 2012-12-10 | 並列追跡及びマッピングのためのキーフレーム選択 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2014132488A JP2014132488A (ja) | 2014-07-17 |
JP2014132488A5 true JP2014132488A5 (ja) | 2016-01-28 |
JP6031464B2 JP6031464B2 (ja) | 2016-11-24 |
Family
ID=48572011
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012269788A Active JP5491611B2 (ja) | 2011-12-12 | 2012-12-10 | 並列追跡及びマッピングのためのキーフレーム選択 |
JP2014041047A Active JP6031464B2 (ja) | 2011-12-12 | 2014-03-03 | 並列追跡及びマッピングのためのキーフレーム選択 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012269788A Active JP5491611B2 (ja) | 2011-12-12 | 2012-12-10 | 並列追跡及びマッピングのためのキーフレーム選択 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9076059B2 (ja) |
JP (2) | JP5491611B2 (ja) |
AU (1) | AU2011253973B2 (ja) |
Families Citing this family (55)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2836959A2 (en) * | 2012-04-13 | 2015-02-18 | Lightcraft Technology, LLC | Hybrid precision tracking |
US9147251B2 (en) * | 2012-08-03 | 2015-09-29 | Flyby Media, Inc. | Systems and methods for efficient 3D tracking of weakly textured planar surfaces for augmented reality applications |
US11082490B2 (en) | 2012-11-28 | 2021-08-03 | Nvidia Corporation | Method and apparatus for execution of applications in a cloud system |
WO2014085714A1 (en) * | 2012-11-28 | 2014-06-05 | Nvidia Corporation | Handheld gaming console |
US20140270477A1 (en) * | 2013-03-14 | 2014-09-18 | Jonathan Coon | Systems and methods for displaying a three-dimensional model from a photogrammetric scan |
US9384551B2 (en) * | 2013-04-08 | 2016-07-05 | Amazon Technologies, Inc. | Automatic rectification of stereo imaging cameras |
JP6138566B2 (ja) * | 2013-04-24 | 2017-05-31 | 川崎重工業株式会社 | 部品取付作業支援システムおよび部品取付方法 |
JP6144826B2 (ja) | 2013-06-11 | 2017-06-07 | クアルコム,インコーポレイテッド | データベース作成のための対話型および自動的3dオブジェクト走査方法 |
CN104423950B (zh) * | 2013-09-02 | 2021-05-18 | 联想(北京)有限公司 | 一种信息处理的方法及电子设备 |
US10096114B1 (en) * | 2013-11-27 | 2018-10-09 | Google Llc | Determining multiple camera positions from multiple videos |
KR20150116260A (ko) * | 2014-04-07 | 2015-10-15 | 삼성전자주식회사 | 마커 추적 방법 및 그 전자 장치 |
JP2016058043A (ja) * | 2014-09-12 | 2016-04-21 | キヤノン株式会社 | 情報処理装置、情報処理方法、プログラム |
US9943374B2 (en) | 2014-09-16 | 2018-04-17 | X-Nav Technologies, LLC | Image guidance system for detecting and tracking an image pose |
US9607388B2 (en) * | 2014-09-19 | 2017-03-28 | Qualcomm Incorporated | System and method of pose estimation |
US11205305B2 (en) | 2014-09-22 | 2021-12-21 | Samsung Electronics Company, Ltd. | Presentation of three-dimensional video |
US10750153B2 (en) * | 2014-09-22 | 2020-08-18 | Samsung Electronics Company, Ltd. | Camera system for three-dimensional video |
WO2016048960A1 (en) * | 2014-09-22 | 2016-03-31 | Huntington Ingalls Incorporated | Three dimensional targeting structure for augmented reality applications |
JP6435750B2 (ja) * | 2014-09-26 | 2018-12-12 | 富士通株式会社 | 3次元座標算出装置、3次元座標算出方法および3次元座標算出プログラム |
US20170305438A1 (en) * | 2014-10-27 | 2017-10-26 | Fts Computertechnik Gmbh | Computer vision monitoring for a computer vision system |
JP6507730B2 (ja) | 2015-03-10 | 2019-05-08 | 富士通株式会社 | 座標変換パラメータ決定装置、座標変換パラメータ決定方法及び座標変換パラメータ決定用コンピュータプログラム |
WO2016155767A1 (en) * | 2015-03-30 | 2016-10-06 | Siemens Aktiengesellschaft | Method and system for determining an orientation of a mobile device |
US10373366B2 (en) | 2015-05-14 | 2019-08-06 | Qualcomm Incorporated | Three-dimensional model generation |
US9911242B2 (en) | 2015-05-14 | 2018-03-06 | Qualcomm Incorporated | Three-dimensional model generation |
US10304203B2 (en) | 2015-05-14 | 2019-05-28 | Qualcomm Incorporated | Three-dimensional model generation |
US10878278B1 (en) * | 2015-05-16 | 2020-12-29 | Sturfee, Inc. | Geo-localization based on remotely sensed visual features |
JP6701694B2 (ja) * | 2015-12-02 | 2020-05-27 | セイコーエプソン株式会社 | 頭部装着型表示装置およびコンピュータープログラム |
EP3159829A1 (en) * | 2015-10-21 | 2017-04-26 | Thomson Licensing | Methods of detecting and managing a fiducial marker displayed on a display device |
JP6575325B2 (ja) * | 2015-11-27 | 2019-09-18 | 富士通株式会社 | カメラ位置姿勢推定装置、カメラ位置姿勢推定方法およびカメラ位置姿勢推定プログラム |
US20180046874A1 (en) * | 2016-08-10 | 2018-02-15 | Usens, Inc. | System and method for marker based tracking |
CN107798704B (zh) * | 2016-08-30 | 2021-04-30 | 成都理想境界科技有限公司 | 一种用于增强现实的实时图像叠加方法及装置 |
US10109062B1 (en) * | 2016-09-30 | 2018-10-23 | Lucasfilm Entertainment Company Ltd. | Non-coherent point tracking and solving for ambiguous images and geometry |
US10341568B2 (en) | 2016-10-10 | 2019-07-02 | Qualcomm Incorporated | User interface to assist three dimensional scanning of objects |
KR101892740B1 (ko) * | 2016-10-11 | 2018-08-28 | 한국전자통신연구원 | 통합 이미지 마커 생성 방법 및 그 방법을 수행하는 시스템 |
CN106682595A (zh) * | 2016-12-14 | 2017-05-17 | 南方科技大学 | 一种图像内容标注方法和装置 |
US10489651B2 (en) * | 2017-04-14 | 2019-11-26 | Microsoft Technology Licensing, Llc | Identifying a position of a marker in an environment |
GB2562488A (en) * | 2017-05-16 | 2018-11-21 | Nokia Technologies Oy | An apparatus, a method and a computer program for video coding and decoding |
US10777018B2 (en) * | 2017-05-17 | 2020-09-15 | Bespoke, Inc. | Systems and methods for determining the scale of human anatomy from images |
US11049218B2 (en) | 2017-08-11 | 2021-06-29 | Samsung Electronics Company, Ltd. | Seamless image stitching |
US10638109B2 (en) * | 2017-09-15 | 2020-04-28 | Elphel, Inc. | Method for the FPGA-based long range multi-view stereo with differential image rectification |
US10902680B2 (en) * | 2018-04-03 | 2021-01-26 | Saeed Eslami | Augmented reality application system and method |
CN108734736B (zh) * | 2018-05-22 | 2021-10-26 | 腾讯科技(深圳)有限公司 | 相机姿态追踪方法、装置、设备及存储介质 |
CN110555358B (zh) * | 2018-06-01 | 2023-09-12 | 苹果公司 | 用于检测和识别ar/vr场景中的特征部的方法和设备 |
JP2021184115A (ja) * | 2018-08-28 | 2021-12-02 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
US11543655B1 (en) * | 2018-09-07 | 2023-01-03 | Apple Inc. | Rendering for multi-focus display systems |
CN111179162B (zh) * | 2018-11-12 | 2023-10-24 | 北京魔门塔科技有限公司 | 一种特殊环境下的定位初始化方法及车载终端 |
CN113330275B (zh) | 2019-01-23 | 2023-05-09 | 株式会社索思未来 | 相机信息计算装置、系统、相机信息计算方法及记录介质 |
CN110866977B (zh) * | 2019-10-31 | 2023-06-16 | Oppo广东移动通信有限公司 | 增强现实处理方法及装置、系统、存储介质和电子设备 |
EP3985484A1 (en) * | 2020-10-19 | 2022-04-20 | ameria AG | Calibration method, calibration device and control method for touchless gesture control |
CN112802104B (zh) * | 2021-02-04 | 2022-09-16 | 华南理工大学 | 一种基于rgb-d相机的回环检测方法 |
WO2023277903A1 (en) * | 2021-06-30 | 2023-01-05 | Innopeak Technology, Inc. | Dual camera based monocular slam architecture |
CN113569756B (zh) * | 2021-07-29 | 2023-06-09 | 西安交通大学 | 异常行为检测与定位方法、系统、终端设备及可读存储介质 |
JP2023022517A (ja) * | 2021-08-03 | 2023-02-15 | 株式会社東芝 | 計測システム及び計測プログラム |
US11367204B1 (en) * | 2021-12-16 | 2022-06-21 | Ecotron LLC | Multi-sensor spatial data auto-synchronization system and method |
CN114565882B (zh) * | 2022-04-29 | 2022-07-19 | 深圳航天信息有限公司 | 基于多视频摄像头智能联动的异常行为分析方法及装置 |
CN117274318B (zh) * | 2023-11-20 | 2024-03-15 | 广州市大湾区虚拟现实研究院 | 一种高鲁棒性的反向光学大范围跟踪方法和系统 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6970591B1 (en) | 1999-11-25 | 2005-11-29 | Canon Kabushiki Kaisha | Image processing apparatus |
US6728582B1 (en) * | 2000-12-15 | 2004-04-27 | Cognex Corporation | System and method for determining the position of an object in three dimensions using a machine vision system with two cameras |
US7209779B2 (en) * | 2001-07-17 | 2007-04-24 | Accuimage Diagnostics Corp. | Methods and software for retrospectively gating a set of images |
JP4976756B2 (ja) * | 2006-06-23 | 2012-07-18 | キヤノン株式会社 | 情報処理方法および装置 |
JP4757142B2 (ja) * | 2006-08-10 | 2011-08-24 | キヤノン株式会社 | 撮影環境校正方法及び情報処理装置 |
JP4956375B2 (ja) * | 2007-10-30 | 2012-06-20 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
KR101188588B1 (ko) | 2008-03-27 | 2012-10-08 | 주식회사 만도 | 모노큘러 모션 스테레오 기반의 주차 공간 검출 장치 및방법 |
EP2157545A1 (en) * | 2008-08-19 | 2010-02-24 | Sony Computer Entertainment Europe Limited | Entertainment device, system and method |
US8204340B2 (en) * | 2008-09-29 | 2012-06-19 | Two Pic Mc Llc | Methods and apparatus for dot marker matching |
JP2011008687A (ja) * | 2009-06-29 | 2011-01-13 | Sharp Corp | 画像処理装置 |
JP5424405B2 (ja) * | 2010-01-14 | 2014-02-26 | 学校法人立命館 | 複合現実感技術による画像生成方法及び画像生成システム |
-
2011
- 2011-12-12 AU AU2011253973A patent/AU2011253973B2/en not_active Ceased
-
2012
- 2012-12-05 US US13/706,217 patent/US9076059B2/en active Active
- 2012-12-10 JP JP2012269788A patent/JP5491611B2/ja active Active
-
2014
- 2014-03-03 JP JP2014041047A patent/JP6031464B2/ja active Active
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2014132488A5 (ja) | ||
JP2018049591A5 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2017212593A5 (ja) | 情報処理装置、画像処理システム、情報処理装置の制御方法、仮想視点画像の生成方法、及び、プログラム | |
JP2015090298A5 (ja) | ||
JP2017045283A5 (ja) | ||
EP3654286A3 (en) | Image capturing apparatus, monitoring system, image processing apparatus, image capturing method, and non-transitory computer readable recording medium | |
JP2008224626A5 (ja) | ||
JP2010128820A5 (ja) | ||
JP2017518658A5 (ja) | ||
JP2014056466A5 (ja) | ||
JP2018092580A5 (ja) | 画像処理装置および画像処理方法、プログラム | |
JP2016522923A5 (ja) | ||
JP2014127151A5 (ja) | ||
JP2014063475A5 (ja) | ||
JP2017500766A5 (ja) | ||
JP2014119442A5 (ja) | ||
JP2013254480A5 (ja) | ||
JP2016097657A5 (ja) | ||
JP2015068858A5 (ja) | ||
JP2015103104A5 (ja) | ||
JP2018180654A5 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2014211404A5 (ja) | ||
JP2010063067A5 (ja) | ||
JP2017208606A5 (ja) | ||
JP2018195084A5 (ja) |