JP2014132488A5 - - Google Patents

Download PDF

Info

Publication number
JP2014132488A5
JP2014132488A5 JP2014041047A JP2014041047A JP2014132488A5 JP 2014132488 A5 JP2014132488 A5 JP 2014132488A5 JP 2014041047 A JP2014041047 A JP 2014041047A JP 2014041047 A JP2014041047 A JP 2014041047A JP 2014132488 A5 JP2014132488 A5 JP 2014132488A5
Authority
JP
Japan
Prior art keywords
image
key frame
feature
captured
reconstruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014041047A
Other languages
English (en)
Other versions
JP2014132488A (ja
JP6031464B2 (ja
Filing date
Publication date
Priority claimed from AU2011253973A external-priority patent/AU2011253973B2/en
Application filed filed Critical
Publication of JP2014132488A publication Critical patent/JP2014132488A/ja
Publication of JP2014132488A5 publication Critical patent/JP2014132488A5/ja
Application granted granted Critical
Publication of JP6031464B2 publication Critical patent/JP6031464B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (9)

  1. 撮像装置の位置姿勢を推定するために用いられるキーフレーム画像を選択する方法であって、
    前記撮像装置によって撮像された撮像画像を取得する画像取得ステップと、
    前記撮像画像から、キーフレーム画像の第1の画像特徴に対応する第2の画像特徴を検出する検出ステップと、
    前記キーフレーム画像を撮像した時の前記撮像装置の位置姿勢と前記撮像画像を撮像した時の前記撮像装置の位置姿勢と前記キーフレーム画像中の前記第1の画像特徴の位置前記撮像画像中の前記第2の画像特徴の位置に基づいて、3次元(3D)空間における前記第1の画像特徴及び前記第2の画像特徴に対応する特徴の再構成位置を決定する決定ステップと、
    前記再構成位置及び前記3D空間における前記特徴の所定の位置に基づいて再構成誤差を決定するステップと、
    前記再構成誤差が所定の基準を満たす場合、前記撮像画像を新たにキーフレーム画像として選択するステップと
    を備えることを特徴とする方法。
  2. 前記所定の基準は、拡張現実システムのユーザにより設定される拡張現実システムの精度に応じて動的に調整されることを特徴とする請求項1に記載の方法。
  3. 前記所定の基準は、前記再構成誤差の平均及び分散に応じて動的に調整されることを特徴とする請求項1に記載の方法。
  4. 前記再構成誤差は、拡張現実システムの構成後の座標系において測定されることを特徴とする請求項1に記載の方法。
  5. 1つのシーンについてキーフレーム画像を選択した後に前記シーンから前記特徴を除去するステップを更に備えることを特徴とする請求項1に記載の方法。
  6. 前記撮像装置は、複数のカメラを備えたマルチビューカメラシステムであることを特徴とする請求項1に記載の方法。
  7. 前記再構成誤差が前記所定の基準を満たさない場合、ユーザを移動させるための命令を生成するステップを更に備えることを特徴とする請求項1に記載の方法。
  8. 撮像装置の位置姿勢を推定するために用いられるキーフレーム画像を選択する装置であって、
    前記撮像装置によって撮像された撮像画像を取得する画像取得手段と、
    前記撮像画像から、キーフレーム画像の第1の画像特徴に対応する第2の画像特徴を検出する検出手段と、
    前記キーフレーム画像を撮像した時の前記撮像装置の位置姿勢と前記撮像画像を撮像した時の前記撮像装置の位置姿勢と前記キーフレーム画像中の前記第1の画像特徴の位置前記撮像画像中の前記第2の画像特徴の位置に基づいて、3次元(3D)空間における前記第1の画像特徴及び前記第2の画像特徴に対応する特徴の再構成位置を決定する決定手段と、
    前記再構成位置及び前記3D空間における前記特徴の所定の位置に基づいて再構成誤差を決定する手段と、
    前記再構成誤差が所定の基準を満たす場合、前記撮像画像を新たにキーフレーム画像として選択する手段
    を備えることを特徴とする装置。
  9. コンピュータに請求項1乃至7の何れか1項に記載の各ステップを実行させるためのコンピュータプログラムを格納したコンピュータ読み取り可能な記憶媒体
JP2014041047A 2011-12-12 2014-03-03 並列追跡及びマッピングのためのキーフレーム選択 Active JP6031464B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
AU2011253973 2011-12-12
AU2011253973A AU2011253973B2 (en) 2011-12-12 2011-12-12 Keyframe selection for parallel tracking and mapping

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012269788A Division JP5491611B2 (ja) 2011-12-12 2012-12-10 並列追跡及びマッピングのためのキーフレーム選択

Publications (3)

Publication Number Publication Date
JP2014132488A JP2014132488A (ja) 2014-07-17
JP2014132488A5 true JP2014132488A5 (ja) 2016-01-28
JP6031464B2 JP6031464B2 (ja) 2016-11-24

Family

ID=48572011

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2012269788A Active JP5491611B2 (ja) 2011-12-12 2012-12-10 並列追跡及びマッピングのためのキーフレーム選択
JP2014041047A Active JP6031464B2 (ja) 2011-12-12 2014-03-03 並列追跡及びマッピングのためのキーフレーム選択

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2012269788A Active JP5491611B2 (ja) 2011-12-12 2012-12-10 並列追跡及びマッピングのためのキーフレーム選択

Country Status (3)

Country Link
US (1) US9076059B2 (ja)
JP (2) JP5491611B2 (ja)
AU (1) AU2011253973B2 (ja)

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2836959A2 (en) * 2012-04-13 2015-02-18 Lightcraft Technology, LLC Hybrid precision tracking
US9147251B2 (en) * 2012-08-03 2015-09-29 Flyby Media, Inc. Systems and methods for efficient 3D tracking of weakly textured planar surfaces for augmented reality applications
US11082490B2 (en) 2012-11-28 2021-08-03 Nvidia Corporation Method and apparatus for execution of applications in a cloud system
WO2014085714A1 (en) * 2012-11-28 2014-06-05 Nvidia Corporation Handheld gaming console
US20140270477A1 (en) * 2013-03-14 2014-09-18 Jonathan Coon Systems and methods for displaying a three-dimensional model from a photogrammetric scan
US9384551B2 (en) * 2013-04-08 2016-07-05 Amazon Technologies, Inc. Automatic rectification of stereo imaging cameras
JP6138566B2 (ja) * 2013-04-24 2017-05-31 川崎重工業株式会社 部品取付作業支援システムおよび部品取付方法
JP6144826B2 (ja) 2013-06-11 2017-06-07 クアルコム,インコーポレイテッド データベース作成のための対話型および自動的3dオブジェクト走査方法
CN104423950B (zh) * 2013-09-02 2021-05-18 联想(北京)有限公司 一种信息处理的方法及电子设备
US10096114B1 (en) * 2013-11-27 2018-10-09 Google Llc Determining multiple camera positions from multiple videos
KR20150116260A (ko) * 2014-04-07 2015-10-15 삼성전자주식회사 마커 추적 방법 및 그 전자 장치
JP2016058043A (ja) * 2014-09-12 2016-04-21 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
US9943374B2 (en) 2014-09-16 2018-04-17 X-Nav Technologies, LLC Image guidance system for detecting and tracking an image pose
US9607388B2 (en) * 2014-09-19 2017-03-28 Qualcomm Incorporated System and method of pose estimation
US11205305B2 (en) 2014-09-22 2021-12-21 Samsung Electronics Company, Ltd. Presentation of three-dimensional video
US10750153B2 (en) * 2014-09-22 2020-08-18 Samsung Electronics Company, Ltd. Camera system for three-dimensional video
WO2016048960A1 (en) * 2014-09-22 2016-03-31 Huntington Ingalls Incorporated Three dimensional targeting structure for augmented reality applications
JP6435750B2 (ja) * 2014-09-26 2018-12-12 富士通株式会社 3次元座標算出装置、3次元座標算出方法および3次元座標算出プログラム
US20170305438A1 (en) * 2014-10-27 2017-10-26 Fts Computertechnik Gmbh Computer vision monitoring for a computer vision system
JP6507730B2 (ja) 2015-03-10 2019-05-08 富士通株式会社 座標変換パラメータ決定装置、座標変換パラメータ決定方法及び座標変換パラメータ決定用コンピュータプログラム
WO2016155767A1 (en) * 2015-03-30 2016-10-06 Siemens Aktiengesellschaft Method and system for determining an orientation of a mobile device
US10373366B2 (en) 2015-05-14 2019-08-06 Qualcomm Incorporated Three-dimensional model generation
US9911242B2 (en) 2015-05-14 2018-03-06 Qualcomm Incorporated Three-dimensional model generation
US10304203B2 (en) 2015-05-14 2019-05-28 Qualcomm Incorporated Three-dimensional model generation
US10878278B1 (en) * 2015-05-16 2020-12-29 Sturfee, Inc. Geo-localization based on remotely sensed visual features
JP6701694B2 (ja) * 2015-12-02 2020-05-27 セイコーエプソン株式会社 頭部装着型表示装置およびコンピュータープログラム
EP3159829A1 (en) * 2015-10-21 2017-04-26 Thomson Licensing Methods of detecting and managing a fiducial marker displayed on a display device
JP6575325B2 (ja) * 2015-11-27 2019-09-18 富士通株式会社 カメラ位置姿勢推定装置、カメラ位置姿勢推定方法およびカメラ位置姿勢推定プログラム
US20180046874A1 (en) * 2016-08-10 2018-02-15 Usens, Inc. System and method for marker based tracking
CN107798704B (zh) * 2016-08-30 2021-04-30 成都理想境界科技有限公司 一种用于增强现实的实时图像叠加方法及装置
US10109062B1 (en) * 2016-09-30 2018-10-23 Lucasfilm Entertainment Company Ltd. Non-coherent point tracking and solving for ambiguous images and geometry
US10341568B2 (en) 2016-10-10 2019-07-02 Qualcomm Incorporated User interface to assist three dimensional scanning of objects
KR101892740B1 (ko) * 2016-10-11 2018-08-28 한국전자통신연구원 통합 이미지 마커 생성 방법 및 그 방법을 수행하는 시스템
CN106682595A (zh) * 2016-12-14 2017-05-17 南方科技大学 一种图像内容标注方法和装置
US10489651B2 (en) * 2017-04-14 2019-11-26 Microsoft Technology Licensing, Llc Identifying a position of a marker in an environment
GB2562488A (en) * 2017-05-16 2018-11-21 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
US10777018B2 (en) * 2017-05-17 2020-09-15 Bespoke, Inc. Systems and methods for determining the scale of human anatomy from images
US11049218B2 (en) 2017-08-11 2021-06-29 Samsung Electronics Company, Ltd. Seamless image stitching
US10638109B2 (en) * 2017-09-15 2020-04-28 Elphel, Inc. Method for the FPGA-based long range multi-view stereo with differential image rectification
US10902680B2 (en) * 2018-04-03 2021-01-26 Saeed Eslami Augmented reality application system and method
CN108734736B (zh) * 2018-05-22 2021-10-26 腾讯科技(深圳)有限公司 相机姿态追踪方法、装置、设备及存储介质
CN110555358B (zh) * 2018-06-01 2023-09-12 苹果公司 用于检测和识别ar/vr场景中的特征部的方法和设备
JP2021184115A (ja) * 2018-08-28 2021-12-02 ソニーグループ株式会社 情報処理装置、情報処理方法、及び、プログラム
US11543655B1 (en) * 2018-09-07 2023-01-03 Apple Inc. Rendering for multi-focus display systems
CN111179162B (zh) * 2018-11-12 2023-10-24 北京魔门塔科技有限公司 一种特殊环境下的定位初始化方法及车载终端
CN113330275B (zh) 2019-01-23 2023-05-09 株式会社索思未来 相机信息计算装置、系统、相机信息计算方法及记录介质
CN110866977B (zh) * 2019-10-31 2023-06-16 Oppo广东移动通信有限公司 增强现实处理方法及装置、系统、存储介质和电子设备
EP3985484A1 (en) * 2020-10-19 2022-04-20 ameria AG Calibration method, calibration device and control method for touchless gesture control
CN112802104B (zh) * 2021-02-04 2022-09-16 华南理工大学 一种基于rgb-d相机的回环检测方法
WO2023277903A1 (en) * 2021-06-30 2023-01-05 Innopeak Technology, Inc. Dual camera based monocular slam architecture
CN113569756B (zh) * 2021-07-29 2023-06-09 西安交通大学 异常行为检测与定位方法、系统、终端设备及可读存储介质
JP2023022517A (ja) * 2021-08-03 2023-02-15 株式会社東芝 計測システム及び計測プログラム
US11367204B1 (en) * 2021-12-16 2022-06-21 Ecotron LLC Multi-sensor spatial data auto-synchronization system and method
CN114565882B (zh) * 2022-04-29 2022-07-19 深圳航天信息有限公司 基于多视频摄像头智能联动的异常行为分析方法及装置
CN117274318B (zh) * 2023-11-20 2024-03-15 广州市大湾区虚拟现实研究院 一种高鲁棒性的反向光学大范围跟踪方法和系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6970591B1 (en) 1999-11-25 2005-11-29 Canon Kabushiki Kaisha Image processing apparatus
US6728582B1 (en) * 2000-12-15 2004-04-27 Cognex Corporation System and method for determining the position of an object in three dimensions using a machine vision system with two cameras
US7209779B2 (en) * 2001-07-17 2007-04-24 Accuimage Diagnostics Corp. Methods and software for retrospectively gating a set of images
JP4976756B2 (ja) * 2006-06-23 2012-07-18 キヤノン株式会社 情報処理方法および装置
JP4757142B2 (ja) * 2006-08-10 2011-08-24 キヤノン株式会社 撮影環境校正方法及び情報処理装置
JP4956375B2 (ja) * 2007-10-30 2012-06-20 キヤノン株式会社 画像処理装置、画像処理方法
KR101188588B1 (ko) 2008-03-27 2012-10-08 주식회사 만도 모노큘러 모션 스테레오 기반의 주차 공간 검출 장치 및방법
EP2157545A1 (en) * 2008-08-19 2010-02-24 Sony Computer Entertainment Europe Limited Entertainment device, system and method
US8204340B2 (en) * 2008-09-29 2012-06-19 Two Pic Mc Llc Methods and apparatus for dot marker matching
JP2011008687A (ja) * 2009-06-29 2011-01-13 Sharp Corp 画像処理装置
JP5424405B2 (ja) * 2010-01-14 2014-02-26 学校法人立命館 複合現実感技術による画像生成方法及び画像生成システム

Similar Documents

Publication Publication Date Title
JP2014132488A5 (ja)
JP2018049591A5 (ja) 画像処理装置、画像処理方法及びプログラム
JP2017212593A5 (ja) 情報処理装置、画像処理システム、情報処理装置の制御方法、仮想視点画像の生成方法、及び、プログラム
JP2015090298A5 (ja)
JP2017045283A5 (ja)
EP3654286A3 (en) Image capturing apparatus, monitoring system, image processing apparatus, image capturing method, and non-transitory computer readable recording medium
JP2008224626A5 (ja)
JP2010128820A5 (ja)
JP2017518658A5 (ja)
JP2014056466A5 (ja)
JP2018092580A5 (ja) 画像処理装置および画像処理方法、プログラム
JP2016522923A5 (ja)
JP2014127151A5 (ja)
JP2014063475A5 (ja)
JP2017500766A5 (ja)
JP2014119442A5 (ja)
JP2013254480A5 (ja)
JP2016097657A5 (ja)
JP2015068858A5 (ja)
JP2015103104A5 (ja)
JP2018180654A5 (ja) 情報処理装置、情報処理方法及びプログラム
JP2014211404A5 (ja)
JP2010063067A5 (ja)
JP2017208606A5 (ja)
JP2018195084A5 (ja)