JP2014123376A5 - - Google Patents

Download PDF

Info

Publication number
JP2014123376A5
JP2014123376A5 JP2013264146A JP2013264146A JP2014123376A5 JP 2014123376 A5 JP2014123376 A5 JP 2014123376A5 JP 2013264146 A JP2013264146 A JP 2013264146A JP 2013264146 A JP2013264146 A JP 2013264146A JP 2014123376 A5 JP2014123376 A5 JP 2014123376A5
Authority
JP
Japan
Prior art keywords
virtual
computer
real
virtual object
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013264146A
Other languages
English (en)
Other versions
JP2014123376A (ja
JP6335505B2 (ja
Filing date
Publication date
Priority claimed from US13/725,994 external-priority patent/US9058693B2/en
Application filed filed Critical
Publication of JP2014123376A publication Critical patent/JP2014123376A/ja
Publication of JP2014123376A5 publication Critical patent/JP2014123376A5/ja
Application granted granted Critical
Publication of JP6335505B2 publication Critical patent/JP6335505B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (15)

  1. 現実場面の仮想モデルの配置補正に使用するためのコンピュータ実施方法であって、
    仮想オブジェクトを含む前記仮想モデルを生成するステップと、
    前記現実場面内の現実のオブジェクトの少なくとも1つのデジタル画像を取得するステップであって、前記現実のオブジェクトは、前記仮想オブジェクトに対応する、ステップと、
    前記仮想オブジェクト上の少なくとも1つの所定の点と前記現実のオブジェクト上の少なくとも1つの対応する点との間の画像ベースの位置の相違を計算するステップと、
    前記画像の位置の相違に基づいて、前記仮想オブジェクトの位置および向きの少なくとも1つを調整するステップと、
    前記仮想オブジェクトの補正した配置に関して前記仮想モデルを調整するステップと
    を含むことを特徴とするコンピュータ実施方法。
  2. 前記仮想モデルを生成する前記ステップは、前記仮想オブジェクト上で複数の特定可能な点に基づいて前記仮想オブジェクトのための配置変換を計算するステップを含むことを特徴とする請求項1に記載のコンピュータ実施方法。
  3. 前記配置変換を計算する前記ステップは、前記複数の特定可能な点の少なくとも一部のユーザ選択を受信するステップを含むことを特徴とする請求項2に記載のコンピュータ実施方法。
  4. 前記仮想モデルを生成する前記ステップは、
    前記仮想オブジェクトおよび対応する基準オブジェクトを特定するステップと、
    前記仮想オブジェクト上の前記少なくとも1つの所定の点、および前記基準オブジェクト上の対応する点を特定するステップと
    を含むことを特徴とする請求項1に記載のコンピュータ実施方法。
  5. 前記基準オブジェクト上の前記所定の点と、対応する現実の基準オブジェクト上の点とを実質上一致させるように、仮想ビューのプログラムの調整をさらに含むことを特徴とする請求項4に記載のコンピュータ実施方法。
  6. 仮想ビューのプログラムの調整と、
    前記取得したデジタル画像の各々に関して、前記仮想オブジェクト上の前記少なくとも1つの所定の点と前記現実のオブジェクト上の前記少なくとも1つの対応する点との間の前記画像ベースの位置の相違を計算するステップと
    をさらに含むことを特徴とする請求項4に記載のコンピュータ実施方法。
  7. 前記仮想オブジェクトの配置変換を繰り返すことによって、前記画像の位置の相違を最小化するステップをさらに含むことを特徴とする請求項6に記載のコンピュータ実施方法。
  8. 現実場面の仮想モデルの配置補正に使用するためのコンピュータであって、
    前記仮想モデルおよび前記仮想モデルの仮想オブジェクトを記憶するように構成されたメモリ領域と、
    前記メモリ領域に連結されたプロセッサであって、
    前記仮想オブジェクトを含む前記仮想モデルを生成し、
    前記現実場面内の現実のオブジェクトの少なくとも1つのデジタル画像を取得し、前記現実のオブジェクトは、前記仮想オブジェクトに対応し、
    前記仮想オブジェクト上の少なくとも1つの所定の点と前記現実のオブジェクト上の少なくとも1つの対応する点との間の画像ベースの位置の相違を計算し、
    前記画像の位置の相違に基づいて、前記仮想オブジェクトの位置および向きの少なくとも1つを調整し、
    前記仮想オブジェクトの補正した配置に関して前記仮想モデルを調整する
    ように構成されたプロセッサと
    を備えたことを特徴とするコンピュータ。
  9. 前記プロセッサは、前記仮想オブジェクト上の複数の特定可能な点に基づいて前記仮想オブジェクトの配置変換を計算するようにさらに構成されたことを特徴とする請求項8に記載のコンピュータ。
  10. 前記プロセッサは、前記複数の特定可能な点の少なくとも一部のユーザ選択を受信するようにさらに構成されたことを特徴とする請求項9に記載のコンピュータ。
  11. 前記プロセッサは、
    前記仮想オブジェクトおよび対応する基準オブジェクトを特定し、
    前記仮想オブジェクト上の前記少なくとも1つの所定の点および前記基準オブジェクト上の対応する点を特定する
    ようにさらに構成されたことを特徴とする請求項8に記載のコンピュータ。
  12. 前記プロセッサは、前記基準オブジェクト上の前記所定の点と、対応する現実の基準オブジェクト上の点とを実質上一致させるように、仮想ビューをプログラムで調整するようにさらに構成されたことを特徴とする請求項11に記載のコンピュータ。
  13. 前記プロセッサは、
    前記基準オブジェクト上の前記所定の点と、対応する現実の基準オブジェクト上の点とを実質上一致させるように仮想ビューをプログラムで調整し、
    前記取得したデジタル画像の各々に関して、前記仮想オブジェクト上の前記少なくとも1つの所定の点と前記現実のオブジェクト上の前記少なくとも1つの対応する点との間の前記画像ベースの位置の相違を計算する
    ようにさらに構成されたことを特徴とする請求項11に記載のコンピュータ。
  14. 前記プロセッサは、前記仮想オブジェクトの配置変換を繰り返すことによって前記画像の位置の相違を最小化するようにさらに構成されたことを特徴とする請求項13に記載のコンピュータ。
  15. 請求項1から7のいずれか一項に記載の方法をコンピュータに実行させるコンピュータプログラム。
JP2013264146A 2012-12-21 2013-12-20 仮想オブジェクトの配置補正 Active JP6335505B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/725,994 US9058693B2 (en) 2012-12-21 2012-12-21 Location correction of virtual objects
US13/725,994 2012-12-21

Publications (3)

Publication Number Publication Date
JP2014123376A JP2014123376A (ja) 2014-07-03
JP2014123376A5 true JP2014123376A5 (ja) 2017-01-26
JP6335505B2 JP6335505B2 (ja) 2018-05-30

Family

ID=49943113

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013264146A Active JP6335505B2 (ja) 2012-12-21 2013-12-20 仮想オブジェクトの配置補正

Country Status (5)

Country Link
US (1) US9058693B2 (ja)
EP (1) EP2747034B1 (ja)
JP (1) JP6335505B2 (ja)
KR (1) KR20140081729A (ja)
CN (1) CN103886124A (ja)

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9671566B2 (en) 2012-06-11 2017-06-06 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
CA2817497C (en) 2013-01-31 2021-05-25 Dirtt Environmental Solutions, Ltd. Method and system for efficient modeling of specular reflection
JP6138566B2 (ja) * 2013-04-24 2017-05-31 川崎重工業株式会社 部品取付作業支援システムおよび部品取付方法
WO2014193415A1 (en) 2013-05-31 2014-12-04 Dirtt Environmental Solutions Inc. Associating computer-executable objects with three-dimensional spaces within an architectural design environment
US20160117419A1 (en) * 2013-05-31 2016-04-28 Dirtt Environmental Solutions, Ltd. Automatically incorporating third party features into a computer design schematic
US9952042B2 (en) 2013-07-12 2018-04-24 Magic Leap, Inc. Method and system for identifying a user location
WO2015006784A2 (en) 2013-07-12 2015-01-15 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9256072B2 (en) * 2013-10-02 2016-02-09 Philip Scott Lyren Wearable electronic glasses that detect movement of a real object copies movement of a virtual object
GB2583848B (en) * 2014-05-21 2021-03-24 Tangible Play Inc Virtualization of tangible interface objects
EP3152373A4 (en) 2014-06-09 2018-05-02 Dirtt Environmental Solutions Inc. Associating computer-executable objects with timber frames within an architectural design environment
CN104143212A (zh) * 2014-07-02 2014-11-12 惠州Tcl移动通信有限公司 基于穿戴设备的增强现实方法及系统
US10311638B2 (en) 2014-07-25 2019-06-04 Microsoft Technology Licensing, Llc Anti-trip when immersed in a virtual reality environment
US9865089B2 (en) 2014-07-25 2018-01-09 Microsoft Technology Licensing, Llc Virtual reality environment with real world objects
US10416760B2 (en) 2014-07-25 2019-09-17 Microsoft Technology Licensing, Llc Gaze-based object placement within a virtual reality environment
US9858720B2 (en) 2014-07-25 2018-01-02 Microsoft Technology Licensing, Llc Three-dimensional mixed-reality viewport
US9904055B2 (en) 2014-07-25 2018-02-27 Microsoft Technology Licensing, Llc Smart placement of virtual objects to stay in the field of view of a head mounted display
US10451875B2 (en) 2014-07-25 2019-10-22 Microsoft Technology Licensing, Llc Smart transparency for virtual objects
US9766460B2 (en) 2014-07-25 2017-09-19 Microsoft Technology Licensing, Llc Ground plane adjustment in a virtual reality environment
KR102358548B1 (ko) * 2014-10-15 2022-02-04 삼성전자주식회사 디바이스를 이용한 화면 처리 방법 및 장치
JP6317854B2 (ja) * 2015-03-30 2018-04-25 株式会社カプコン 仮想三次元空間生成方法、映像システム、その制御方法およびコンピュータ装置での読み取りが可能な記録媒体
US9713871B2 (en) 2015-04-27 2017-07-25 Microsoft Technology Licensing, Llc Enhanced configuration and control of robots
US10007413B2 (en) 2015-04-27 2018-06-26 Microsoft Technology Licensing, Llc Mixed environment display of attached control elements
KR101835434B1 (ko) * 2015-07-08 2018-03-09 고려대학교 산학협력단 투영 이미지 생성 방법 및 그 장치, 이미지 픽셀과 깊이값간의 매핑 방법
PL3131064T3 (pl) * 2015-08-13 2018-03-30 Nokia Technologies Oy Wyszukiwanie zawartości obrazu
WO2017039348A1 (en) * 2015-09-01 2017-03-09 Samsung Electronics Co., Ltd. Image capturing apparatus and operating method thereof
EP3335070B1 (en) * 2015-09-30 2020-11-25 Sony Interactive Entertainment Inc. Methods for optimizing positioning of content on a screen of a head mounted display
CA3015164A1 (en) * 2016-02-18 2017-08-24 Edx Technologies, Inc. Systems and methods for augmented reality representations of networks
US10628537B2 (en) * 2016-04-12 2020-04-21 Dassault Systemes Simulia Corp. Simulation augmented reality system for emergent behavior
US11062383B2 (en) 2016-05-10 2021-07-13 Lowe's Companies, Inc. Systems and methods for displaying a simulated room and portions thereof
US10607405B2 (en) * 2016-05-27 2020-03-31 Rakuten, Inc. 3D model generating system, 3D model generating method, and program
US20170351415A1 (en) * 2016-06-06 2017-12-07 Jonathan K. Cheng System and interfaces for an interactive system
US10599879B2 (en) * 2016-06-17 2020-03-24 Dassault Systemes Simulia Corp. Optimal pressure-projection method for incompressible transient and steady-state navier-stokes equations
US10380762B2 (en) * 2016-10-07 2019-08-13 Vangogh Imaging, Inc. Real-time remote collaboration and virtual presence using simultaneous localization and mapping to construct a 3D model and update a scene based on sparse data
JP6866616B2 (ja) * 2016-11-17 2021-04-28 富士通株式会社 重畳画像生成プログラム、重畳画像生成方法、および情報処理装置
EP3549108A1 (en) * 2016-12-02 2019-10-09 Koninklijke KPN N.V. Determining size of virtual object
CN106582012B (zh) * 2016-12-07 2018-12-11 腾讯科技(深圳)有限公司 一种vr场景下的攀爬操作处理方法和装置
US10777018B2 (en) * 2017-05-17 2020-09-15 Bespoke, Inc. Systems and methods for determining the scale of human anatomy from images
FR3067842B1 (fr) * 2017-06-19 2020-09-25 SOCIéTé BIC Procede d'application de texture en realite augmentee, systeme et kits correspondants
JP7003617B2 (ja) * 2017-12-12 2022-01-20 富士通株式会社 推定装置、推定方法、及び推定プログラム
US10192115B1 (en) 2017-12-13 2019-01-29 Lowe's Companies, Inc. Virtualizing objects using object models and object position data
JP2019185475A (ja) * 2018-04-12 2019-10-24 富士通株式会社 特定プログラム、特定方法及び情報処理装置
JP7063165B2 (ja) * 2018-07-26 2022-05-09 富士通株式会社 計測装置、計測方法及び計測プログラム
JP7098473B2 (ja) * 2018-08-06 2022-07-11 東芝プラントシステム株式会社 画像処理装置、及び画像処理方法
CN110874868A (zh) * 2018-09-03 2020-03-10 广东虚拟现实科技有限公司 数据处理方法、装置、终端设备及存储介质
CN109274886B (zh) * 2018-09-18 2020-09-25 成都泰盟软件有限公司 一种基于OpenVR的混合现实视频录制方法
CN109814434B (zh) * 2018-12-20 2020-02-21 北京华航唯实机器人科技股份有限公司 控制程序的校准方法及装置
CN109801341B (zh) * 2019-01-30 2020-11-03 北京经纬恒润科技有限公司 一种标定靶的位置校验方法及装置
CN111626803A (zh) * 2019-02-28 2020-09-04 北京京东尚科信息技术有限公司 一种物品虚拟化定制方法、装置以及其存储介质
JP7245713B2 (ja) * 2019-05-24 2023-03-24 鹿島建設株式会社 画像表示装置
CN110427227B (zh) * 2019-06-28 2023-01-06 广东虚拟现实科技有限公司 虚拟场景的生成方法、装置、电子设备及存储介质
USD907032S1 (en) 2019-07-07 2021-01-05 Tangible Play, Inc. Virtualization device
US20210006730A1 (en) 2019-07-07 2021-01-07 Tangible Play, Inc. Computing device
KR102259509B1 (ko) * 2019-08-22 2021-06-01 동의대학교 산학협력단 포토 스캐닝 기반의 3d 모델링 방법
US11113528B2 (en) * 2019-09-26 2021-09-07 Vgis Inc. System and method for validating geospatial data collection with mediated reality
CN112153319B (zh) * 2020-09-02 2023-02-24 芋头科技(杭州)有限公司 基于视频通信技术的ar信息显示方法和装置
CN112714337A (zh) * 2020-12-22 2021-04-27 北京百度网讯科技有限公司 视频处理方法、装置、电子设备和存储介质
FR3118252B1 (fr) * 2020-12-22 2023-07-07 Fond B Com Procédé de construction d’un marqueur tridimensionnel et marqueur tridimensionnel ainsi obtenu
KR20220137428A (ko) * 2021-04-02 2022-10-12 삼성전자주식회사 전자 장치 및 그 동작 방법
CN113362476B (zh) * 2021-04-26 2023-07-18 福建数博讯信息科技有限公司 基于计算机图形学的落地式脚手架的校正方法及装置
US20240338897A1 (en) 2021-06-30 2024-10-10 Sony Group Corporation Information processing device, information processing method, and program
US20230057822A1 (en) * 2021-08-17 2023-02-23 Clo Virtual Fashion Inc. Generating enhanced exploded view for design object
WO2023095937A1 (ko) * 2021-11-24 2023-06-01 심용수 도면의 오차 파악 방법 및 그 장치
CN114385002B (zh) * 2021-12-07 2023-05-12 达闼机器人股份有限公司 智能设备控制方法、装置、服务器和存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4115117B2 (ja) * 2001-10-31 2008-07-09 キヤノン株式会社 情報処理装置および方法
JP2004126870A (ja) * 2002-10-01 2004-04-22 Canon Inc 複合現実感提示装置、システムおよびそれらの方法
US7369101B2 (en) * 2003-06-12 2008-05-06 Siemens Medical Solutions Usa, Inc. Calibrating real and virtual views
JP4356983B2 (ja) * 2004-02-10 2009-11-04 キヤノン株式会社 画像処理方法、画像処理装置
CA2556082A1 (en) * 2004-03-12 2005-09-29 Bracco Imaging S.P.A. Accuracy evaluation of video-based augmented reality enhanced surgical navigation systems
US20080259073A1 (en) * 2004-09-23 2008-10-23 Conversion Works, Inc. System and method for processing video images
WO2007011306A2 (en) * 2005-07-20 2007-01-25 Bracco Imaging S.P.A. A method of and apparatus for mapping a virtual model of an object to the object
US20070236514A1 (en) * 2006-03-29 2007-10-11 Bracco Imaging Spa Methods and Apparatuses for Stereoscopic Image Guided Surgical Navigation
DE102007059478B4 (de) * 2007-12-11 2014-06-26 Kuka Laboratories Gmbh Verfahren und System zur Ausrichtung eines virtuellen Modells an einem realen Objekt
US20110190774A1 (en) * 2009-11-18 2011-08-04 Julian Nikolchev Methods and apparatus for performing an arthroscopic procedure using surgical navigation
US20130063560A1 (en) * 2011-09-12 2013-03-14 Palo Alto Research Center Incorporated Combined stereo camera and stereo display interaction
US9508146B2 (en) * 2012-10-31 2016-11-29 The Boeing Company Automated frame of reference calibration for augmented reality

Similar Documents

Publication Publication Date Title
JP2014123376A5 (ja)
EP2747034A3 (en) Location correction of virtual objects
JP2014225843A5 (ja)
JP2016522923A5 (ja)
JP2014513824A5 (ja)
JP2014056466A5 (ja)
JP2005319207A5 (ja)
EP2921991A3 (en) Image correction apparatus and image correction method
JP2015130972A5 (ja)
JP2010079453A5 (ja)
JP2016076093A5 (ja)
JP2015122614A5 (ja)
JP2015221089A5 (ja)
JP2013213769A5 (ja)
JP2017011431A5 (ja)
JP2013192804A5 (ja)
EP2688040A3 (en) 3D registration of tomographic models using particularly chosen points
JP2010079907A5 (ja)
JP2019020333A5 (ja)
JP2011141600A5 (ja)
JP2013517837A5 (ja)
PL411827A1 (pl) System do estymacji rozmiarów obiektu i sposób estymacji rozmiarów obiektu z wykorzystaniem modeli trójwymiarowych
JP2016095250A5 (ja)
JP2014153627A5 (ja)
EP2921994A3 (en) Alignment apparatus, alignment method, and alignment computer program