JP2006072903A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2006072903A5 JP2006072903A5 JP2004258405A JP2004258405A JP2006072903A5 JP 2006072903 A5 JP2006072903 A5 JP 2006072903A5 JP 2004258405 A JP2004258405 A JP 2004258405A JP 2004258405 A JP2004258405 A JP 2004258405A JP 2006072903 A5 JP2006072903 A5 JP 2006072903A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- computer graphics
- measurement range
- orientation
- orientation sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Claims (10)
- 実写画像にコンピュータグラフィクス画像を位置合わせして合成する画像合成方法において、
位置姿勢センサの計測範囲を表す３次元コンピュータグラフィクスモデルを設定する設定工程と、
前記位置姿勢センサの位置情報を取得するセンサ位置情報取得工程と、
前記位置姿勢センサの位置情報と、前記３次元コンピュータグラフィクスモデルとを用い、前記位置姿勢センサの計測範囲を表すコンピュータグラフィックス画像を生成するＣＧ画像生成工程と、
前記実写画像と前記コンピュータグラフィクス画像とを合成する画像合成工程とを有することを特徴とする画像合成方法。 - 前記センサ位置情報取得工程が、前記実写画像に含まれる、前記位置姿勢センサに取り付けられたマーカの画像と、予め記憶された前記マーカの位置情報とを用いて前記センサの位置情報を取得することを特徴とする請求項１記載の画像合成方法。
- 前記センサ位置情報取得工程は、
前記実写画像からマーカを検出し、
前記検出されたマーカに基づき、前記マーカが定義されているマーカ座標系と前記実写画像が定義されるカメラ座標系との位置関係に応じた変換条件を作成し、
前記ＣＧ画像生成工程は、
前記変換条件に基づき、前記３次元コンピュータグラフィックスモデルから前記コンピュータグラフィックス画像を生成することを特徴とする請求項１記載の画像合成方法。 - 所定の計測範囲を有する位置姿勢センサによって測定した位置姿勢情報を用い、実写画像にコンピュータグラフィクス画像を位置合わせして合成する画像合成方法において、
前記所定の計測範囲を表す３次元コンピュータグラフィクスモデルを設定する設定工程と、
前記位置姿勢センサにより、前記実写画像を撮像するカメラの位置姿勢情報を取得するカメラ位置姿勢情報取得工程と、
前記カメラ位置姿勢情報と、前記３次元コンピュータグラフィクスモデルとを用い、前記所定の計測範囲を表すコンピュータグラフィックス画像を生成するＣＧ画像生成工程と、
前記実写画像と前記コンピュータグラフィクス画像とを合成する画像合成工程とを有することを特徴とする画像合成方法。 - 観察者が装着する頭部装着型表示装置に設けられたカメラで撮影した実写画像に、予め用意した仮想物体の３次元コンピュータグラフィクスモデルと前記カメラの位置姿勢情報とを用いて生成した前記仮想物体の画像を合成し、合成画像を前記頭部装着型表示装置に表示する画像合成方法において、
前記観察者が存在する空間中に配置された位置姿勢センサの計測範囲を表す３次元コンピュータグラフィクスモデルを設定する設定工程と、
前記計測範囲を前記仮想物体の画像として生成する画像生成工程を有することを特徴とする画像合成方法。 - 実写画像にコンピュータグラフィクス画像を位置合わせして合成する画像合成装置において、
位置姿勢センサの計測範囲を表す３次元コンピュータグラフィクスモデルを設定する手段と、
前記位置姿勢センサの位置情報を取得するセンサ位置情報取得手段と、
前記位置姿勢センサの位置情報と、前記３次元コンピュータグラフィクスモデルとを用い、前記位置姿勢センサの計測範囲を表すコンピュータグラフィックス画像を生成するＣＧ画像生成手段と、
前記実写画像と前記コンピュータグラフィクス画像とを合成する画像合成手段とを有することを特徴とする画像合成装置。 - 所定の計測範囲を有する位置姿勢センサによって測定した位置姿勢情報を用い、実写画像にコンピュータグラフィクス画像を位置合わせして合成する画像合成装置において、
前記所定の計測範囲を表す３次元コンピュータグラフィクスモデルを設定する手段と、
前記位置姿勢センサにより、前記実写画像を撮像するカメラの位置姿勢情報を取得するカメラ位置姿勢情報取得手段と、
前記カメラ位置姿勢情報と、前記３次元コンピュータグラフィクスモデルとを用い、前記所定の計測範囲を表すコンピュータグラフィックス画像を生成するＣＧ画像生成手段と、
前記実写画像と前記コンピュータグラフィクス画像とを合成する画像合成手段とを有することを特徴とする画像合成装置。 - 観察者が装着する頭部装着型表示装置に設けられたカメラで撮影した実写画像に、予め用意した仮想物体の３次元コンピュータグラフィクスモデルと前記カメラの位置姿勢情報とを用いて生成した前記仮想物体の画像を合成し、合成画像を前記頭部装着型表示装置に表示する画像合成装置において、
前記観察者が存在する空間中に配置された位置姿勢センサの計測範囲を表す３次元コンピュータグラフィクスモデルを設定する設定手段と、
前記計測範囲を前記仮想物体の画像として生成する画像生成手段を有することを特徴とする画像合成装置。 - 請求項１乃至請求項５のいずれか１項に記載の画像合成方法の各工程をコンピュータに実行させるためのプログラム。
- 請求項９記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004258405A JP4434890B2 (ja) | 2004-09-06 | 2004-09-06 | 画像合成方法及び装置 |
| US11/217,469 US7928977B2 (en) | 2004-09-06 | 2005-09-02 | Image compositing method and apparatus for superimposing a computer graphics image on an actually-sensed image |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004258405A JP4434890B2 (ja) | 2004-09-06 | 2004-09-06 | 画像合成方法及び装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2006072903A JP2006072903A (ja) | 2006-03-16 |
| JP2006072903A5 true JP2006072903A5 (ja) | 2007-10-18 |
| JP4434890B2 JP4434890B2 (ja) | 2010-03-17 |
Family
ID=35995730
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004258405A Active JP4434890B2 (ja) | 2004-09-06 | 2004-09-06 | 画像合成方法及び装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US7928977B2 (ja) |
| JP (1) | JP4434890B2 (ja) |
Families Citing this family (58)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004265193A (ja) * | 2003-03-03 | 2004-09-24 | Canon Inc | 情報処理方法、情報処理装置、サーバ装置の制御方法、サーバ装置 |
| US7912317B2 (en) * | 2005-10-29 | 2011-03-22 | Apple Inc. | Estimating and removing lens distortion from scenes |
| DE102005061952B4 (de) * | 2005-12-23 | 2008-09-11 | Metaio Gmbh | Verfahren und System zur Bestimmung einer Ungenauigkeitsinformation in einem Augmented Reality System |
| US9250703B2 (en) | 2006-03-06 | 2016-02-02 | Sony Computer Entertainment Inc. | Interface with gaze detection and voice input |
| US8730156B2 (en) * | 2010-03-05 | 2014-05-20 | Sony Computer Entertainment America Llc | Maintaining multiple views on a shared stable virtual space |
| JP4834606B2 (ja) * | 2007-05-16 | 2011-12-14 | キヤノン株式会社 | 画像処理方法及び画像処理装置 |
| US8189864B2 (en) * | 2007-08-29 | 2012-05-29 | Casio Computer Co., Ltd. | Composite image generating apparatus, composite image generating method, and storage medium |
| JP2009080514A (ja) * | 2007-09-25 | 2009-04-16 | Mitsubishi Electric Corp | センサ配置設計支援システム |
| JP4950834B2 (ja) * | 2007-10-19 | 2012-06-13 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
| WO2010003410A1 (en) * | 2008-07-08 | 2010-01-14 | It-University Of Copenhagen | Eye gaze tracking |
| US8330771B2 (en) * | 2008-09-10 | 2012-12-11 | Kabushiki Kaisha Toshiba | Projection display device and control method thereof |
| US8433128B2 (en) * | 2008-11-04 | 2013-04-30 | Omron Corporation | Method of creating three-dimensional model and object recognizing device |
| JP5310130B2 (ja) * | 2009-03-11 | 2013-10-09 | オムロン株式会社 | ３次元視覚センサによる認識結果の表示方法および３次元視覚センサ |
| JP5245937B2 (ja) * | 2009-03-12 | 2013-07-24 | オムロン株式会社 | ３次元計測処理のパラメータの導出方法および３次元視覚センサ |
| JP5714232B2 (ja) * | 2009-03-12 | 2015-05-07 | オムロン株式会社 | キャリブレーション装置および３次元計測のためのパラメータの精度の確認支援方法 |
| JP5245938B2 (ja) | 2009-03-12 | 2013-07-24 | オムロン株式会社 | ３次元認識結果の表示方法および３次元視覚センサ |
| JP5316118B2 (ja) | 2009-03-12 | 2013-10-16 | オムロン株式会社 | ３次元視覚センサ |
| JP2010210585A (ja) * | 2009-03-12 | 2010-09-24 | Omron Corp | ３次元視覚センサにおけるモデル表示方法および３次元視覚センサ |
| JP5282614B2 (ja) * | 2009-03-13 | 2013-09-04 | オムロン株式会社 | 視覚認識処理用のモデルデータの登録方法および視覚センサ |
| JP5158006B2 (ja) * | 2009-04-23 | 2013-03-06 | ソニー株式会社 | 情報処理装置、および情報処理方法、並びにプログラム |
| JP5423406B2 (ja) * | 2010-01-08 | 2014-02-19 | ソニー株式会社 | 情報処理装置、情報処理システム及び情報処理方法 |
| KR101171660B1 (ko) * | 2010-03-01 | 2012-08-09 | 이문기 | 증강현실의 포인팅 장치 |
| JP2011203446A (ja) * | 2010-03-25 | 2011-10-13 | Fujifilm Corp | ヘッドマウントディスプレイ装置 |
| KR101335391B1 (ko) * | 2010-04-12 | 2013-12-03 | 한국전자통신연구원 | 영상 합성 장치 및 그 방법 |
| KR101330811B1 (ko) * | 2010-08-25 | 2013-11-18 | 주식회사 팬택 | 인스턴트 마커를 이용한 증강 현실 장치 및 방법 |
| US9507416B2 (en) | 2011-02-22 | 2016-11-29 | Robert Howard Kimball | Providing a corrected view based on the position of a user with respect to a mobile platform |
| US10120438B2 (en) | 2011-05-25 | 2018-11-06 | Sony Interactive Entertainment Inc. | Eye gaze to alter device behavior |
| US8884949B1 (en) | 2011-06-06 | 2014-11-11 | Thibault Lambert | Method and system for real time rendering of objects from a low resolution depth camera |
| US9243890B2 (en) * | 2011-10-25 | 2016-01-26 | Semiconductor Components Industries, Llc | Video overlay systems |
| JP6121647B2 (ja) | 2011-11-11 | 2017-04-26 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
| EP2800996A4 (en) * | 2012-01-06 | 2015-08-19 | Blackberry Ltd | SYSTEM AND METHOD FOR ORIENTING A CAMERA |
| US9576397B2 (en) * | 2012-09-10 | 2017-02-21 | Blackberry Limited | Reducing latency in an augmented-reality display |
| US8878846B1 (en) * | 2012-10-29 | 2014-11-04 | Google Inc. | Superimposing virtual views of 3D objects with live images |
| JP6036209B2 (ja) * | 2012-11-19 | 2016-11-30 | セイコーエプソン株式会社 | 虚像表示装置 |
| JP5813030B2 (ja) * | 2013-03-22 | 2015-11-17 | キヤノン株式会社 | 複合現実提示システム、仮想現実提示システム |
| JP6138566B2 (ja) * | 2013-04-24 | 2017-05-31 | 川崎重工業株式会社 | 部品取付作業支援システムおよび部品取付方法 |
| GB201310359D0 (en) * | 2013-06-11 | 2013-07-24 | Sony Comp Entertainment Europe | Head-Mountable apparatus and systems |
| JP2015001875A (ja) * | 2013-06-17 | 2015-01-05 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム、印刷媒体及び印刷媒体のセット |
| CN103996215A (zh) * | 2013-11-05 | 2014-08-20 | 深圳市云立方信息科技有限公司 | 一种实现虚拟视图转立体视图的方法及装置 |
| WO2015098807A1 (ja) * | 2013-12-24 | 2015-07-02 | チームラボ株式会社 | 被写体と３次元仮想空間をリアルタイムに合成する撮影システム |
| WO2015111283A1 (ja) * | 2014-01-23 | 2015-07-30 | ソニー株式会社 | 画像表示装置及び画像表示方法 |
| US20150348322A1 (en) * | 2014-06-02 | 2015-12-03 | Dell Products L.P. | Dynamically Composited Information Handling System Augmented Reality at a Primary Display |
| WO2016002656A1 (ja) * | 2014-06-30 | 2016-01-07 | 凸版印刷株式会社 | 視線計測システム、視線計測方法、及びプログラム |
| JP2016058043A (ja) * | 2014-09-12 | 2016-04-21 | キヤノン株式会社 | 情報処理装置、情報処理方法、プログラム |
| US20170061700A1 (en) * | 2015-02-13 | 2017-03-02 | Julian Michael Urbach | Intercommunication between a head mounted display and a real world object |
| CN105303557B (zh) | 2015-09-21 | 2018-05-22 | 深圳先进技术研究院 | 一种可透视型智能眼镜及其透视方法 |
| JP6661980B2 (ja) * | 2015-11-06 | 2020-03-11 | 富士通株式会社 | 重畳表示方法、重畳表示装置、及び重畳表示プログラム |
| JP6917820B2 (ja) * | 2016-08-05 | 2021-08-11 | 株式会社半導体エネルギー研究所 | データ処理システム |
| JP6769859B2 (ja) * | 2016-12-19 | 2020-10-14 | 株式会社日立エルジーデータストレージ | 画像処理装置及び画像処理方法 |
| US20180268614A1 (en) * | 2017-03-16 | 2018-09-20 | General Electric Company | Systems and methods for aligning pmi object on a model |
| US10885711B2 (en) | 2017-05-03 | 2021-01-05 | Microsoft Technology Licensing, Llc | Virtual reality image compositing |
| WO2019059044A1 (ja) * | 2017-09-20 | 2019-03-28 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
| US11232502B2 (en) * | 2017-12-20 | 2022-01-25 | Signify Holding B.V. | Lighting and internet of things design using augmented reality |
| JP7058585B2 (ja) * | 2017-12-25 | 2022-04-22 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
| WO2019130827A1 (ja) * | 2017-12-25 | 2019-07-04 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
| US10949994B1 (en) * | 2018-03-01 | 2021-03-16 | Thomas Byram Scheffler | Dynamic marker device for augmented and mixed reality and method of use |
| US11049330B2 (en) | 2019-06-27 | 2021-06-29 | Facebook Technologies, Llc | Color reference for overlaid images |
| US11508131B1 (en) * | 2019-11-08 | 2022-11-22 | Tanzle, Inc. | Generating composite stereoscopic images |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB2301216A (en) * | 1995-05-25 | 1996-11-27 | Philips Electronics Uk Ltd | Display headset |
| JPH1184307A (ja) | 1997-09-01 | 1999-03-26 | M R Syst Kenkyusho:Kk | 頭部装着型の光学装置 |
| JP3287312B2 (ja) * | 1998-08-13 | 2002-06-04 | 日本電気株式会社 | ポインティング装置 |
| JP3784721B2 (ja) * | 2002-01-10 | 2006-06-14 | 日東電工株式会社 | 半田溶滴吐出装置及び半田溶滴吐出方法 |
| US7034779B2 (en) * | 2002-08-06 | 2006-04-25 | Information Decision Technologeis, Llc | Advanced ruggedized augmented reality instrumented self contained breathing apparatus |
| EP1398601A3 (en) * | 2002-09-13 | 2014-05-07 | Canon Kabushiki Kaisha | Head up display for navigation purposes in a vehicle |
| JP4262011B2 (ja) * | 2003-07-30 | 2009-05-13 | キヤノン株式会社 | 画像提示方法及び装置 |
| JP4227561B2 (ja) * | 2004-06-03 | 2009-02-18 | キヤノン株式会社 | 画像処理方法、画像処理装置 |
-
2004
- 2004-09-06 JP JP2004258405A patent/JP4434890B2/ja active Active
-
2005
- 2005-09-02 US US11/217,469 patent/US7928977B2/en not_active Expired - Fee Related
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2006072903A5 (ja) | ||
| KR102598116B1 (ko) | 증강 현실 데이터를 레코딩하기 위한 기술 | |
| JP4401727B2 (ja) | 画像表示装置及び方法 | |
| JP4677273B2 (ja) | 情報処理方法および情報処理装置 | |
| JP6340017B2 (ja) | 被写体と３次元仮想空間をリアルタイムに合成する撮影システム | |
| JP4933406B2 (ja) | 画像処理装置、画像処理方法 | |
| RU2010138614A (ru) | Визуализация трансляций камер на карте | |
| JP2007219082A5 (ja) | ||
| JP2008293209A5 (ja) | ||
| JP2014515130A5 (ja) | ||
| JP2005107969A5 (ja) | ||
| JP2008277920A5 (ja) | ||
| JP2013179397A5 (ja) | ||
| EP2738743A3 (en) | Generating and reproducing augmented reality contents | |
| WO2009054619A3 (en) | Augmented reality computer device | |
| US20110249095A1 (en) | Image composition apparatus and method thereof | |
| JP2005327204A5 (ja) | ||
| JP2003141569A (ja) | 情報処理方法および映像合成装置 | |
| JP4801783B2 (ja) | 画像処理システム及び画像処理方法 | |
| JP2006252468A (ja) | 画像処理方法、画像処理装置 | |
| JP2017201742A5 (ja) | ||
| JP2006294066A5 (ja) | ||
| JP2007206807A (ja) | 映像合成装置及び映像合成プログラム | |
| CN104700392B (zh) | 虚拟影像定位方法及其装置 | |
| JP4886349B2 (ja) | 模擬視界生成装置 |