JP2005149209A - 複合現実感提示方法、複合現実感提示装置 - Google Patents
複合現実感提示方法、複合現実感提示装置 Download PDFInfo
- Publication number
- JP2005149209A JP2005149209A JP2003386937A JP2003386937A JP2005149209A JP 2005149209 A JP2005149209 A JP 2005149209A JP 2003386937 A JP2003386937 A JP 2003386937A JP 2003386937 A JP2003386937 A JP 2003386937A JP 2005149209 A JP2005149209 A JP 2005149209A
- Authority
- JP
- Japan
- Prior art keywords
- image
- objects
- format
- virtual space
- mixed reality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 96
- 150000001875 compounds Chemical class 0.000 title 1
- 230000000007 visual effect Effects 0.000 claims abstract description 90
- 239000000872 buffer Substances 0.000 claims description 70
- 238000009877 rendering Methods 0.000 claims description 12
- 238000002156 mixing Methods 0.000 claims description 7
- 230000006870 function Effects 0.000 description 18
- 230000003287 optical effect Effects 0.000 description 8
- 238000003384 imaging method Methods 0.000 description 4
- 239000000203 mixture Substances 0.000 description 4
- 238000007796 conventional method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
【解決手段】 同じ描画方法で描画されるオブジェクトの集合を仮想空間を構成する各オブジェクトから特定して、特定した集合に含まれるオブジェクトにより形成される階層構造を生成し(S206)、特定した集合に含まれる各オブジェクトを、この集合に含まれる各オブジェクトに共通の描画方法により、生成した階層構造に従って描画する(S207〜S209)。
【選択図】 図2
Description
仮想空間を構成する各オブジェクトを描画する際の描画方法を示すデータを保持する第1の保持工程と、
前記仮想空間を構成する各オブジェクト間の階層構造を示すデータを保持する第2の保持工程と、
前記第1の保持工程で保持しているデータを参照して、同じ描画方法で描画されるオブジェクトの集合を、前記仮想空間を構成する各オブジェクトから特定する特定工程と、
前記第2の保持工程で保持しているデータを参照して、前記特定工程で特定した集合に含まれるオブジェクトにより形成される階層構造を生成する生成工程と、
前記特定工程で特定した集合に含まれる各オブジェクトを、当該集合に含まれる各オブジェクトに共通の描画方法により、前記生成工程で生成した階層構造に従って描画する描画工程とを備え、
前記生成工程、前記描画工程による処理を、前記特定工程で特定した1つ以上の集合毎に行うことを特徴とする。
仮想空間を構成する各オブジェクトを描画する際の描画方法を示すデータを保持する第1の保持手段と、
前記仮想空間を構成する各オブジェクト間の階層構造を示すデータを保持する第2の保持手段と、
前記第1の保持手段が保持しているデータを参照して、同じ描画方法で描画されるオブジェクトの集合を、前記仮想空間を構成する各オブジェクトから特定する特定手段と、
前記第2の保持手段が保持しているデータを参照して、前記特定手段が特定した集合に含まれるオブジェクトにより形成される階層構造を生成する生成手段と、
前記特定手段が特定した集合に含まれる各オブジェクトを、当該集合に含まれる各オブジェクトに共通の描画方法により、前記生成手段が生成した階層構造に従って描画する描画手段とを備え、
前記生成手段、前記描画手段による処理を、前記特定手段が特定した1つ以上の集合毎に行うことを特徴とする。
図5は、本実施形態に係る複合現実感提示装置として機能するコンピュータの基本構成を示す図である。
上記ステップS207におけるマスクオブジェクトの描画処理において、先にフレームバッファに格納されている画像中の注目画素の値をX、マスクオブジェクトの画像において、この注目画素の位置に対応する位置の画素の値をYとした場合に、Z=X+Yを計算し、フレームバッファにおける上記注目画素の画素値をZに更新する処理を更に行うようにしても良い。
本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体(または記憶媒体)を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記録媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記録媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記録した記録媒体は本発明を構成することになる。
Claims (12)
- 現実空間に重畳するための仮想空間の画像を生成する複合現実感提示方法であって、
仮想空間を構成する各オブジェクトを描画する際の描画方法を示すデータを保持する第1の保持工程と、
前記仮想空間を構成する各オブジェクト間の階層構造を示すデータを保持する第2の保持工程と、
前記第1の保持工程で保持しているデータを参照して、同じ描画方法で描画されるオブジェクトの集合を、前記仮想空間を構成する各オブジェクトから特定する特定工程と、
前記第2の保持工程で保持しているデータを参照して、前記特定工程で特定した集合に含まれるオブジェクトにより形成される階層構造を生成する生成工程と、
前記特定工程で特定した集合に含まれる各オブジェクトを、当該集合に含まれる各オブジェクトに共通の描画方法により、前記生成工程で生成した階層構造に従って描画する描画工程とを備え、
前記生成工程、前記描画工程による処理を、前記特定工程で特定した1つ以上の集合毎に行うことを特徴とする複合現実感提示方法。 - 前記第1の保持工程では、
zバッファにオブジェクトの画像の各画素に対応するz座標値を記録する第1の描画方法、
前記フレームバッファにオブジェクトの画像を描画する際に、当該画像を構成する各画素のz座標値と、zバッファに保持されているデータが示すz座標値とを比較し、より視点位置に近いz座標値を有する画素のみを前記フレームバッファに描画すると共に、当該画素のz座標値をzバッファに記録する第2の描画方法、
前記フレームバッファにオブジェクトの画像を描画する際に、当該画像と先に前記フレームバッファに描画されている画像とのブレンディング処理を行うことで、前記オブジェクトの画像を描画する第3の描画方法
のうち少なくとも1つ以上の描画方法を示すデータが前記仮想空間を構成する各オブジェクトについて保持しており、
前記生成工程では前記第1の保持工程で保持されているデータを参照して、前記仮想空間を構成する各オブジェクトの描画方法が前記第1乃至3の描画方法の何れであるかを判断することにより、同じ描画方法で描画されるオブジェクトの集合を特定することを特徴とする請求項1に記載の複合現実感提示方法。 - 更に、前記仮想空間を構成する各オブジェクトの内、1つ以上のオブジェクトの描画方法を示すデータを変更する変更工程を備えることを特徴とする請求項1に記載の複合現実感提示方法。
- 現実空間に重畳するための仮想空間の画像を生成する複合現実感提示装置であって、
仮想空間を構成する各オブジェクトを描画する際の描画方法を示すデータを保持する第1の保持手段と、
前記仮想空間を構成する各オブジェクト間の階層構造を示すデータを保持する第2の保持手段と、
前記第1の保持手段が保持しているデータを参照して、同じ描画方法で描画されるオブジェクトの集合を、前記仮想空間を構成する各オブジェクトから特定する特定手段と、
前記第2の保持手段が保持しているデータを参照して、前記特定手段が特定した集合に含まれるオブジェクトにより形成される階層構造を生成する生成手段と、
前記特定手段が特定した集合に含まれる各オブジェクトを、当該集合に含まれる各オブジェクトに共通の描画方法により、前記生成手段が生成した階層構造に従って描画する描画手段とを備え、
前記生成手段、前記描画手段による処理を、前記特定手段が特定した1つ以上の集合毎に行うことを特徴とする複合現実感提示装置。 - コンピュータに請求項1乃至3の何れか1項に記載の複合現実感提示方法を実行させることを特徴とするプログラム。
- 請求項5に記載のプログラムを格納することを特徴とする、コンピュータ読み取り可能な記憶媒体。
- 現実世界の映像を撮影し取り込む実写画像入力ステップと、
仮想世界を構成するために必要なCGオブジェクトデータおよびシーンデータを保持する仮想空間情報記憶ステップと、
CGオブジェクトを描画する際の視覚表現形式に関する情報を保持する視覚表現形式記憶ステップと、
利用者がCGオブジェクトに対して視覚表現形式を任意に変更させるための視覚表現形式設定ステップと、
仮想空間情報記憶ステップ、視覚表現形式記憶ステップ、視覚表現形式設定ステップの情報を元に、視覚表現に応じてCGオブジェクトの描画手段を適切に選択するシーングラフマルチパス描画ステップと、
実写画像入力部から入力された現実世界の画像を描画する実写画像描画ステップと、
マスク形式のCGオブジェクトを描画するマスクオブジェクト描画ステップと、
ノーマル形式のCGオブジェクトを描画するノーマルオブジェクト描画ステップと、
半透過形式のCGオブジェクトを描画する半透過オブジェクト描画ステップと、
利用者に現実世界画像と仮想世界画像とを合成した画像を提示する画像表示ステップと
を備えることを特徴とする複合現実感方法。 - 前記視覚表現形式記憶ステップは、前記CGオブジェクトの視覚表現形式を識別するための情報を保持することを特徴とする請求項7に記載の複合現実感方法。
- 前記マスクオブジェクト描画ステップは、フレームバッファの更新を行わず、Zバッファの更新を行うことを特徴とする請求項7に記載の複合現実感方法。
- 前記半透過オブジェクト描画ステップは、Zバッファの更新を行わず、フレームバッファの更新を行うことを特徴とする請求項7に記載の複合現実感方法。
- 前記半透過オブジェクト描画ステップは、更新前の描画対象領域の画素値とCGオブジェクトの画素値とを加算することによって、描画対象領域に描画される画素値を定め、フレームバッファの更新を行うことを特徴とする請求項7に記載の複合現実感方法。
- 前記シーングラフマルチパス描画ステップは、シーン全体を表現するシーングラフから視覚表現形式別にシーングラフを再構成することを特徴とする請求項7に記載の複合現実感方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003386937A JP4307222B2 (ja) | 2003-11-17 | 2003-11-17 | 複合現実感提示方法、複合現実感提示装置 |
US10/981,563 US7199807B2 (en) | 2003-11-17 | 2004-11-05 | Mixed reality presentation method and mixed reality presentation apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003386937A JP4307222B2 (ja) | 2003-11-17 | 2003-11-17 | 複合現実感提示方法、複合現実感提示装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2005149209A true JP2005149209A (ja) | 2005-06-09 |
JP2005149209A5 JP2005149209A5 (ja) | 2006-12-14 |
JP4307222B2 JP4307222B2 (ja) | 2009-08-05 |
Family
ID=34567427
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003386937A Expired - Fee Related JP4307222B2 (ja) | 2003-11-17 | 2003-11-17 | 複合現実感提示方法、複合現実感提示装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7199807B2 (ja) |
JP (1) | JP4307222B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20170091710A (ko) * | 2014-12-03 | 2017-08-09 | 노키아 테크놀로지스 오와이 | 디지털 비디오 렌더링 |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004265193A (ja) * | 2003-03-03 | 2004-09-24 | Canon Inc | 情報処理方法、情報処理装置、サーバ装置の制御方法、サーバ装置 |
JP4227561B2 (ja) * | 2004-06-03 | 2009-02-18 | キヤノン株式会社 | 画像処理方法、画像処理装置 |
US9019300B2 (en) | 2006-08-04 | 2015-04-28 | Apple Inc. | Framework for graphics animation and compositing operations |
JP4834606B2 (ja) * | 2007-05-16 | 2011-12-14 | キヤノン株式会社 | 画像処理方法及び画像処理装置 |
US20090091564A1 (en) * | 2007-10-03 | 2009-04-09 | Raju Thevan | System and method for rendering electronic documents having overlapping primitives |
DE102007048857A1 (de) * | 2007-10-11 | 2009-04-16 | Robert Bosch Gmbh | Verfahren zur Erzeugung und/oder Aktualisierung von Texturen von Hintergrundobjektmodellen, Videoüberwachungssystem zur Durchführung des Verfahrens sowie Computerprogramm |
US20090271436A1 (en) * | 2008-04-23 | 2009-10-29 | Josef Reisinger | Techniques for Providing a Virtual-World Object Based on a Real-World Object Description |
US20110141112A1 (en) * | 2009-12-11 | 2011-06-16 | William Allen Hux | Image processing techniques |
US8990682B1 (en) * | 2011-10-05 | 2015-03-24 | Google Inc. | Methods and devices for rendering interactions between virtual and physical objects on a substantially transparent display |
US9081177B2 (en) | 2011-10-07 | 2015-07-14 | Google Inc. | Wearable computer with nearby object response |
US9547406B1 (en) | 2011-10-31 | 2017-01-17 | Google Inc. | Velocity-based triggering |
US10049437B2 (en) | 2016-11-21 | 2018-08-14 | Microsoft Technology Licensing, Llc | Cleartype resolution recovery resampling |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5416893A (en) * | 1993-10-26 | 1995-05-16 | Hewlett-Packard Co. | Method for displaying edging or decaling of an object in a graphics display |
JP2000251090A (ja) * | 1999-03-01 | 2000-09-14 | Sony Computer Entertainment Inc | 描画装置及び該描画装置で被写界深度を表現する方法 |
US6734852B2 (en) * | 1999-09-24 | 2004-05-11 | Sun Microsystems, Inc. | Using rendering molecules to manage scene-based rendering |
AU2001239926A1 (en) * | 2000-02-25 | 2001-09-03 | The Research Foundation Of State University Of New York | Apparatus and method for volume processing and rendering |
US6961057B1 (en) * | 2000-10-12 | 2005-11-01 | Nvidia Corporation | Method and apparatus for managing and accessing depth data in a computer graphics system |
WO2002082378A1 (en) * | 2001-04-09 | 2002-10-17 | Koninklijke Philips Electronics N.V. | Method of blending digital pictures |
EP1349114A3 (en) | 2002-03-19 | 2011-06-15 | Canon Kabushiki Kaisha | Sensor calibration apparatus, sensor calibration method, program, storage medium, information processing method, and information processing apparatus |
JP2003283949A (ja) | 2002-03-26 | 2003-10-03 | Canon Inc | 受信装置 |
US7081892B2 (en) * | 2002-04-09 | 2006-07-25 | Sony Computer Entertainment America Inc. | Image with depth of field using z-buffer image data and alpha blending |
JP4065507B2 (ja) | 2002-07-31 | 2008-03-26 | キヤノン株式会社 | 情報提示装置および情報処理方法 |
US7427996B2 (en) | 2002-10-16 | 2008-09-23 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
-
2003
- 2003-11-17 JP JP2003386937A patent/JP4307222B2/ja not_active Expired - Fee Related
-
2004
- 2004-11-05 US US10/981,563 patent/US7199807B2/en not_active Expired - Fee Related
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20170091710A (ko) * | 2014-12-03 | 2017-08-09 | 노키아 테크놀로지스 오와이 | 디지털 비디오 렌더링 |
JP2018504009A (ja) * | 2014-12-03 | 2018-02-08 | ノキア テクノロジーズ オーユー | デジタルビデオのレンダリング |
US10115227B2 (en) | 2014-12-03 | 2018-10-30 | Nokia Technologies Oy | Digital video rendering |
KR102059732B1 (ko) * | 2014-12-03 | 2020-02-20 | 노키아 테크놀로지스 오와이 | 디지털 비디오 렌더링 |
Also Published As
Publication number | Publication date |
---|---|
JP4307222B2 (ja) | 2009-08-05 |
US20050104882A1 (en) | 2005-05-19 |
US7199807B2 (en) | 2007-04-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1642625B1 (en) | Video game device and image processing program | |
EP1353296B1 (en) | Image with depth of field using z-buffer image data and alpha blending | |
JP4948218B2 (ja) | 画像処理装置及びその制御方法 | |
JP4808778B2 (ja) | レイ・トレース画像をラスタ化画像と合成するための方法 | |
US6945869B2 (en) | Apparatus and method for video based shooting game | |
JP4307222B2 (ja) | 複合現実感提示方法、複合現実感提示装置 | |
EP1355276A2 (en) | System and method for distance adjusted rendering | |
US20020004421A1 (en) | Computer readable recording medium recording a program for causing a light source to be displayed on a game screen and the program, and game screen display method and apparatus | |
JP2006346507A (ja) | ゲーム装置および画像処理プログラム | |
JP2007026112A (ja) | プログラム、情報記憶媒体及び画像生成システム | |
JP2006195882A (ja) | プログラム、情報記憶媒体、及び画像生成システム | |
JP4983793B2 (ja) | 画像処理プログラムおよび画像処理装置 | |
JP2005339377A (ja) | 画像処理方法、画像処理装置 | |
JP3639286B2 (ja) | ゲームプログラム、及びゲーム装置 | |
JP4513423B2 (ja) | 仮想三次元座標ポリゴンによるオブジェクト画像の表示制御方法及びこれを用いた画像表示装置 | |
JP4749064B2 (ja) | プログラム、情報記憶媒体及び画像生成システム | |
JP4995054B2 (ja) | ゲームプログラム、そのゲームプログラムを記録した記録媒体及びコンピュータ | |
JP2009140135A5 (ja) | ||
JP2006293470A (ja) | 描画装置、方法および描画プログラム | |
JP2014146162A (ja) | 画像合成処理方法及び遊技機 | |
US6633291B1 (en) | Method and apparatus for displaying an image | |
JP2005004341A (ja) | 画像表示装置およびコンピュータに画像表示機能を付与するプログラム | |
JP2004192471A (ja) | ゲーム装置及びゲームプログラム | |
JP2008234681A (ja) | ビデオゲーム装置、画像表示装置及び方法、動画表示装置及び方法並びに記録媒体 | |
JP2008077406A (ja) | 画像生成システム、プログラム及び情報記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061027 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061027 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090123 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090316 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090424 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090428 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4307222 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120515 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120515 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130515 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140515 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |