JPH11203444A - 画像合成装置 - Google Patents
画像合成装置Info
- Publication number
- JPH11203444A JPH11203444A JP352798A JP352798A JPH11203444A JP H11203444 A JPH11203444 A JP H11203444A JP 352798 A JP352798 A JP 352798A JP 352798 A JP352798 A JP 352798A JP H11203444 A JPH11203444 A JP H11203444A
- Authority
- JP
- Japan
- Prior art keywords
- image
- real
- value
- information
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
- Image Generation (AREA)
Abstract
(57)【要約】
【課題】 半透明な実物体を介して仮想物体が透けて見
えるような感覚をユーザに与えるように、実写とＣＧを
違和感なく合成する。 【解決手段】 α情報格納部１０２は、記憶装置１０１
に格納されている３次元凹凸情報及びＣＧの画像と実写
画像との混合率に基づき、実写画像の各画素の透過度を
示すα値を計算してα値を持つ実写画像を生成し、ＣＧ
画像生成部１０３は、記憶装置１０１に格納されている
ＣＧのモデルとカメラ視点情報に基づき、ＣＧの画像を
生成し、合成画像生成部１０４は、α値を持つ実写画像
とＣＧの画像を合成する。
えるような感覚をユーザに与えるように、実写とＣＧを
違和感なく合成する。 【解決手段】 α情報格納部１０２は、記憶装置１０１
に格納されている３次元凹凸情報及びＣＧの画像と実写
画像との混合率に基づき、実写画像の各画素の透過度を
示すα値を計算してα値を持つ実写画像を生成し、ＣＧ
画像生成部１０３は、記憶装置１０１に格納されている
ＣＧのモデルとカメラ視点情報に基づき、ＣＧの画像を
生成し、合成画像生成部１０４は、α値を持つ実写画像
とＣＧの画像を合成する。
Description
【０００１】
【発明の属する技術分野】この発明はデジタル画像処理
における画像合成装置に関するものであり、特に背景実
写画像とコンピュータグラフィック（以下、ＣＧと称
す）で表現された仮想物体を合成する際に、実物体と仮
想物体間での光の相互作用を考慮することで、あたかも
実写画像に映っている物体（以下、実物体と称す）に仮
想物体が埋設されており、半透明な実物体を介して仮想
物体が透けて見えるような感覚をユーザに与えるように
実写とＣＧを違和感なく合成する画像合成装置に関する
ものである。
における画像合成装置に関するものであり、特に背景実
写画像とコンピュータグラフィック（以下、ＣＧと称
す）で表現された仮想物体を合成する際に、実物体と仮
想物体間での光の相互作用を考慮することで、あたかも
実写画像に映っている物体（以下、実物体と称す）に仮
想物体が埋設されており、半透明な実物体を介して仮想
物体が透けて見えるような感覚をユーザに与えるように
実写とＣＧを違和感なく合成する画像合成装置に関する
ものである。
【０００２】
【従来の技術】近年、計算機の処理速度の向上と記憶装
置の大容量化にともない、デジタル化された実写画像と
ＣＧ画像をリアルタイムに合成できるようになってき
た。このような状況のもと、各種シミュレーションや映
像製作現場において、実写画像とＣＧ画像の合成画像を
利用する動きが活発化している。特に、実写画像とＣＧ
画像が違和感なく合成された画像においては、応用範囲
も広くその合成技術に対するニーズも大きい。実写画像
とＣＧ画像を違和感なく合成する技術の従来法として、
特開平８−１０１９２４号公報に記載された「画像合成
方法」がある。
置の大容量化にともない、デジタル化された実写画像と
ＣＧ画像をリアルタイムに合成できるようになってき
た。このような状況のもと、各種シミュレーションや映
像製作現場において、実写画像とＣＧ画像の合成画像を
利用する動きが活発化している。特に、実写画像とＣＧ
画像が違和感なく合成された画像においては、応用範囲
も広くその合成技術に対するニーズも大きい。実写画像
とＣＧ画像を違和感なく合成する技術の従来法として、
特開平８−１０１９２４号公報に記載された「画像合成
方法」がある。
【０００３】図１１は従来の画像合成装置を示すブロッ
ク図であり、図において、１は画像及びメッセージを表
示する画像表示装置、２は合成アルゴリズムの実行や幾
何計算等の演算を行なうプロセッサ、３はプロセッサ２
の処理手順を記したプログラムと実写画像に関するデー
タやＣＧの形状に関するデータとを記録しておく記憶装
置、４はキーボード、５はマウス、６はこれらを効率的
に連結するバスである。
ク図であり、図において、１は画像及びメッセージを表
示する画像表示装置、２は合成アルゴリズムの実行や幾
何計算等の演算を行なうプロセッサ、３はプロセッサ２
の処理手順を記したプログラムと実写画像に関するデー
タやＣＧの形状に関するデータとを記録しておく記憶装
置、４はキーボード、５はマウス、６はこれらを効率的
に連結するバスである。
【０００４】上記記憶装置３に記憶されている実写画像
に関するデータとしては、実写の画像データ、この画像
データのカメラ視点情報、実物体の３次元構造のデー
タ、実物体の満たすべき条件を記述したルール情報等が
含まれている。
に関するデータとしては、実写の画像データ、この画像
データのカメラ視点情報、実物体の３次元構造のデー
タ、実物体の満たすべき条件を記述したルール情報等が
含まれている。
【０００５】次に動作について説明する。図１２は従来
の画像合成装置における処理手順を示すフローチャート
であり、以下の処理はプロセッサ２が行う処理である。
まず記憶装置３から、ステップＳＴ１で、実写の画像デ
ータをメモリ上に読み込み、ステップＳＴ２で、画像デ
ータのカメラ視点情報をメモリ上に読み込む。次にステ
ップＳＴ３において、このカメラ視点情報に基づきＣＧ
物体のモデリングを行なう。そしてステップＳＴ４にお
いて、記憶装置３から実物体の３次元構造のデータをメ
モリ上に読み込む。次にステップＳＴ５において、入力
手段であるキーボード４やマウス５によって、実物体上
のどの位置にＣＧの物体を置くかを決める。次にステッ
プＳＴ６において、記憶装置３から実物体のルール情報
を読み出す。
の画像合成装置における処理手順を示すフローチャート
であり、以下の処理はプロセッサ２が行う処理である。
まず記憶装置３から、ステップＳＴ１で、実写の画像デ
ータをメモリ上に読み込み、ステップＳＴ２で、画像デ
ータのカメラ視点情報をメモリ上に読み込む。次にステ
ップＳＴ３において、このカメラ視点情報に基づきＣＧ
物体のモデリングを行なう。そしてステップＳＴ４にお
いて、記憶装置３から実物体の３次元構造のデータをメ
モリ上に読み込む。次にステップＳＴ５において、入力
手段であるキーボード４やマウス５によって、実物体上
のどの位置にＣＧの物体を置くかを決める。次にステッ
プＳＴ６において、記憶装置３から実物体のルール情報
を読み出す。
【０００６】次に、ステップＳＴ７において画素のスキ
ャンを開始し、ステップＳＴ８からステップＳＴ１１ま
での処理を画像中の全画素について繰り返す。すなわ
ち、カメラの視点中心から現在スキャンしている画素を
通る直線を考え、その直線が実物体の３次元構造データ
に到達するまで延長する。その時ステップＳＴ８におい
て、最初に到達する物体がＣＧ物体であるか、それとも
実物体かどうかを判定し、その結果をもとに新しく作成
する合成画像の画素値を計算する。延長線の到達した物
体が実物体である場合は、ステップＳＴ１０において、
実写画像の画素値を合成画像の画素値として用いる。
ャンを開始し、ステップＳＴ８からステップＳＴ１１ま
での処理を画像中の全画素について繰り返す。すなわ
ち、カメラの視点中心から現在スキャンしている画素を
通る直線を考え、その直線が実物体の３次元構造データ
に到達するまで延長する。その時ステップＳＴ８におい
て、最初に到達する物体がＣＧ物体であるか、それとも
実物体かどうかを判定し、その結果をもとに新しく作成
する合成画像の画素値を計算する。延長線の到達した物
体が実物体である場合は、ステップＳＴ１０において、
実写画像の画素値を合成画像の画素値として用いる。
【０００７】ステップＳＴ８において、延長線がＣＧモ
デルに到達した場合は、ステップＳＴ９において、裏に
可視な物体があるかどうか判定し、ＹＥＳと判定された
場合には、ステップＳＴ１０において、実写画像の画素
値を合成画像の画素値として用いる。上記ステップＳＴ
９においてＮＯと判定された場合には、ステップＳＴ１
１において、ＣＧ画像を作る一般的なアルゴリズムに従
い、物体の表面属性や光源情報を用いて画素の色を計算
し、この画素値を合成画像の画素値とする。ステップＳ
Ｔ１２において、画像上の全ての画素についてスキャン
が行なわれた場合は処理を終了し、スキャンが終了しな
い場合は、ステップＳＴ８に戻り上記処理を繰り返す。
デルに到達した場合は、ステップＳＴ９において、裏に
可視な物体があるかどうか判定し、ＹＥＳと判定された
場合には、ステップＳＴ１０において、実写画像の画素
値を合成画像の画素値として用いる。上記ステップＳＴ
９においてＮＯと判定された場合には、ステップＳＴ１
１において、ＣＧ画像を作る一般的なアルゴリズムに従
い、物体の表面属性や光源情報を用いて画素の色を計算
し、この画素値を合成画像の画素値とする。ステップＳ
Ｔ１２において、画像上の全ての画素についてスキャン
が行なわれた場合は処理を終了し、スキャンが終了しな
い場合は、ステップＳＴ８に戻り上記処理を繰り返す。
【０００８】
【発明が解決しようとする課題】上記従来の画像合成装
置により、ＣＧで表現された仮想物体を実写画像上に置
くとき、人為的な規則を常に満たし、幾何学的にも違和
感の無い合成動画像を作り出すことができるが、ＣＧで
表現された仮想物体が実物体よりもカメラ視点からみて
遠くに存在する場合、仮想物体は全く描画されないた
め、実物体に埋設された仮想物体が、半透明な実物体を
介して透けて見えるような合成画像を生成することはで
きないなどの課題があった。
置により、ＣＧで表現された仮想物体を実写画像上に置
くとき、人為的な規則を常に満たし、幾何学的にも違和
感の無い合成動画像を作り出すことができるが、ＣＧで
表現された仮想物体が実物体よりもカメラ視点からみて
遠くに存在する場合、仮想物体は全く描画されないた
め、実物体に埋設された仮想物体が、半透明な実物体を
介して透けて見えるような合成画像を生成することはで
きないなどの課題があった。
【０００９】また、実写画像とＣＧ画像を違和感なく合
成するためには、従来の画像合成装置で実現されている
（ｉ）実物体と仮想物体の前後関係から生じるオクルー
ジョン（かくれ）の適切な表現による幾何学的な解決の
他にも、（ｉｉ）実物体と仮想物体間での光の相互作用
を考慮した光学的な解決も必要とされるが、従来の画像
合成装置では（ｉｉ）に関しては全く対処されていない
などの課題があった。
成するためには、従来の画像合成装置で実現されている
（ｉ）実物体と仮想物体の前後関係から生じるオクルー
ジョン（かくれ）の適切な表現による幾何学的な解決の
他にも、（ｉｉ）実物体と仮想物体間での光の相互作用
を考慮した光学的な解決も必要とされるが、従来の画像
合成装置では（ｉｉ）に関しては全く対処されていない
などの課題があった。
【００１０】この発明は、上記のような課題を解決する
ためになされたもので、実物体と仮想物体間での光の相
互作用を考慮することで、あたかも実物体に仮想物体が
埋設されており、半透明な実物体を介して仮想物体が透
けて見えるような感覚をユーザに与えるように、実写と
ＣＧを違和感なく合成する画像合成装置を得ることを目
的とする。
ためになされたもので、実物体と仮想物体間での光の相
互作用を考慮することで、あたかも実物体に仮想物体が
埋設されており、半透明な実物体を介して仮想物体が透
けて見えるような感覚をユーザに与えるように、実写と
ＣＧを違和感なく合成する画像合成装置を得ることを目
的とする。
【００１１】
【課題を解決するための手段】この発明に係る画像合成
装置は、ＣＧ（以下、ＣＧと称す）のモデル、デジタル
化された実写画像のデータ、上記実写画像のカメラ視点
情報、上記実写画像の３次元凹凸情報、及び上記ＣＧの
画像と上記実写画像との混合率を格納する記憶手段と、
上記３次元凹凸情報と上記混合率に基づき、上記実写画
像の各画素の透過度を示すα値を計算して上記実写画像
のαプレーンに上記α値を格納することにより上記α値
を持つ実写画像を生成するα情報格納手段と、上記ＣＧ
のモデルと上記カメラ視点情報に基づき、上記ＣＧの画
像を生成するＣＧ画像生成手段と、上記α情報格納手段
により生成された上記α値を持つ実写画像と、上記ＣＧ
画像生成手段により生成された上記ＣＧの画像との合成
画像を生成する合成画像生成手段とを備えたものであ
る。
装置は、ＣＧ（以下、ＣＧと称す）のモデル、デジタル
化された実写画像のデータ、上記実写画像のカメラ視点
情報、上記実写画像の３次元凹凸情報、及び上記ＣＧの
画像と上記実写画像との混合率を格納する記憶手段と、
上記３次元凹凸情報と上記混合率に基づき、上記実写画
像の各画素の透過度を示すα値を計算して上記実写画像
のαプレーンに上記α値を格納することにより上記α値
を持つ実写画像を生成するα情報格納手段と、上記ＣＧ
のモデルと上記カメラ視点情報に基づき、上記ＣＧの画
像を生成するＣＧ画像生成手段と、上記α情報格納手段
により生成された上記α値を持つ実写画像と、上記ＣＧ
画像生成手段により生成された上記ＣＧの画像との合成
画像を生成する合成画像生成手段とを備えたものであ
る。
【００１２】この発明に係る画像合成装置は、ＣＧのモ
デル、デジタル化された実写画像のデータ、上記実写画
像のカメラ視点情報、撮影時の光源情報、及び上記ＣＧ
の画像と上記実写画像との混合率を格納する記憶手段
と、上記実写画像のデータと上記撮影時の光源情報に基
づき、上記実写画像の３次元凹凸情報を計算する３次元
凹凸情報計算手段と、上記３次元凹凸情報と上記混合率
に基づき、上記実写画像の各画素の透過度を示すα値を
計算して上記実写画像のαプレーンに上記α値を格納す
ることにより上記α値を持つ実写画像を生成するα情報
格納手段と、上記ＣＧのモデルと上記カメラ視点情報に
基づき、上記ＣＧの画像を生成するＣＧ画像生成手段
と、上記α情報格納手段により生成された上記α値を持
つ実写画像と、上記ＣＧ画像生成手段により生成された
上記ＣＧの画像との合成画像を生成する合成画像生成手
段とを備えたものである。
デル、デジタル化された実写画像のデータ、上記実写画
像のカメラ視点情報、撮影時の光源情報、及び上記ＣＧ
の画像と上記実写画像との混合率を格納する記憶手段
と、上記実写画像のデータと上記撮影時の光源情報に基
づき、上記実写画像の３次元凹凸情報を計算する３次元
凹凸情報計算手段と、上記３次元凹凸情報と上記混合率
に基づき、上記実写画像の各画素の透過度を示すα値を
計算して上記実写画像のαプレーンに上記α値を格納す
ることにより上記α値を持つ実写画像を生成するα情報
格納手段と、上記ＣＧのモデルと上記カメラ視点情報に
基づき、上記ＣＧの画像を生成するＣＧ画像生成手段
と、上記α情報格納手段により生成された上記α値を持
つ実写画像と、上記ＣＧ画像生成手段により生成された
上記ＣＧの画像との合成画像を生成する合成画像生成手
段とを備えたものである。
【００１３】この発明に係る画像合成装置は、記憶手段
が連続的に撮影されデジタル化されたフレームごとの実
写画像のデータを格納し、α情報格納手段が、上記フレ
ームごとにα値を計算して実写画像のαプレーンに上記
α値を格納することにより上記α値を持つ実写画像を生
成し、ＣＧ画像生成手段及び合成画像生成手段が、上記
フレームごとに、ＣＧの画像を生成し、上記α値を持つ
実写画像と上記ＣＧの画像との合成画像を生成するもの
である。
が連続的に撮影されデジタル化されたフレームごとの実
写画像のデータを格納し、α情報格納手段が、上記フレ
ームごとにα値を計算して実写画像のαプレーンに上記
α値を格納することにより上記α値を持つ実写画像を生
成し、ＣＧ画像生成手段及び合成画像生成手段が、上記
フレームごとに、ＣＧの画像を生成し、上記α値を持つ
実写画像と上記ＣＧの画像との合成画像を生成するもの
である。
【００１４】この発明に係る画像合成装置は、記憶手段
が実写画像の各画素ごとのカメラ視点位置からの距離情
報を格納し、α情報格納手段が上記距離情報を考慮し
て、上記実写画像とＣＧ画像間の距離に対応して上記実
写画像の各画素のα値を計算するものである。
が実写画像の各画素ごとのカメラ視点位置からの距離情
報を格納し、α情報格納手段が上記距離情報を考慮し
て、上記実写画像とＣＧ画像間の距離に対応して上記実
写画像の各画素のα値を計算するものである。
【００１５】
【発明の実施の形態】以下この発明の実施の一形態を説
明する。 実施の形態１．図１は実施の形態１による画像合成装置
の構成を示すブロック図である。図において、１０１は
記憶装置（記憶手段）であり、ＣＧモデルと、デジタル
化された実写の画像データと、この実写画像のカメラ視
点情報及び３次元凹凸情報と、ＣＧ画像とこの実写画像
の混合率とを格納している。１０２は上記３次元凹凸情
報と上記混合率をもとに上記実写画像の各画素のα値
（透過度）を計算してこの実写画像のαプレーンにこの
α値を格納することによりα値を持つ実写画像を生成す
るα情報格納部（α情報格納手段）、１０３は上記ＣＧ
モデルと上記カメラ視点情報とからＣＧ画像を生成する
ＣＧ画像生成部（ＣＧ画像生成手段）、１０４は上記α
値を持つ実写画像と上記ＣＧ画像の合成画像を生成する
合成画像生成部（合成画像生成手段）である。ここで実
写画像の３次元凹凸情報は、実写の各画素に対応する実
表面とカメラ視点位置との相対距離を表わす。
明する。 実施の形態１．図１は実施の形態１による画像合成装置
の構成を示すブロック図である。図において、１０１は
記憶装置（記憶手段）であり、ＣＧモデルと、デジタル
化された実写の画像データと、この実写画像のカメラ視
点情報及び３次元凹凸情報と、ＣＧ画像とこの実写画像
の混合率とを格納している。１０２は上記３次元凹凸情
報と上記混合率をもとに上記実写画像の各画素のα値
（透過度）を計算してこの実写画像のαプレーンにこの
α値を格納することによりα値を持つ実写画像を生成す
るα情報格納部（α情報格納手段）、１０３は上記ＣＧ
モデルと上記カメラ視点情報とからＣＧ画像を生成する
ＣＧ画像生成部（ＣＧ画像生成手段）、１０４は上記α
値を持つ実写画像と上記ＣＧ画像の合成画像を生成する
合成画像生成部（合成画像生成手段）である。ここで実
写画像の３次元凹凸情報は、実写の各画素に対応する実
表面とカメラ視点位置との相対距離を表わす。
【００１６】次に動作について説明する。図２はこの実
施の形態１の画像合成装置における処理の手順を示すフ
ローチャートである。まずステップＳＴ１０１におい
て、α情報格納部１０２は、記憶装置１０１に格納され
ている実写画像の３次元凹凸情報をもとに、実写画像上
の各画素の単位法線ベクトル（各画素の変化の勾配）を
以下の手順により求める。
施の形態１の画像合成装置における処理の手順を示すフ
ローチャートである。まずステップＳＴ１０１におい
て、α情報格納部１０２は、記憶装置１０１に格納され
ている実写画像の３次元凹凸情報をもとに、実写画像上
の各画素の単位法線ベクトル（各画素の変化の勾配）を
以下の手順により求める。
【００１７】実写画像をｆで表記し、図３に示すように
画素（ｉ，ｊ）における３次元凹凸情報から得た高さ
（カメラ方向を正とする）をｆH （ｉ，ｊ）とする。ま
ず、Ｘ軸方向、Ｙ軸方向におけるｆH の微分ｐ、ｑとし
て、 ｐ＝ｆH （ｉ，ｊ）−ｆH （ｉ−１，ｊ） ｑ＝ｆH （ｉ，ｊ）−ｆH （ｉ，ｊ−１） を求める。ここでｐはＸ軸方向の画素の差分、ｑはＹ軸
方向の画素の差分を示す。そしてＸ軸方向の実物体の偏
微分をベクトルｒx 、Ｙ軸方向の実物体の偏微分をベク
トルｒy とし、 ｒx ＝（１，０，ｐ） ｒy ＝（１，０，ｑ） とする。
画素（ｉ，ｊ）における３次元凹凸情報から得た高さ
（カメラ方向を正とする）をｆH （ｉ，ｊ）とする。ま
ず、Ｘ軸方向、Ｙ軸方向におけるｆH の微分ｐ、ｑとし
て、 ｐ＝ｆH （ｉ，ｊ）−ｆH （ｉ−１，ｊ） ｑ＝ｆH （ｉ，ｊ）−ｆH （ｉ，ｊ−１） を求める。ここでｐはＸ軸方向の画素の差分、ｑはＹ軸
方向の画素の差分を示す。そしてＸ軸方向の実物体の偏
微分をベクトルｒx 、Ｙ軸方向の実物体の偏微分をベク
トルｒy とし、 ｒx ＝（１，０，ｐ） ｒy ＝（１，０，ｑ） とする。
【００１８】この時、画素（ｉ，ｊ）における単位法線
ベクトルｎを
ベクトルｎを
【００１９】
【数１】
【００２０】とする。ここで、×はベクトル外積の演算
子である。ｒx ，ｒy ，ｎの関係を図４に示す。
子である。ｒx ，ｒy ，ｎの関係を図４に示す。
【００２１】次にステップＳＴ１０２において、α情報
格納部１０２は、ステップＳＴ１０１で求めた各画素ご
との単位法線ベクトル情報と記憶装置１０１に格納され
た混合率をもとに各画素ごとのα値を以下の手順により
求め、α値を持つ実写画像を生成する。
格納部１０２は、ステップＳＴ１０１で求めた各画素ご
との単位法線ベクトル情報と記憶装置１０１に格納され
た混合率をもとに各画素ごとのα値を以下の手順により
求め、α値を持つ実写画像を生成する。
【００２２】撮影時のカメラと光源の位置が実物体から
十分遠くに離れていると仮定すると、実物体からカメラ
ヘの単位視点ベクトルｖは、 ｖ＝（０，０，１） と近似することができ、Ｚ軸と平行になっているとみな
すことができる。ここでＺ軸は画像に向かう向きを選ん
でいる（右手座標系）。
十分遠くに離れていると仮定すると、実物体からカメラ
ヘの単位視点ベクトルｖは、 ｖ＝（０，０，１） と近似することができ、Ｚ軸と平行になっているとみな
すことができる。ここでＺ軸は画像に向かう向きを選ん
でいる（右手座標系）。
【００２３】この時、画素（ｉ，ｊ）におけるα値、す
なわち透過度をｆα（ｉ，ｊ）、混合率をｋとした時
に、 ｆα（ｉ，ｊ）＝１−ｋ・ｖ＊ｎ とする。ここで＊はベクトル内積の演算子である。ま
た、混合率ｋは実写に対するＣＧの最大混合比率とし、
合成画像の用途に応じて０≦ｋ≦１内の値を設定する。
なわち透過度をｆα（ｉ，ｊ）、混合率をｋとした時
に、 ｆα（ｉ，ｊ）＝１−ｋ・ｖ＊ｎ とする。ここで＊はベクトル内積の演算子である。ま
た、混合率ｋは実写に対するＣＧの最大混合比率とし、
合成画像の用途に応じて０≦ｋ≦１内の値を設定する。
【００２４】次にステップＳＴ１０３において、ＣＧ画
像生成部１０３は、記憶装置１０１に格納されたカメラ
の視点情報（実世界座標系におけるカメラの視点位置と
視線方向）とＣＧモデルに基づいてＣＧ画像を生成す
る。
像生成部１０３は、記憶装置１０１に格納されたカメラ
の視点情報（実世界座標系におけるカメラの視点位置と
視線方向）とＣＧモデルに基づいてＣＧ画像を生成す
る。
【００２５】最後にステップＳＴ１０４において、合成
画像生成部１０４は、ステップＳＴ１０２で生成された
α値を持つ実写画像とステップＳＴ１０３で生成された
ＣＧ画像を合成する。
画像生成部１０４は、ステップＳＴ１０２で生成された
α値を持つ実写画像とステップＳＴ１０３で生成された
ＣＧ画像を合成する。
【００２６】合成画像の計算式は、画素（ｉ，ｊ）にお
ける実写画像の画素値をｆ（ｉ，ｊ）、α値をｆα
（ｉ，ｊ）、ＣＧ画像の画素値をｇ（ｉ，ｊ）、合成画
像の画素値をｈ（ｉ，ｊ）とすると、画素（ｉ，ｊ）上
に仮想物体が描画されている時は、 ｈ（ｉ，ｊ）＝ｆα（ｉ，ｊ）・ｆ（ｉ，ｊ）＋（１−
ｆα（ｉ，ｊ））・ｇ（ｉ，ｊ） とし、画素（ｉ，ｊ）上に仮想物体が描画されていない
時は、 ｈ（ｉ，ｊ）＝ｆ（ｉ，ｊ） とする。
ける実写画像の画素値をｆ（ｉ，ｊ）、α値をｆα
（ｉ，ｊ）、ＣＧ画像の画素値をｇ（ｉ，ｊ）、合成画
像の画素値をｈ（ｉ，ｊ）とすると、画素（ｉ，ｊ）上
に仮想物体が描画されている時は、 ｈ（ｉ，ｊ）＝ｆα（ｉ，ｊ）・ｆ（ｉ，ｊ）＋（１−
ｆα（ｉ，ｊ））・ｇ（ｉ，ｊ） とし、画素（ｉ，ｊ）上に仮想物体が描画されていない
時は、 ｈ（ｉ，ｊ）＝ｆ（ｉ，ｊ） とする。
【００２７】この処理では、視線と実物体表面の法線ベ
クトルの成す角度により、仮想物体の透過度を変えるこ
とで実物体と仮想物体間での光の相互作用を考慮してい
る。実際、その角度により透過してくる光の強さが変化
することは日常生活においてよく経験することであり、
図５に示すように、この処理により、半透明な実物体を
介して仮想物体が透けて見えるような感覚をユーザに与
えるように、実写とＣＧを違和感なく合成することがで
きる。
クトルの成す角度により、仮想物体の透過度を変えるこ
とで実物体と仮想物体間での光の相互作用を考慮してい
る。実際、その角度により透過してくる光の強さが変化
することは日常生活においてよく経験することであり、
図５に示すように、この処理により、半透明な実物体を
介して仮想物体が透けて見えるような感覚をユーザに与
えるように、実写とＣＧを違和感なく合成することがで
きる。
【００２８】また、最近のＧＷＳ（グラフィックスワー
クステーション）では、α値に基づく画像の合成は実時
間処理（タイムリミット内の時間処理、例えばこの例で
は毎秒３０回）される。従って、α値をこの処理に基づ
いて一度計算しておけば、計算後の実写画像に対して
は、仮想物体のポリゴン数が数１０００ポリゴン程度で
あれば、実時間で上記特徴を有する実写とＣＧの合成が
可能となる。
クステーション）では、α値に基づく画像の合成は実時
間処理（タイムリミット内の時間処理、例えばこの例で
は毎秒３０回）される。従って、α値をこの処理に基づ
いて一度計算しておけば、計算後の実写画像に対して
は、仮想物体のポリゴン数が数１０００ポリゴン程度で
あれば、実時間で上記特徴を有する実写とＣＧの合成が
可能となる。
【００２９】以上のように、この実施の形態１によれ
ば、半透明な実物体を介して仮想物体が透けて見えるよ
うな感覚をユーザに与えるように、実写とＣＧを違和感
なく合成することができるという効果が得られる。
ば、半透明な実物体を介して仮想物体が透けて見えるよ
うな感覚をユーザに与えるように、実写とＣＧを違和感
なく合成することができるという効果が得られる。
【００３０】実施の形態２．図６は実施の形態２による
画像合成装置の構成を示すブロック図であり、図におい
て、１０５は３次元凹凸情報計算部（３次元凹凸情報計
算手段）であり、記憶装置１０１に格納されている実写
画像と光源情報を読み出し、この実写画像に含まれてい
る陰影情報に基づき、その３次元凹凸情報を計算する。
なお、この実施の形態では記憶装置１０１に実写画像の
３次元凹凸情報を格納していない。その他の構成は実施
の形態１の図１と同じである。
画像合成装置の構成を示すブロック図であり、図におい
て、１０５は３次元凹凸情報計算部（３次元凹凸情報計
算手段）であり、記憶装置１０１に格納されている実写
画像と光源情報を読み出し、この実写画像に含まれてい
る陰影情報に基づき、その３次元凹凸情報を計算する。
なお、この実施の形態では記憶装置１０１に実写画像の
３次元凹凸情報を格納していない。その他の構成は実施
の形態１の図１と同じである。
【００３１】次に動作について説明する。図７はこの実
施の形態２の画像合成装置における処理の手順を示すフ
ローチャートである。ステップＳＴ２０１において、３
次元凹凸情報計算部１０５は、記憶装置１０１に格納さ
れている実写画像とこの実写画像撮影時の光源情報（光
源を無限遠光源とみなしたときの光線の方向ベクトル）
とから、この実写画像の各画素ごとの高さを計算する。
図８に実写画像から３次元凹凸情報計算部１０５より各
画素の高さを求め３次元表示した例を示す。
施の形態２の画像合成装置における処理の手順を示すフ
ローチャートである。ステップＳＴ２０１において、３
次元凹凸情報計算部１０５は、記憶装置１０１に格納さ
れている実写画像とこの実写画像撮影時の光源情報（光
源を無限遠光源とみなしたときの光線の方向ベクトル）
とから、この実写画像の各画素ごとの高さを計算する。
図８に実写画像から３次元凹凸情報計算部１０５より各
画素の高さを求め３次元表示した例を示す。
【００３２】なお、実写画像とこの実写画像撮影時の光
源情報とから、各画素ごとの高さ情報を求める方法は、
例えば、“Ｈｅｉｇｈｔ ａｎｄ ｇｒａｄｉｅｎｔ
ｆｒｏｍ ｓｈａｄｉｎｇ、Ｉｎｔｅｒｎａｔｉｏｎａ
ｌ Ｊｏｕｒｎａｌ ｏｆＣｏｍｐｕｔｅｒ Ｖｉｓｉ
ｏｎ、５：３７−７５，１９９０”等に示されている公
知のものである。
源情報とから、各画素ごとの高さ情報を求める方法は、
例えば、“Ｈｅｉｇｈｔ ａｎｄ ｇｒａｄｉｅｎｔ
ｆｒｏｍ ｓｈａｄｉｎｇ、Ｉｎｔｅｒｎａｔｉｏｎａ
ｌ Ｊｏｕｒｎａｌ ｏｆＣｏｍｐｕｔｅｒ Ｖｉｓｉ
ｏｎ、５：３７−７５，１９９０”等に示されている公
知のものである。
【００３３】図７において、ステップＳＴ２０１以降の
処理は、実施の形態１の図２の処理と同じである。
処理は、実施の形態１の図２の処理と同じである。
【００３４】この処理により、実写画像と撮影時の光源
情報から実写画像の３次元凹凸情報を計算するため、実
施の形態１のように、記憶装置１０１に実写画像の３次
元凹凸情報を格納しておく必要がなく、記憶しておく情
報量を減らすことができる。また、何らかの方法により
実写画像の３次元凹凸情報を計測する必要もなくなり、
合成画像作成までの処理コストを軽減することができ
る。
情報から実写画像の３次元凹凸情報を計算するため、実
施の形態１のように、記憶装置１０１に実写画像の３次
元凹凸情報を格納しておく必要がなく、記憶しておく情
報量を減らすことができる。また、何らかの方法により
実写画像の３次元凹凸情報を計測する必要もなくなり、
合成画像作成までの処理コストを軽減することができ
る。
【００３５】以上のように、この実施の形態２によれ
ば、半透明な実物体を介して仮想物体が透けて見えるよ
うな感覚をユーザに与えるように、実写とＣＧを違和感
なく合成することができるという効果が得られる。
ば、半透明な実物体を介して仮想物体が透けて見えるよ
うな感覚をユーザに与えるように、実写とＣＧを違和感
なく合成することができるという効果が得られる。
【００３６】また、この実施の形態２によれば、記憶し
ておく情報量を減らすことができると共に、合成画像作
成までの処理コストを軽減できるという効果が得られ
る。
ておく情報量を減らすことができると共に、合成画像作
成までの処理コストを軽減できるという効果が得られ
る。
【００３７】実施の形態３．実施の形態３による画像合
成装置は、実施の形態１の構成と同じであり、実写の動
画像に対して適用するものである。
成装置は、実施の形態１の構成と同じであり、実写の動
画像に対して適用するものである。
【００３８】次に動作について説明する。図９はこの実
施の形態３の画像合成装置における処理の手順を示すフ
ローチャートである。この実施の形態３は、上記実施の
形態１の図２のフローチャートにステップＳＴ３０１〜
ＳＴ３０６の処理を追加したものである。すなわちステ
ップＳＴ３０１、ＳＴ３０２、ＳＴ３０３の追加によ
り、記憶装置１０１に格納された連続実写画像のフレー
ムごとに、実施の形態１のステップＳＴ１０１、ＳＴ１
０２の処理をフレーム数Ｍだけ繰り返し、各画素のα値
を計算する。
施の形態３の画像合成装置における処理の手順を示すフ
ローチャートである。この実施の形態３は、上記実施の
形態１の図２のフローチャートにステップＳＴ３０１〜
ＳＴ３０６の処理を追加したものである。すなわちステ
ップＳＴ３０１、ＳＴ３０２、ＳＴ３０３の追加によ
り、記憶装置１０１に格納された連続実写画像のフレー
ムごとに、実施の形態１のステップＳＴ１０１、ＳＴ１
０２の処理をフレーム数Ｍだけ繰り返し、各画素のα値
を計算する。
【００３９】次にステップＳＴ３０４、ＳＴ３０５、Ｓ
Ｔ３０６の追加により、記憶装置１０１に格納された連
続実写画像のフレームごとに、実施の形態１のステップ
ＳＴ１０３、ＳＴ１０４の処理をフレーム数Ｍだけ繰り
返し、各フレームごとに実写画像とＣＧ画像の合成を行
なう。なおステップＳＴ３０１〜ＳＴ３０６の処理は、
図１には記載していないグラフィックプロセッサが行
う。
Ｔ３０６の追加により、記憶装置１０１に格納された連
続実写画像のフレームごとに、実施の形態１のステップ
ＳＴ１０３、ＳＴ１０４の処理をフレーム数Ｍだけ繰り
返し、各フレームごとに実写画像とＣＧ画像の合成を行
なう。なおステップＳＴ３０１〜ＳＴ３０６の処理は、
図１には記載していないグラフィックプロセッサが行
う。
【００４０】以上のように、この実施の形態３によれ
ば、実写の動画像に対しても、半透明な実物体を介して
仮想物体が透けて見えるような感覚をユーザに与えるよ
うに、実写とＣＧを違和感なく合成することができると
いう効果が得られる。
ば、実写の動画像に対しても、半透明な実物体を介して
仮想物体が透けて見えるような感覚をユーザに与えるよ
うに、実写とＣＧを違和感なく合成することができると
いう効果が得られる。
【００４１】実施の形態４．実施の形態４による画像合
成装置は、実施の形態１の構成と同じである。
成装置は、実施の形態１の構成と同じである。
【００４２】次に動作について説明する。図１０はこの
実施の形態４の画像合成装置における処理の手順を示す
フローチャートである。この実施の形態４は、上記実施
の形態１の図２のステップＳＴ１０３とＳＴ１０４の間
に、ステップＳＴ４０１を追加したものである。
実施の形態４の画像合成装置における処理の手順を示す
フローチャートである。この実施の形態４は、上記実施
の形態１の図２のステップＳＴ１０３とＳＴ１０４の間
に、ステップＳＴ４０１を追加したものである。
【００４３】図１０のステップＳＴ１０３において、Ｃ
Ｇ画像生成部１０３がＣＧ画像を生成した後、ステップ
ＳＴ４０１において、α情報格納部１０２は、実写画像
とＣＧ画像間の距離に応じて実写画像のα値を修正す
る。この時、画素（ｉ，ｊ）における実写画像の距離値
ｆD （ｉ，ｊ）は記憶装置１０１に格納されている値を
使用し、ＣＧ画像の距離値ｇD （ｉ，ｊ）はＣＧ画像生
成時のＣＧ画像生成部１０３内のＺバッファの値を実世
界における絶対距離に変換したものを使用する。ここで
画素（ｉ，ｊ）における実写画像の距離値ｆD （ｉ，
ｊ）は、カメラの視点位置と画素（ｉ，ｊ）上に写って
いる実物体表面との絶対距離であり、距離画像計測装置
等により計測することができる。
Ｇ画像生成部１０３がＣＧ画像を生成した後、ステップ
ＳＴ４０１において、α情報格納部１０２は、実写画像
とＣＧ画像間の距離に応じて実写画像のα値を修正す
る。この時、画素（ｉ，ｊ）における実写画像の距離値
ｆD （ｉ，ｊ）は記憶装置１０１に格納されている値を
使用し、ＣＧ画像の距離値ｇD （ｉ，ｊ）はＣＧ画像生
成時のＣＧ画像生成部１０３内のＺバッファの値を実世
界における絶対距離に変換したものを使用する。ここで
画素（ｉ，ｊ）における実写画像の距離値ｆD （ｉ，
ｊ）は、カメラの視点位置と画素（ｉ，ｊ）上に写って
いる実物体表面との絶対距離であり、距離画像計測装置
等により計測することができる。
【００４４】α値修正の計算式は、
【００４５】
【数２】
【００４６】とする。ここで実写画像とＣＧ画像間の距
離ｄは、 ｄ＝ｇD （ｉ，ｊ）−ｆD （ｉ，ｊ） であり、ｋ1 、ｋ2 はあらかじめ与えられた０と１の間
の定数で、ｋ1 は距離に比例した減衰係数を、ｋ2 は距
離の２乗に比例した減衰係数を制御する。
離ｄは、 ｄ＝ｇD （ｉ，ｊ）−ｆD （ｉ，ｊ） であり、ｋ1 、ｋ2 はあらかじめ与えられた０と１の間
の定数で、ｋ1 は距離に比例した減衰係数を、ｋ2 は距
離の２乗に比例した減衰係数を制御する。
【００４７】この処理により、実物体と仮想物体間の距
離が大きいほど実物体の透過度を小さくすることで、光
の減衰効果をも考慮した、よりリアルな実写とＣＧの合
成を実現することができる。
離が大きいほど実物体の透過度を小さくすることで、光
の減衰効果をも考慮した、よりリアルな実写とＣＧの合
成を実現することができる。
【００４８】以上のように、この実施の形態４によれ
ば、実物体と仮想物体間の距離に応じて実物体の透過度
を計算し、半透明な実物体を介して仮想物体が透けて見
えるような感覚をユーザに与えるように、実写とＣＧを
違和感なく合成することができるという効果が得られ
る。
ば、実物体と仮想物体間の距離に応じて実物体の透過度
を計算し、半透明な実物体を介して仮想物体が透けて見
えるような感覚をユーザに与えるように、実写とＣＧを
違和感なく合成することができるという効果が得られ
る。
【００４９】
【発明の効果】以上のように、この発明によれば、実写
画像の各画素の透過度を示すα値を計算してα値を持つ
実写画像を生成し、ＣＧ画像と合成することにより、半
透明な実物体を介して仮想物体が透けて見えるような感
覚をユーザに与えるように、実写とＣＧを違和感なく合
成することができるという効果がある。
画像の各画素の透過度を示すα値を計算してα値を持つ
実写画像を生成し、ＣＧ画像と合成することにより、半
透明な実物体を介して仮想物体が透けて見えるような感
覚をユーザに与えるように、実写とＣＧを違和感なく合
成することができるという効果がある。
【００５０】この発明によれば、実写画像の３次元凹凸
情報を計算し、実写画像の各画素の透過度を示すα値を
計算してα値を持つ実写画像を生成し、ＣＧ画像と合成
することにより、記憶しておく情報量を減らし合成画像
作成までの処理コストを軽減できると共に、半透明な実
物体を介して仮想物体が透けて見えるような感覚をユー
ザに与えるように、実写とＣＧを違和感なく合成するこ
とができるという効果がある。
情報を計算し、実写画像の各画素の透過度を示すα値を
計算してα値を持つ実写画像を生成し、ＣＧ画像と合成
することにより、記憶しておく情報量を減らし合成画像
作成までの処理コストを軽減できると共に、半透明な実
物体を介して仮想物体が透けて見えるような感覚をユー
ザに与えるように、実写とＣＧを違和感なく合成するこ
とができるという効果がある。
【００５１】この発明によれば、フレームごとにα値を
計算してα値を持つ実写画像を生成し、フレームごと
に、α値を持つ実写画像とＣＧの画像を合成することに
より、実写の動画像に対しても、半透明な実物体を介し
て仮想物体が透けて見えるような感覚をユーザに与える
ように、実写とＣＧを違和感なく合成することができる
という効果がある。
計算してα値を持つ実写画像を生成し、フレームごと
に、α値を持つ実写画像とＣＧの画像を合成することに
より、実写の動画像に対しても、半透明な実物体を介し
て仮想物体が透けて見えるような感覚をユーザに与える
ように、実写とＣＧを違和感なく合成することができる
という効果がある。
【００５２】この発明によれば、実写画像の各画素ごと
のカメラ視点位置からの距離情報を考慮し、実写画像と
ＣＧ画像間の距離に対応して実写画像の各画素のα値を
計算するので、実物体と仮想物体間の距離に応じて実物
体の透過度を変更し、半透明な実物体を介して仮想物体
が透けて見えるような感覚をユーザに与えるように、実
写とＣＧを違和感なく合成することができるという効果
がある。
のカメラ視点位置からの距離情報を考慮し、実写画像と
ＣＧ画像間の距離に対応して実写画像の各画素のα値を
計算するので、実物体と仮想物体間の距離に応じて実物
体の透過度を変更し、半透明な実物体を介して仮想物体
が透けて見えるような感覚をユーザに与えるように、実
写とＣＧを違和感なく合成することができるという効果
がある。
【図１】 この発明の実施の形態１による画像合成装置
の構成を示すブロック図である。
の構成を示すブロック図である。
【図２】 この発明の実施の形態１による画像合成装置
の処理の手順を示すフローチャートである。
の処理の手順を示すフローチャートである。
【図３】 画素と画像の関係を示す図である。
【図４】 ｒx ，ｒy ，ｎの関係を示す図である。
【図５】 この発明の実施の形態１により実写とＣＧを
合成した例を示す図である。
合成した例を示す図である。
【図６】 この発明の実施の形態２による画像合成装置
の構成を示すブロック図である。
の構成を示すブロック図である。
【図７】 この発明の実施の形態２による画像合成装置
の処理の手順を示すフローチャートである。
の処理の手順を示すフローチャートである。
【図８】 実写画像から３次元凹凸情報計算部により各
画素の高さを求めたものを３次元表示した例を示す図で
ある。
画素の高さを求めたものを３次元表示した例を示す図で
ある。
【図９】 この発明の実施の形態３による画像合成装置
の処理の手順を示すフローチャートである。
の処理の手順を示すフローチャートである。
【図１０】 この発明の実施の形態４による画像合成装
置の処理の手順を示すフローチャートである。
置の処理の手順を示すフローチャートである。
【図１１】 従来の画像合成装置の構成を示すブロック
図である。
図である。
【図１２】 従来の画像合成装置の処理の手順を示すフ
ローチャートである。
ローチャートである。
１０１ 記憶装置（記憶手段）、１０２ α情報格納部
（α情報格納手段）、１０３ ＣＧ画像生成部（ＣＧ画
像生成手段）、１０４ 合成画像生成部（合成画像生成
手段）、１０５ ３次元凹凸情報計算部（３次元凹凸情
報計算手段）。
（α情報格納手段）、１０３ ＣＧ画像生成部（ＣＧ画
像生成手段）、１０４ 合成画像生成部（合成画像生成
手段）、１０５ ３次元凹凸情報計算部（３次元凹凸情
報計算手段）。
Claims (4)
- 【請求項１】 ＣＧ（コンピュータグラフィックス）の
モデル、デジタル化された実写画像のデータ、上記実写
画像のカメラ視点情報、上記実写画像の３次元凹凸情
報、及び上記ＣＧの画像と上記実写画像との混合率を格
納する記憶手段と、 上記３次元凹凸情報と上記混合率に基づき、上記実写画
像の各画素の透過度を示すα値を計算して上記実写画像
のαプレーンに上記α値を格納することにより上記α値
を持つ実写画像を生成するα情報格納手段と、 上記ＣＧのモデルと上記カメラ視点情報に基づき、上記
ＣＧの画像を生成するＣＧ画像生成手段と、 上記α情報格納手段により生成された上記α値を持つ実
写画像と、上記ＣＧ画像生成手段により生成された上記
ＣＧの画像との合成画像を生成する合成画像生成手段と
を備えたことを特徴とする画像合成装置。 - 【請求項２】 ＣＧのモデル、デジタル化された実写画
像のデータ、上記実写画像のカメラ視点情報、撮影時の
光源情報、及び上記ＣＧの画像と上記実写画像との混合
率を格納する記憶手段と、 上記実写画像のデータと上記撮影時の光源情報に基づ
き、上記実写画像の３次元凹凸情報を計算する３次元凹
凸情報計算手段と、 上記３次元凹凸情報と上記混合率に基づき、上記実写画
像の各画素の透過度を示すα値を計算して上記実写画像
のαプレーンに上記α値を格納することにより上記α値
を持つ実写画像を生成するα情報格納手段と、 上記ＣＧのモデルと上記カメラ視点情報に基づき、上記
ＣＧの画像を生成するＣＧ画像生成手段と、 上記α情報格納手段により生成された上記α値を持つ実
写画像と、上記ＣＧ画像生成手段により生成された上記
ＣＧの画像との合成画像を生成する合成画像生成手段と
を備えたことを特徴とする画像合成装置。 - 【請求項３】 記憶手段は連続的に撮影されデジタル化
されたフレームごとの実写画像のデータを格納し、 α情報格納手段は、上記フレームごとにα値を計算して
実写画像のαプレーンに上記α値を格納することにより
上記α値を持つ実写画像を生成し、 ＣＧ画像生成手段及び合成画像生成手段は、上記フレー
ムごとに、ＣＧの画像を生成し、上記α値を持つ実写画
像と上記ＣＧの画像との合成画像を生成することを特徴
とする請求項１記載の画像合成装置。 - 【請求項４】 記憶手段は実写画像の各画素ごとのカメ
ラ視点位置からの距離情報を格納し、 α情報格納手段は上記距離情報を考慮して、上記実写画
像とＣＧ画像間の距離に対応して上記実写画像の各画素
のα値を計算することを特徴とする請求項１記載の画像
合成装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP352798A JPH11203444A (ja) | 1998-01-09 | 1998-01-09 | 画像合成装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP352798A JPH11203444A (ja) | 1998-01-09 | 1998-01-09 | 画像合成装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11203444A true JPH11203444A (ja) | 1999-07-30 |
Family
ID=11559864
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP352798A Pending JPH11203444A (ja) | 1998-01-09 | 1998-01-09 | 画像合成装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11203444A (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7728851B2 (en) | 2005-01-04 | 2010-06-01 | Kabushiki Kaisha Toshiba | Reproducing apparatus capable of reproducing picture data |
| US7936360B2 (en) | 2005-01-04 | 2011-05-03 | Kabushiki Kaisha Toshiba | Reproducing apparatus capable of reproducing picture data |
| JP2012174218A (ja) * | 2011-02-24 | 2012-09-10 | Ohbayashi Corp | 画像合成方法 |
| US8385726B2 (en) | 2006-03-22 | 2013-02-26 | Kabushiki Kaisha Toshiba | Playback apparatus and playback method using the playback apparatus |
-
1998
- 1998-01-09 JP JP352798A patent/JPH11203444A/ja active Pending
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7728851B2 (en) | 2005-01-04 | 2010-06-01 | Kabushiki Kaisha Toshiba | Reproducing apparatus capable of reproducing picture data |
| US7936360B2 (en) | 2005-01-04 | 2011-05-03 | Kabushiki Kaisha Toshiba | Reproducing apparatus capable of reproducing picture data |
| US7973806B2 (en) | 2005-01-04 | 2011-07-05 | Kabushiki Kaisha Toshiba | Reproducing apparatus capable of reproducing picture data |
| US8385726B2 (en) | 2006-03-22 | 2013-02-26 | Kabushiki Kaisha Toshiba | Playback apparatus and playback method using the playback apparatus |
| JP2012174218A (ja) * | 2011-02-24 | 2012-09-10 | Ohbayashi Corp | 画像合成方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3057066B1 (en) | Generation of three-dimensional imagery from a two-dimensional image using a depth map | |
| US20170200304A1 (en) | Variable resolution virtual reality display system | |
| US6215496B1 (en) | Sprites with depth | |
| JP3052681B2 (ja) | ３次元動画像生成装置 | |
| US20170018121A1 (en) | Predictive virtual reality display system with post rendering correction | |
| JP2009237680A (ja) | プログラム、情報記憶媒体および画像生成システム | |
| US20090102834A1 (en) | Image processing apparatus and image processing method | |
| JPH10334273A (ja) | ３次元画像処理装置及び３次元画像処理方法 | |
| Yang et al. | Nonlinear perspective projections and magic lenses: 3D view deformation | |
| JP2012190428A (ja) | 立体映像視覚効果処理方法 | |
| JP3459401B2 (ja) | Ｚバッファを用いた立体映像生成方法 | |
| JPH0950540A (ja) | 画像生成方法 | |
| JP3629243B2 (ja) | モデリング時の距離成分を用いてレンダリング陰影処理を行う画像処理装置とその方法 | |
| JPH07225854A (ja) | ３次元物体の２次元表示を生成するシステム及び方法 | |
| JPH11203444A (ja) | 画像合成装置 | |
| JP6802928B2 (ja) | 画像生成装置および画像生成方法 | |
| JP2002032744A (ja) | ３次元モデリング及び３次元画像作成のための装置及び方法 | |
| JP2003505773A (ja) | テクスチャ付き表面のコンピュータグラフィックス画像を計算する方法及び装置 | |
| CN111862338B (zh) | 模拟眼镜佩戴图像的显示方法及装置 | |
| JPH10232953A (ja) | 立体視画像生成装置 | |
| JP2009064355A (ja) | プログラム、情報記憶媒体及び画像生成システム | |
| JP3648404B2 (ja) | 画像生成装置及び記録媒体 | |
| JP3867071B2 (ja) | 画像処理装置、画像処理方法 | |
| JP2009140371A (ja) | プログラム、情報記憶媒体、画像生成システム | |
| JP2000057372A (ja) | 画像処理装置、画像処理方法及び記憶媒体 |