JP2016520908A5 - - Google Patents

Claims (12)

1. 環境の少なくとも1つのビデオフレームを受信するステップと、
   前記環境のサーフェス再構築を生成するステップと、
   前記環境の前記サーフェス再構築内で仮想オブジェクトおよび現実世界オブジェクトに向けて複数の光線を投射するステップと、
   前記少なくとも1つのビデオフレームから前記環境の照明データを生成するステップと、
   改善を必要とする前記環境内のエリアに基づき、前記環境内の前記複数の光線から光線のサブセットを求めるステップであって、前記複数の光線および近似分散解析を含む光線空間の4D細分に基づいて適応サンプリング技法を適用するステップを含むステップと、
   前記サーフェス再構築、前記照明データ、および光線の前記サブセットを除外する前記複数の光線に基づいて、前記少なくとも1つのビデオフレームに関連する前記環境の推定現実世界ライティングデータを生成するステップと、
   前記推定現実世界ライティングデータを使用して、光線の前記サブセットを除外する前記複数の光線に基づいて、前記少なくとも1つのビデオフレームにわたって前記仮想オブジェクトをレンダリングするステップと
   を含む方法。
2. 改善を必要とする前記環境内の前記エリアが、シャドーエリア、サーフェスエッジ、およびシャドーエッジを含む請求項1に記載の方法。
3. 前記複数の光線から光線のサブセットを求める前記ステップが、ライティングおよび差分レンダリング技法を前記環境に適用するステップと、その結果としてのシャドー情報を解析するステップとを含む請求項1に記載の方法。
4. 光線の前記サブセットに関連する時間コヒーレンス情報を2レベル階層キャッシュ内に格納するステップをさらに含み、第1のレベルが画面空間内の情報を格納し、第2のレベルがオブジェクト空間内の情報を格納する請求項1に記載の方法。
5. 前記照明データを生成する前記ステップが、
   前記少なくとも1つのビデオフレームを輝度成分および色成分に変換するステップと、
   前記輝度成分をノイズ除去して前記照明データを抽出するステップと
   を含む請求項1に記載の方法。
6. 前記環境の前記サーフェス再構築を生成する前記ステップが、前記少なくとも1つのビデオフレームを使用して実施される請求項1に記載の方法。
7. 環境の少なくとも1つのビデオフレームを受信するための手段と、
   前記環境のサーフェス再構築を生成するための手段と、
   前記環境の前記サーフェス再構築内で仮想オブジェクトおよび現実世界オブジェクトに向けて複数の光線を投射するための手段と、
   前記少なくとも1つのビデオフレームから前記環境の照明データを生成するための手段と、
   改善を必要とする前記環境内のエリアに基づき、前記環境内の前記複数の光線から光線のサブセットを求めるための手段であって、前記環境内の前記複数の光線から光線のサブセットを求めることが、前記複数の光線および近似分散解析を含む光線空間の4D細分に基づいて適応サンプリング技法を適用することを含む手段と、
   前記サーフェス再構築、前記照明データ、および光線の前記サブセットを除外する前記複数の光線に基づいて、前記少なくとも1つのビデオフレームに関連する前記環境の推定現実世界ライティングデータを生成するための手段と、
   前記推定現実世界ライティングデータを使用して、光線の前記サブセットを除外する前記複数の光線に基づいて、前記少なくとも1つのビデオフレームにわたって前記仮想オブジェクトをレンダリングするための手段と
   を備える装置。
8. 改善を必要とする前記環境内の前記エリアが、シャドーエリア、サーフェスエッジ、およびシャドーエッジを含む請求項7に記載の装置。
9. 前記複数の光線から光線のサブセットを求めるための前記手段が、ライティングおよび差分レンダリング技法を前記環境に適用すること、ならびにその結果としてのシャドー情報を解析することを含む請求項7に記載の装置。
10. 光線の前記サブセットに関連する時間コヒーレンス情報を2レベル階層キャッシュ内に格納するための手段をさらに備え、第1のレベルが画面空間内の情報を格納し、第2のレベルがオブジェクト空間内の情報を格納する請求項8に記載の装置。
11. 前記照明データを生成するための前記手段が、
    前記少なくとも1つのビデオフレームを輝度成分および色成分に変換するための手段と、
    前記輝度成分をノイズ除去して前記照明データを抽出するための手段と
    を備える請求項8に記載の装置。
12. プロセッサに、請求項1から6のいずれか一項に記載の方法を実行させるように構成されたプロセッサ可読命令を含むプロセッサ可読非一時的記録媒体。