JPWO2020023383A5 - - Google Patents

Description

本開示の付加的および他の目的、特徴、および利点は、詳細な説明、図、および請求項に説明される。
本発明は、例えば、以下を提供する。
（項目１）
仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
レンダリングされた仮想コンテンツデータを受信することであって、前記レンダリングされた仮想コンテンツデータは、遠深度を含む、ことと、
光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
前記レンダリングされた仮想コンテンツデータ、前記遠深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することと
を含む、方法。
（項目２）
前記レンダリングされた仮想コンテンツデータは、近仮想オブジェクトおよび遠仮想オブジェクトに対応し、
前記ワーピングされたレンダリングされた仮想コンテンツデータは、ワーピングされた近仮想オブジェクトおよびワーピングされた遠仮想オブジェクトに対応する、
項目１に記載の方法。
（項目３）
前記近仮想オブジェクトと前記ワーピングされた近仮想オブジェクトとの間の第１の位置偏移は、前記遠仮想オブジェクトと前記ワーピングされた遠仮想オブジェクトとの間の第２の位置偏移に実質的に等しい、項目２に記載の方法。
（項目４）
前記レンダリングされた仮想コンテンツデータ、前記遠深度、および前記移動データに基づいて、前記ワーピングされたレンダリングされた仮想コンテンツデータを生成することは、前記レンダリングされた仮想コンテンツデータと比較して、視差関連アーチファクトを低減させる、項目１に記載の方法。
（項目５）
前記視差関連アーチファクトは、ディスオクルージョンアーチファクトである、項目４に記載の方法。
（項目６）
前記視差関連アーチファクトは、スミアアーチファクトである、項目４に記載の方法。
（項目７）
前記視差関連アーチファクトは、ジッタアーチファクトである、項目４に記載の方法。
（項目８）
前記レンダリングされた仮想コンテンツデータは、第１の深度セグメントに対応し、前記方法はさらに、
第２の深度セグメントに対応する第２のレンダリングされた仮想コンテンツデータを受信することであって、前記第２のレンダリングされた仮想コンテンツデータは、第２の遠深度を含む、ことと、
前記第２のレンダリングされた仮想コンテンツデータ、前記第２の遠深度、および前記移動データに基づいて、ワーピングされた第２のレンダリングされた仮想コンテンツデータを生成することと
を含む、項目１に記載の方法。
（項目９）
仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
レンダリングされた仮想コンテンツデータを受信することであって、前記レンダリングされた仮想コンテンツデータは、遠深度および近深度を含む、ことと、
光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
前記レンダリングされた仮想コンテンツデータ、前記遠深度、前記近深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することと
を含む、方法。
（項目１０）
前記レンダリングされた仮想コンテンツデータ、前記遠深度、前記近深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することは、前記遠深度および前記近深度を平均することを含む、項目９に記載の方法。
（項目１１）
仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
レンダリングされた仮想コンテンツデータを受信することと、
光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
ユーザ視線を示す視線データを受信することと、
前記視線データに基づいて、深度を決定することと、
前記レンダリングされた仮想コンテンツデータ、前記深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することと
を含む、方法。
（項目１２）
仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
レンダリングされた仮想コンテンツデータを受信することと、
光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
メッシュデータを前記レンダリングされた仮想コンテンツデータから生成することと、
深度データを前記メッシュデータから決定することと、
前記レンダリングされた仮想コンテンツデータ、前記メッシュデータ、前記深度データ、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することと
を含む、方法。
（項目１３）
前記メッシュデータを生成するとき、メッシュサイズを調節することをさらに含む、項目１２に記載の方法。
（項目１４）
前記メッシュデータは、グリッドメッシュを使用して生成される、項目１２に記載の方法。
（項目１５）
前記深度データは、前記メッシュ内の複数の深度および前記複数の深度のそれぞれにおける前記メッシュのコンテンツに基づいて決定される、項目１２に記載の方法。
（項目１６）
仮想オブジェクトの深度を決定するためのコンピュータ実装方法であって、
複数の深度において、第１の眼に対応する前記仮想オブジェクトの第１の画像を第２の眼に対応する前記仮想オブジェクトの第２の画像にわたって再投影し、複数の個別の組み合わせ画像を生成することと、
前記複数の個別の組み合わせ画像のそれぞれにおける再投影誤差を測定し、複数の再投影誤差を生成することと、
前記複数の個別の組み合わせ画像の組み合わせ画像に対応する前記複数の再投影誤差内の最小再投影誤差を識別することと、
前記組み合わせ画像に対応する深度を前記仮想オブジェクトの深度として識別することと
を含む、方法。
（項目１７）
前記仮想オブジェクトの深度は、前記仮想オブジェクトを第１の視点から第２の視点にワーピングするために使用される、項目１６に記載の方法。
（項目１８）
前記複数の深度は、６４個の深度から成る、項目１６に記載の方法。
（項目１９）
前記複数の深度はそれぞれ、前記仮想オブジェクトの第１の画像を再投影する際の１ピクセル差に対応する、項目１６に記載の方法。
（項目２０）
最小安定化深度を決定するためのコンピュータ実装方法であって、
視点（ＰＯＶ）移動量を取得することと、
前記ＰＯＶ移動量に基づいて、安定化深度と前記安定化深度におけるピクセル移動との間の関係を決定することと、
ディスプレイシステムのための最大検知不能ピクセル移動を取得することと、
前記ディスプレイシステムのための最大検知不能ピクセル移動に対応する安定化深度を前記ディスプレイシステムの最小安定化深度として識別することと
を含む、方法。
（項目２１）
視点が変化するとき、視認者に対して前記最小安定化深度より近いコンテンツのみをワーピングすることをさらに含む、項目２０に記載の方法。
（項目２２）
前記安定化深度と前記安定化深度におけるピクセル移動との間の関係は、逆相関である、項目２０に記載の方法。

Claims (12)

1. 仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
   レンダリングされた仮想コンテンツデータを受信することであって、前記レンダリングされた仮想コンテンツデータは、単一の遠深度を含み、前記単一の遠深度は、現在表示されている視野内の任意の仮想オブジェクトの最遠深度である、ことと、
   光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
   前記レンダリングされた仮想コンテンツデータ、前記単一の遠深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することと
   を含み、
   前記レンダリングされた仮想コンテンツデータは、近仮想オブジェクトおよび遠仮想オブジェクトに対応し、
   前記ワーピングされたレンダリングされた仮想コンテンツデータは、ワーピングされた近仮想オブジェクトおよびワーピングされた遠仮想オブジェクトに対応し、
   前記近仮想オブジェクトと前記ワーピングされた近仮想オブジェクトとの間の第１の位置偏移は、前記遠仮想オブジェクトと前記ワーピングされた遠仮想オブジェクトとの間の第２の位置偏移に実質的に等しい、方法。
2. 前記レンダリングされた仮想コンテンツデータ、前記遠深度、および前記移動データに基づいて、前記ワーピングされたレンダリングされた仮想コンテンツデータを生成することは、前記レンダリングされた仮想コンテンツデータと比較して、視差関連アーチファクトを低減させる、請求項１に記載の方法。
3. 前記視差関連アーチファクトは、ディスオクルージョンアーチファクトである、請求項２に記載の方法。
4. 仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
   レンダリングされた仮想コンテンツデータを受信することであって、前記レンダリングされた仮想コンテンツデータは、単一の遠深度を含み、前記単一の遠深度は、現在表示されている視野内の任意の仮想オブジェクトの最遠深度である、ことと、
   光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
   前記レンダリングされた仮想コンテンツデータ、前記単一の遠深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することと
   を含み、
   前記レンダリングされた仮想コンテンツデータ、前記遠深度、および前記移動データに基づいて、前記ワーピングされたレンダリングされた仮想コンテンツデータを生成することは、前記レンダリングされた仮想コンテンツデータと比較して、視差関連アーチファクトを低減させ、
   前記視差関連アーチファクトは、スミアアーチファクトおよびジッタアーチファクトから成る群から選択される、方法。
5. 仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
   レンダリングされた仮想コンテンツデータを受信することであって、前記レンダリングされた仮想コンテンツデータは、単一の遠深度を含み、前記単一の遠深度は、現在表示されている視野内の任意の仮想オブジェクトの最遠深度である、ことと、
   光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
   前記レンダリングされた仮想コンテンツデータ、前記単一の遠深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することであって、前記レンダリングされた仮想コンテンツデータは、第１の深度セグメントに対応する、ことと、
   第２の深度セグメントに対応する第２のレンダリングされた仮想コンテンツデータを受信することであって、前記第２のレンダリングされた仮想コンテンツデータは、第２の遠深度を含む、ことと、
   前記第２のレンダリングされた仮想コンテンツデータ、前記第２の遠深度、および前記移動データに基づいて、ワーピングされた第２のレンダリングされた仮想コンテンツデータを生成することと
   を含む、方法。
6. 仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
   レンダリングされた仮想コンテンツデータを受信することであって、前記レンダリングされた仮想コンテンツデータは、単一の遠深度および単一の近深度を含み、前記単一の遠深度は、現在表示されている視野（ＦＯＶ）内の任意の仮想オブジェクトの最遠深度であり、前記単一の近深度は、前記現在表示されているＦＯＶ内の任意の仮想オブジェクトの最近深度である、ことと、
   光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
   前記レンダリングされた仮想コンテンツデータ、前記単一の遠深度、前記単一の近深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することであって、前記レンダリングされた仮想コンテンツデータは、第１の深度セグメントに対応する、ことと、
   第２の深度セグメントに対応する第２のレンダリングされた仮想コンテンツデータを受信することであって、前記第２のレンダリングされた仮想コンテンツデータは、第２の遠深度を含む、ことと、
   前記第２のレンダリングされた仮想コンテンツデータ、前記第２の遠深度、および前記移動データに基づいて、ワーピングされた第２のレンダリングされた仮想コンテンツデータを生成することと
   を含む、方法。
7. 前記レンダリングされた仮想コンテンツデータ、前記遠深度、前記近深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することは、前記遠深度および前記近深度を平均することを含む、請求項６に記載の方法。
8. 仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
   レンダリングされた仮想コンテンツデータを受信することと、
   前記レンダリングされた仮想コンテンツデータの深度を複数の離散深度スライスに分割することと、
   光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
   ユーザ視線を示す視線データを受信することと、
   前記視線データに基づいて選択された離散深度スライスの深度として、単一の深度を決定することと、
   前記レンダリングされた仮想コンテンツデータ、前記単一の深度、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することであって、前記レンダリングされた仮想コンテンツデータは、第１の深度セグメントに対応する、ことと、
   第２の深度セグメントに対応する第２のレンダリングされた仮想コンテンツデータを受信することであって、前記第２のレンダリングされた仮想コンテンツデータは、第２の遠深度を含む、ことと、
   前記第２のレンダリングされた仮想コンテンツデータ、前記第２の遠深度、および前記移動データに基づいて、ワーピングされた第２のレンダリングされた仮想コンテンツデータを生成することと
   を含む、方法。
9. 仮想コンテンツをワーピングするためのコンピュータ実装方法であって、
   レンダリングされた仮想コンテンツデータを受信することと、
   光学軸に直交する方向におけるユーザ移動を示す移動データを受信することと、
   メッシュデータを前記レンダリングされた仮想コンテンツデータから生成することと、
   深度データを前記メッシュデータから決定することと、
   前記仮想コンテンツデータ内の１つ以上のレンダリングされた仮想オブジェクトを前記仮想オブジェクトの再構築されたメッシュに簡略化し、前記仮想オブジェクトの前記再構築されたメッシュを含む簡略化されたレンダリングされた仮想コンテンツを生産することと、
   前記簡略化されたレンダリングされた仮想コンテンツデータ、前記メッシュデータ、前記深度データ、および前記移動データに基づいて、ワーピングされたレンダリングされた仮想コンテンツデータを生成することと
   を含む、方法。
10. 前記メッシュデータを生成するとき、メッシュサイズを調節することをさらに含む、請求項９に記載の方法。
11. 前記メッシュデータは、グリッドメッシュを使用して生成される、請求項９に記載の方法。
12. 前記深度データは、前記メッシュ内の複数の深度および前記複数の深度のそれぞれにおける前記メッシュのコンテンツに基づいて決定される、請求項９に記載の方法。