JP2020513699A5 - - Google Patents

Claims (15)

1. 画像を表示するためのプロジェクタのシステムを自動的に校正するための方法であって、
   少なくとも１つのプロジェクタから投射面へプロジェクタ出力の画素を選択的に投射するステップと、
   前記投射面に対して動かすことが可能な少なくとも１つのセンサによって、前記投射面にわたり投射された前記プロジェクタ出力の前記画素を感知するステップと、
   前記選択的に投射された画素および前記感知された画素に基づいてプロジェクタ／スクリーンマッピングを導出するステップと、
   前記プロジェクタ／スクリーンマッピングに基づいて画素補正関数を導出するステップと、
   グラフィックプロセッサユニット（ＧＰＵ）のグラフィカルパイプライン内のマッピングメッシュにテクスチャマップを適用することによって前記画素補正関数を格納するステップと、
   少なくともミスアライメントを補正する補正画素データを生成するために、入力画像画素データに前記画素補正関数を適用するステップと、
   前記補正画素データを用いて前記プロジェクタを駆動するステップと、
   表示するための最終画像の前記投射面における正しい位置を感知するための少なくとも２つのアクティブＬＥＤマーカを提供するステップと
   を含み、
   前記少なくとも２つのアクティブＬＥＤマーカは、
   前記少なくとも２つのＬＥＤマーカを順にオンにすることと、
   センサ／マーカ位置を導出することと、
   マーカ／画像マッピングを導出することと、
   前記センサ／マーカ位置と前記マーカ／画像マッピングとを構成することと
   によって、前記最終画像の前記投射面における前記正しい位置を感知する、方法。
2. 前記画素補正関数は、共通領域における複数の投射のミスアライメント、又は、投射画像にわたる強度のばらつき、又は、投射画像にわたる欠陥、又は、色収差、又は、回転歪み、又は、前記入力画像の滑らかなワーピングの実行を補正する、請求項１に記載の方法。
3. 前記テクスチャマップは、（ａ）前記画素補正関数の一部が、前記グラフィカルパイプラインと前記プロジェクタとの間で、または前記プロジェクタ内で直接、前記画素データに適用されるように、又は、（ｂ）前記プロジェクタが、前記グラフィカルパイプライン内の前記補正画素データから駆動されるように、前記グラフィックプロセッサユニット（ＧＰＵ）の前記グラフィカルパイプライン内の前記マッピングメッシュに適用される、請求項１に記載の方法。
4. 複数のプロジェクタが提供され、前記プロジェクタの各々は、前記プロジェクタの前記グラフィカルパイプラインの各々に前記テクスチャマップの一部を備え、又は、各複数色に個別のテクスチャマップが提供され、又は、前記プロジェクタ出力は、前記投射面からずれた位置にある光学センサによって感知され、又は、前記光学センサは、少なくとも１つのカメラを備える、請求項１に記載の方法。
5. 前記画素補正関数は、重複する画素アレイのミスアライメントを補正する、又は、重複する投射領域をブレンドする、請求項４に記載の方法。
6. 前記プロジェクタ／スクリーンマッピングを導出するステップは、
   センサ／スクリーンマッピングを導出するステップと、
   プロジェクタ／センサマッピングを導出するステップと、
   前記センサ／スクリーンマッピングと前記プロジェクタ／センサマッピングとを構成することによって前記プロジェクタ／スクリーンマッピングを導出するステップと
   を含む、請求項４に記載の方法。
7. 前記センサ／スクリーンマッピングを導出するステップは、
   前記投射面に校正パターンを投射するステップと、
   前記光学センサで前記投射された校正パターンを見ることによってセンサ空間内の画素と投射面位置とのマッピングを作成するステップと
   を含む、請求項６に記載の方法。
8. 前記プロジェクタ／センサマッピングを導出するステップは、前記プロジェクタ出力を感知する間にプロジェクタ画素を選択的に駆動するステップを含む、請求項７に記載の方法。
9. 前記プロジェクタ出力は、平坦面に投射され、又は、曲面に投射され、又は、不規則面に投射される、請求項１に記載の方法。
10. 観察者の位置を測定するステップと、
    前記観察者の位置に応答して画像画素データにリアルタイム視差補正を実行するステップと
    を更に含む、請求項１に記載の方法。
11. 前記観察者の目の各々に異なる画像を提供するステップを更に含み、又は、前記観察者の目の各々にフレームトリガシャッタを提供するステップを更に含み、又は、投射偏光制御を提供するステップを更に含み、又は、赤／青色付きグラスを提供するステップを更に含み、又は、
    複数色を投射するステップと、及び
    前記観察者の目の各々に個別の狭帯域色フィルタを用いるステップと
    を更に含む、請求項１０に記載の方法。
12. 画像を表示するためのプロジェクタのセットを自動的に校正するためのシステムであって、
    投射面にプロジェクタ出力を投射するための少なくとも１つのプロジェクタと、
    前記投射面にわたり投射された前記プロジェクタ出力を感知するための、前記投射面に対して動かすことが可能な少なくとも１つのセンサと、
    表示するための最終画像の前記投射面における正しい位置を感知するための少なくとも２つのアクティブＬＥＤマーカと、
    プロジェクタ画素を選択的に駆動し、前記少なくとも１つのセンサからの前記感知されたプロジェクタ出力を読み取ることによって、プロジェクタ／スクリーンマッピングを決定し、
    少なくともミスアライメントを補正するために入力画像画素データに画素補正関数を適用するために構成された少なくとも１つのプロセッサであって、前記少なくとも１つのプロセッサは、前記補正画素データを用いて前記プロジェクタを駆動し、前記画素補正関数は、前記プロジェクタ／スクリーンマッピングに基づいてプロジェクタ座標空間とスクリーン座標空間との間でマッピングする、少なくとも１つのプロセッサと
    を備え、
    前記少なくとも２つのアクティブＬＥＤマーカは、
    前記少なくとも２つのＬＥＤマーカを順にオンにすることと、
    センサ／マーカ位置を導出することと、
    マーカ／画像マッピングを導出することと、
    前記センサ／マーカ位置と前記マーカ／画像マッピングとを構成することと
    によって、表示するための前記最終画像の前記投射面における前記正しい位置を感知する、システム。
13. 画像を表示するためのプロジェクタのシステムを自動的に校正するための方法であって、
    少なくとも１つのプロジェクタから投射面に画素を選択的に投射するステップと、
    前記投射面にわたって投射された前記画素を感知するステップと、
    誤検出されたまたは誤ラベル付きの構造化光符号化点を除去するステップと、
    前記選択的に投射された画素および前記感知された画素に基づいて、プロジェクタ／スクリーンマッピングを導出するステップと、
    前記プロジェクタ／スクリーンマッピングに基づいて、画素補正関数を導出するステップと、
    前記画素補正関数を格納するステップと、
    少なくともミスアライメントを補正する補正画素データを生成するために、入力画像画素データに前記画素補正関数を適用するステップと、
    前記補正画素データを用いて前記プロジェクタを駆動するステップと、を含み、
    前記誤検出されたまたは誤ラベル付きの構造化光符号化点を除去するステップは、
    前記プロジェクタから前記投射面に校正パターン画素を選択的に投射するステップと、
    前記投射面にわたり投射された前記パターン画素を感知するステップと、
    機械学習プロセスによって、誤ったまたは誤ラベル付きの構造化光符号化点を検出するステップと、
    前記検出された校正パターンにおける誤ったまたは誤ラベル付きの校正パターン点を補正または削除するステップと、を含む、方法。
14. 前記誤検出されたまたは誤ラベル付きの構造化光符号化点は、機械学習プロセスによって除去される、請求項１３に記載の方法。
15. 前記投射面は、不規則面である、請求項１３に記載の方法。