JP2018514969A5 - - Google Patents

Description

上述した例示的な実施形態を参照することによって、多くのさらなる改変および変形が当業者によって提案されるであろう。実施形態は、例示的な目的のみで与えられ、本発明の範囲を限定するように意図されたものではなく、本発明の範囲は、付随する請求の範囲によってのみ確定される。特に、種々の実施形態からの種々の特徴事項は、適宜、相互に置き換え可能である。
［付記１］
キャプチャされたライトフィールド・データに関するメタデータを提供する方法であって、
前記ライトフィールド・データをキャプチャするために使用されるライトフィールド・カメラと、
前記ライトフィールド・データから得られたビューのマトリックスと、
前記ライトフィールド・データから得られたフォーカル・スタックと、
のうちの少なくとも１つの特性を記述するメタデータを集約するデータ・フォーマットを提供することを含む、前記方法。
［付記２］
ライトフィールド・データからの画像をレンダリングする方法であって、
前記ライトフィールド・データをキャプチャするために使用されるライトフィールド・カメラと、
前記ライトフィールド・データから得られたビューのマトリックスと、
前記ライトフィールド・データから得られたフォーカル・スタックと、
のうちの少なくとも１つの特性を記述するライトフィールド・データ・メタデータを取得することと、
前記メタデータによって提供される情報に基づいてライトフィールド・データをレンダ リングすることと、
を含む、前記方法。
［付記３］
前記メタデータは、ライト画像ファイルに集約される、付記１または２に記載の方法 。
［付記４］
前記ライトフィールド・データをキャプチャするために使用される前記ライトフィールド・カメラの特性を記述する前記メタデータは、
前記ライトフィールド・カメラのフォトセンサと、
前記ライトフィールド・カメラの主レンズと、
前記ライトフィールド・カメラのマイクロレンズ・アレイと、
の前記ライトフィールド・カメラの技術的な特徴のうちの１つ以上を規定するデータを含む、付記１〜３のいずれか１項に記載の方法。
［付記５］
前記ライトフィールド・カメラの前記フォトセンサを記述する前記メタデータは、
前記フォトセンサの空間解像度と、
前記フォトセンサのカラー・フィルタのカラー・サンプリングと、
前記フォトセンサの前記カラー・フィルタの透過率と、
前記フォトセンサの画素のダイナミック・レンジと、
画素によって出力される信号と入来する光との非線形的な関係を規定する色変換行列と、
前記フォトセンサの２つの隣接する画素間のピッチと、
非正方形の画素の形状比を規定するスケールファクタと、
のうちの１つ以上のパラメータを表すデータを含む、付記４に記載の方法。
［付記６］
前記ライトフィールド・カメラの前記主レンズを記述する前記メタデータは、
前記主レンズの焦点距離と、
瞳と前記焦点距離との比と、
前記主レンズの口径食モデルと、
のうちの１つ以上のパラメータを表すデータを含む、付記４または５に記載の方法。
［付記７］
前記ライトフィールド・カメラの前記マイクロレンズ・アレイを記述する前記メタデータは、
マイクロレンズ・アレイのパターンと、
前記マイクロレンズ・アレイ上に配列されたカラー・フィルタのパターンと、
前記マイクロレンズ・アレイの２つの隣接するマイクロレンズの間のピッチと、
マイクロレンズの形状比を規定するスケールファクタと、
キャリブレーションされたマイクロレンズ中心の数と、
１つ以上のマイクロレンズ中心の空間座標と、
のうちの１つ以上のパラメータを表すデータを含む、付記４〜６のいずれか１項に記載の方法。
［付記８］
前記メタデータは、ＸＬＭに準拠したマークアップ言語で規定される、付記１〜７のいずれか１項に記載の方法。
［付記９］
前記ライトフィールド・データから得られたビューのアレイの特性を記述する前記メタデータは、
前記アレイにおけるビューの数と、
１つまたは各ビューの空間解像度と、
ビューにおいて利用可能な色と、
ビューの参照点の空間座標と、
ビューの水平焦点距離および垂直焦点距離と、
のうちの１つ以上のパラメータを表すデータを含む、付記１〜８のいずれか１項に記載の方法。
［付記１０］
前記ライトフィールド・データから得られたフォーカル・スタックの特性を記述する前記メタデータは、
前記フォーカル・スタックにおけるフォーカスされたピクチャの数と、
前記フォーカスされたピクチャの空間解像度と、
前記フォーカスされたピクチャの焦点距離と、
のうちの１つ以上のパラメータを表すデータを含む、付記１〜９のいずれか１項に記載の方法。
［付記１１］
キャプチャされたライトフィールド・データに関するメタデータを提供する装置であって、
ライトフィールド・カメラによってキャプチャされたライトフィールド・データを取得するライトフィールド・データ取得モジュールと、
前記ライトフィールド・データをキャプチャするために使用されるライトフィールド・カメラと、
前記ライトフィールド・データから得られたビューのマトリックスと、
前記ライトフィールド・データから得られたフォーカル・スタックと、
のうちの少なくとも１つの特性を記述する集約メタデータを提供するデータフォーマッタと、
を含む、前記装置。
［付記１２］
規則的な格子構造に配列されたマイクロレンズのアレイと、
前記マイクロレンズの前記アレイから前記フォトセンサ上に投影された光をキャプチャするように構成されたフォトセンサであって、各々の組が前記マイクロレンズの前記アレイの各々のマイクロレンズに光学的に関連付けられている複数の組の画素を含む、前記フォトセンサと、
付記１１に記載されたメタデータを提供する装置と、
を含む、ライトフィールド撮像装置。
［付記１３］
ライトフィールド・データをキャプチャするために使用されるライトフィールド・カメラと、
前記ライトフィールド・データから得られたビューのマトリックスと、
前記ライトフィールド・データから得られたフォーカル・スタックと、
のうちの少なくとも１つの特性を記述するメタデータを使用して前記ライトフィールド・ データからの画像をレンダリングする装置であって、
プロセッサと、レンダリング・アプリケーション、前記ライトフィールド・データおよび前記メタデータを含むメモリとを含み、
前記レンダリング・アプリケーションは、前記プロセッサに、前記メタデータにおいて提供された情報に基づいて前記ライトフィールド・データをレンダリングさせるように構成されている、前記装置。
［付記１４］
ライトフィールド・カメラからキャプチャされたライトフィールド・データと、
前記ライトフィールド・データをキャプチャするために使用されるライトフィールド・カメラと、
前記ライトフィールド・データから得られたビューのマトリックスと、
前記ライトフィールド・データから得られたフォーカル・スタックと、
の少なくとも１つの特性を記述するメタデータと、
を含む、データ・パッケージ。
［付記１５］
プログラム可能な装置用のコンピュータ・プログラム製品であって、前記プログラム可能な装置にロードされ、かつ実行されたときに付記１〜１０のいずれか１項に記載された方法を実行するための命令のシーケンスを含む、前記コンピュータ・プログラム製品。