JP2017021430A5 - パノラマビデオデータの処理装置、処理方法及び処理プログラム - Google Patents

Claims (8)

1. パノラマビデオデータの処理装置であって、
   フレームの一部の領域であるパッチから特徴点を抽出する抽出手段と、
   前記パッチの特徴点に対応する、前記フレームの次のフレームの画素を判定する判定手段と、
   前記パッチの特徴点と、前記判定手段が判定した画素の位置に基づき、前記パッチを前記次のフレームに射影する射影行列を決定する決定手段と、
   前記射影行列により前記パッチを射影した前記次のフレームの第１領域に基づき、前記フレームと前記次のフレームの角度差を判定する角度判定手段と、
   前記角度判定手段が判定する、前記パノラマビデオデータの連続するフレーム間それぞれの角度差に基づき前記パノラマビデオデータを変換する変換手段と、
   を備えていることを特徴とするパノラマビデオデータの処理装置。
2. 前記変換手段は、前記パノラマビデオデータの連続するフレーム間の角度差が減少する様に前記パノラマビデオデータを変換することを特徴とする請求項１に記載のパノラマビデオデータの処理装置。
3. 前記角度判定手段は、前記フレームと前記次のフレームの角度差として、互いに直交する第１方向、第２方向及び第３方向それぞれを回転軸とする３つの角度差を判定することを特徴とする請求項１又は２に記載のパノラマビデオデータの処理装置。
4. 前記角度判定手段は、前記パッチ内の位置と前記第１領域の対応する位置との水平方向の距離に基づき前記第１方向を回転軸とする第１角度差を求め、前記パッチ内の位置と前記第１領域の対応する位置との垂直方向の距離に基づき前記第２方向を回転軸とする第２角度差を求め、前記パッチの各辺と前記第１領域の対応する辺との角度差に基づき前記第３方向を回転軸とする第３角度差を求めることを特徴とする請求項３に記載のパノラマビデオデータの処理装置。
5. 前記角度判定手段は、前記パッチの形状に対する前記第１領域の形状の変化に基づき前記角度差の信頼度の有無を判定し、
   前記変換手段は、信頼度が無いと前記角度判定手段が判定した角度差を、前記パノラマビデオデータの変換に使用しないことを特徴とする請求項１から４のいずれか１項に記載のパノラマビデオデータの処理装置。
6. 前記変換手段は、前記パノラマビデオデータの連続するフレーム間の角度差をローパスフィルタによりフィルタし、フィルタ後の角度差に基づき前記パノラマビデオデータを変換することを特徴とする請求項１から５のいずれか１項に記載のパノラマビデオデータの処理装置。
7. パノラマビデオデータを処理装置で処理する処理方法であって、
   フレームの一部の領域であるパッチから特徴点を抽出する抽出ステップと、
   前記パッチの特徴点に対応する、前記フレームの次のフレームの画素を判定する画素判定ステップと、
   前記パッチの特徴点と、前記判定ステップにおいて判定された画素の位置に基づき、前記パッチを前記次のフレームに射影する射影行列を決定する決定ステップと、
   前記射影行列により前記パッチを射影した前記次のフレームの第１領域に基づき、前記フレームと前記次のフレームの角度差を判定する角度判定ステップと、
   前記角度判定ステップにおいて判定された、前記パノラマビデオデータの連続するフレーム間それぞれの角度差に基づき前記パノラマビデオデータを変換する変換ステップと、
   を含むことを特徴とするパノラマビデオデータの処理方法。
8. 請求項１から６のいずれか１項に記載の処理装置としてコンピュータを機能させることを特徴とするパノラマビデオデータの処理プログラム。