JP2021185681A5 - 撮像システム、撮像装置、動画表示装置、画像処理装置、方法およびプログラム。 - Google Patents

Claims (15)

1. 撮像システムであって、
   複数のフレームの画像を撮像する撮像手段と、
   所定の方向を基準方向として設定する設定手段と、
   前記基準方向に対する所定の物体の傾きを検出する検出手段と、
   前記検出された前記傾きから得られる複数の傾斜角データに基づいて、前記複数のフレームの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行う補正手段と、
   前記傾き補正の前または後に、前記複数のフレームに基づいて全天球動画を生成する全天球動画生成手段と
   を含む、撮像システム。
2. 前記複数のフレームの画像各々は、複数の部分画像を含み、前記補正手段は、前記複数のフレーム各々において、前記複数の部分画像に対し、傾き補正を行うことを特徴とし、前記全天球動画生成手段は、前記複数のフレーム各々において、傾き補正がされた前記複数の部分画像から、傾き補正された全天球画像を生成することを特徴とする、請求項１に記載の撮像システム。
3. 前記複数のフレームの画像各々は、複数の部分画像を含み、前記全天球動画生成手段は、前記複数のフレーム各々において、前記複数の部分画像から前記全天球画像を生成することを特徴とし、前記補正手段は、前記複数のフレーム各々において、生成された前記全天球画像に対し、傾き補正を行うことを特徴とする、請求項１に記載の撮像システム。
4. 前記検出手段が検出する前記所定の物体の傾きとは、少なくとも撮像手段の傾き、前記検出手段の傾き、または、前記撮像された複数のフレームの画像の傾きである、請求項１～３のいずれか１項に記載の撮像システム。
5. 前記複数の傾斜角データは、記録手段に時系列で記録され、前記複数の傾斜角データは、前記複数のフレームの画像のフレームレートと同じレートで記録されるか、または、前記フレームレートと同じレートでない場合は前記複数の傾斜角データと前記フレームレートを所定のレートで対応させて記録される、請求項１～４のいずれか１項に記載の撮像システム。
6. 前記所定のレートで対応させて記録されることは、前記フレームレートでリサンプリングし、前記複数の傾斜角データと前記フレームレートとを一対一で対応させることを含む、請求項５に記載の撮像システム。
7. 複数のフレームの画像を撮像する撮像手段と、
   所定の方向を基準方向として設定する設定手段と、
   前記基準方向に対する所定の物体の傾きを検出する検出手段と、
   前記検出された前記傾きから得られる複数の傾斜角データに基づいて、前記複数のフレームの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行う補正手段と、
   前記傾き補正の前または後に、前記複数のフレームに基づいて全天球動画を生成する全天球動画生成手段と
   を含む撮像装置。
8. 撮像システムが実行する方法であって、前記方法は、撮像システムに対し、
   所定の方向を基準方向として設定することと、
   撮像手段により複数のフレームの画像を撮像することと、
   検出手段により前記基準方向に対する所定の物体の傾きを検出することと、
   前記検出された前記傾きから得られる複数の傾斜角データに基づいて、前記複数のフレームの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行うことと、
   前記傾き補正を行うことの前または後に、前記複数のフレームに基づいて全天球動画を生成することと
   を実行させる方法。
9. コンピュータを撮像システムとして機能させるためのコンピュータ実行可能なプログラムであって、前記プログラムは、前記コンピュータを、
   複数のフレームの画像を撮像する撮像手段、
   所定の方向を基準方向として設定する設定手段、
   前記基準方向に対する所定の物体の傾きを検出する検出手段、
   前記検出された前記傾きから得られる複数の傾斜角データに基づいて、前記複数のフレームの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行う補正手段、および、
   前記傾き補正の前または後に、前記複数のフレームに基づいて全天球動画を生成する全天球動画生成手段
   として機能させる、コンピュータ実行可能なプログラム。
10. 動画表示装置であって、
    所定の方向を基準方向として設定する設定手段と、
    撮像した複数のフレームの画像、各画像に対応する画像撮像時の前記基準方向に対する所定の物体の傾きを示す複数の傾斜角データを受け取る情報取得手段と、
    前記複数の傾斜角データに基づいて、前記複数のフレームの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行う補正手段と、
    前記傾き補正の前または後に、前記複数のフレームに基づいて全天球動画を生成する全天球動画生成手段と
    を含む、動画表示装置。
11. 動画表示方法であって、前記方法は、動画表示装置に対し、
    所定の方向を基準方向として設定することと、
    撮像した複数のフレームの画像、各画像に対応する画像撮像時の前記基準方向に対する所定の物体の傾きを示す複数の傾斜角データを受け取ることと、
    前記複数の傾斜角データに基づいて、前記複数のフレームの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行うことと、
    前記傾き補正を行うことの前または後に、前記複数のフレームに基づいて全天球動画を生成することと
    を実行させる方法。
12. コンピュータを動画表示装置として機能させるためのコンピュータ実行可能なプログラムであって、前記コンピュータを、
    所定の方向を基準方向として設定する設定手段、
    撮像した複数のフレームの画像、各画像に対応する画像撮像時の前記基準方向に対する所定の物体の傾きを示す複数の傾斜角データを受け取る情報取得手段、
    前記複数の傾斜角データに基づいて、前記複数のフレームの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行う補正手段、および
    前記傾き補正の前または後に、前記複数のフレームに基づいて全天球動画を生成する全天球動画生成手段
    として機能させる、プログラム。
13. 全天球動画を生成するための画像処理装置であって、
    所定の方向を基準方向として設定する設定手段と、
    複数のフレームデータからなる画像データと、複数の光学系により前記画像データの撮像を開始してから終了までの間の基準方向に対する所定の物体の傾きを示す複数の傾斜角のデータであり、前記複数のフレームデータと関連付けられた複数の傾斜角データと、を有する全天球動画を生成するためのデータのデータ構造を読み出す読出手段と、
    前記複数の傾斜角データに基づいて、前記複数のフレームデータの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行う補正手段と、
    前記傾き補正の前または後に、前記複数のフレームに基づいて全天球動画を生成する動画生成手段と
    を含む、画像処理装置。
14. 画像処理方法であって、前記方法は、画像処理装置に対し、
    所定の方向を基準方向として設定することと、
    複数のフレームデータからなる画像データと、複数の光学系により前記画像データの撮像を開始してから終了までの間の基準方向に対する所定の物体の傾きを示す複数の傾斜角のデータであり、前記複数のフレームデータと関連付けられた複数の傾斜角データと、を有する全天球動画を生成するためのデータのデータ構造を読み出すことと、
    前記複数の傾斜角データに基づいて、前記複数のフレームデータの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行うことと、
    前記傾き補正の前または後に、前記複数のフレームに基づいて全天球動画を生成することと
    を実行させる方法。
15. コンピュータを、全天球動画を生成するための画像処理装置でとして機能させるためのコンピュータ実行可能なプログラムであって、前記コンピュータを、
    所定の方向を基準方向として設定する設定手段、
    複数のフレームデータからなる画像データと、複数の光学系により前記画像データの撮像を開始してから終了までの間の基準方向に対する所定の物体の傾きを示す複数の傾斜角のデータであり、前記複数のフレームデータと関連付けられた複数の傾斜角データと、を有する全天球動画を生成するためのデータのデータ構造を読み出す読出手段、
    前記複数の傾斜角データに基づいて、前記複数のフレームデータの画像各々について得られる全天球画像上で傾きが補正されるよう前記複数のフレームに関し、傾き補正を行う補正手段、および
    前記傾き補正の前または後に、前記複数のフレームに基づいて全天球動画を生成する動画生成手段
    として機能させる、プログラム。