JP6164780B2 - 動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システム。 - Google Patents
動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システム。 Download PDFInfo
- Publication number
- JP6164780B2 JP6164780B2 JP2015193873A JP2015193873A JP6164780B2 JP 6164780 B2 JP6164780 B2 JP 6164780B2 JP 2015193873 A JP2015193873 A JP 2015193873A JP 2015193873 A JP2015193873 A JP 2015193873A JP 6164780 B2 JP6164780 B2 JP 6164780B2
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- angle
- rotation axis
- display device
- switching instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
Description
本発明は、動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システムに関する。
従来、被写体に対して複数のアングルから複数のカメラで撮影した動画像を表示する動画像処理表示システムが知られている（例えば、特許文献１参照。）。このような動画像処理表示システムは、動画像表示装置が、ユーザからの操作を受け付けてアングル切り替え指示を入力すると、異なるアングルの動画像に切り換えて表示するようになっている。
ここで、近年では、動画像の処理スピード及び通信スピードの向上や動画像共有サイトの浸透などを背景として、様々な動画像が見られるようになってきている。そのため、視聴者が動画像をより楽しく視聴することができるような種々の機能が要請されている。
ここで、近年では、動画像の処理スピード及び通信スピードの向上や動画像共有サイトの浸透などを背景として、様々な動画像が見られるようになってきている。そのため、視聴者が動画像をより楽しく視聴することができるような種々の機能が要請されている。
しかしながら、上記のような従来の動画像処理表示システムでは、被写体に対して様々なアングルの動画像に切り換えることができるものの、さらなる楽しみを得たいなどの視聴者の種々の要請に応えるものとしては十分ではないという問題がある。
本発明は、このような問題を解決するためになされたものである。その目的は、動画像を視聴する視聴者に対してエンタテイメント性を向上させることができる動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システムを提供することにある。
本願に関する動画像処理装置は、被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置であって、前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力手段と、前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力手段と、前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力手段とを備え、前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させ、前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる。
本願の一観点によれば、動画像を視聴する視聴者に対してエンタテイメント性を向上させることができる。
（実施形態）
以下、動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システムの実施形態について、図面を参照して説明する。
図１は、実施形態としての動画像処理表示装置（動画像処理表示システム）１を示すブロック図である。
動画像処理表示装置１は、装置全体を制御する制御部２と、ユーザからの各種操作を受け付ける操作部３と、動画像を表示する表示部４とを備えている。また、動画像処理表示装置１は、動画像データなどを記憶する記憶部５と、外部から動画像データを入力する入力部６とを備えている。
以下、動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システムの実施形態について、図面を参照して説明する。
図１は、実施形態としての動画像処理表示装置（動画像処理表示システム）１を示すブロック図である。
動画像処理表示装置１は、装置全体を制御する制御部２と、ユーザからの各種操作を受け付ける操作部３と、動画像を表示する表示部４とを備えている。また、動画像処理表示装置１は、動画像データなどを記憶する記憶部５と、外部から動画像データを入力する入力部６とを備えている。
操作部３は、例えば表示画面上のポインタを移動させるマウスやタッチパッド、ペン型デバイス、ボタンなどからなり、ユーザからの各種指示を受け付け、各種指示信号を制御部２に出力する。
表示部４は、例えばモニタなどからなり、制御部２から出力された動画像データを入力して動画像を表示する。なお、表示部４は、表示装置として機能するものである。
記憶部５は、例えばハードディスクやメモリなどからなり、入力部６が入力した動画像データや後述する第２の動画像データなどの他、各種プログラムや作業データなどを記憶する。
入力部６は、複数のカメラａ〜ｈから出力される動画像データを入力し、これら動画像データを制御部２に出力する。
表示部４は、例えばモニタなどからなり、制御部２から出力された動画像データを入力して動画像を表示する。なお、表示部４は、表示装置として機能するものである。
記憶部５は、例えばハードディスクやメモリなどからなり、入力部６が入力した動画像データや後述する第２の動画像データなどの他、各種プログラムや作業データなどを記憶する。
入力部６は、複数のカメラａ〜ｈから出力される動画像データを入力し、これら動画像データを制御部２に出力する。
制御部２は、例えばＣＰＵ等のプロセッサからなり、動画像処理装置として機能するものである。すなわち、動画像処理表示装置１は、表示装置としての表示部４と、動画像処理装置としての制御部２とが接続されて構成されている。
制御部２は、メイン制御部２１と、動画像データ出力制御部（動画像出力手段）２２と、アングル切り替え指示入力部（第１のアングル切り替え指示入力手段、第２のアングル切り替え指示入力手段）２３と、第１の位置変更指示入力部（第１の位置変更指示入力手段）２４とを備えている。また、制御部２は、第２の動画像データ生成部（遮断画像検出手段、他アングル画像検出手段）２５と、位置検出部２６と、トリミング制御部２７とを備えている。
制御部２は、メイン制御部２１と、動画像データ出力制御部（動画像出力手段）２２と、アングル切り替え指示入力部（第１のアングル切り替え指示入力手段、第２のアングル切り替え指示入力手段）２３と、第１の位置変更指示入力部（第１の位置変更指示入力手段）２４とを備えている。また、制御部２は、第２の動画像データ生成部（遮断画像検出手段、他アングル画像検出手段）２５と、位置検出部２６と、トリミング制御部２７とを備えている。
メイン制御部２１は、制御部２内全体の制御を行う。
動画像データ出力制御部２２は、記憶部５に記憶された動画像データを読み出し、当該動画像データを表示部４に出力する。また、動画像データ出力制御部２２は、アングル切り替え指示入力部２３から出力されたアングル切り替え指示を入力すると、当該アングル切り替え指示に応じた動画像データに切り換えて、当該切り換えた動画像データを読み出して表示部４に出力する。また、動画像データ出力制御部２２は、操作部３から出力された第２の回転軸設定指示を入力すると、第２の動画像データの生成指示を第２の動画像データ生成部２５に出力する。さらに、動画像データ出力制御部２２は、トリミング制御部２７から出力されたトリミング指示を入力し、当該トリミング指示を表示部４に出力する。
アングル切り替え指示入力部２３は、操作部３から出力された各種アングル切り替え指示を入力し、当該アングル切り替え指示を動画像データ出力制御部２２に出力する。
第１の位置変更指示入力部２４は、操作部３から出力された第１の回転軸の位置変更指示を入力すると、当該位置変更指示をトリミング制御部２７に出力する。
動画像データ出力制御部２２は、記憶部５に記憶された動画像データを読み出し、当該動画像データを表示部４に出力する。また、動画像データ出力制御部２２は、アングル切り替え指示入力部２３から出力されたアングル切り替え指示を入力すると、当該アングル切り替え指示に応じた動画像データに切り換えて、当該切り換えた動画像データを読み出して表示部４に出力する。また、動画像データ出力制御部２２は、操作部３から出力された第２の回転軸設定指示を入力すると、第２の動画像データの生成指示を第２の動画像データ生成部２５に出力する。さらに、動画像データ出力制御部２２は、トリミング制御部２７から出力されたトリミング指示を入力し、当該トリミング指示を表示部４に出力する。
アングル切り替え指示入力部２３は、操作部３から出力された各種アングル切り替え指示を入力し、当該アングル切り替え指示を動画像データ出力制御部２２に出力する。
第１の位置変更指示入力部２４は、操作部３から出力された第１の回転軸の位置変更指示を入力すると、当該位置変更指示をトリミング制御部２７に出力する。
第２の動画像データ生成部２５は、動画像データ出力制御部２２から出力された第２の動画像データの生成指示を入力すると、後述する第２の動画像データを生成し、記憶部５に記憶する。また、第２の動画像データ生成部２５は、第２の動画像データを生成するときに、ターゲットとする被写体が他の被写体によって遮られている遮断画像データを検出し、また、ターゲットとする被写体が他の被写体によって遮られていない非遮断画像データを検出する。
位置検出部２６は、動画像に写る被写体の位置を検出するものであり、例えば、変位する被写体の位置を画像データ間の差分により検出する。
トリミング制御部２７は、第１の位置変更指示入力部２４が出力した位置変更指示を入力すると、第１の回転軸の近傍の一部領域のみをトリミングしたトリミング指示および位置変更指示を動画像データ出力制御部２２に出力する。
位置検出部２６は、動画像に写る被写体の位置を検出するものであり、例えば、変位する被写体の位置を画像データ間の差分により検出する。
トリミング制御部２７は、第１の位置変更指示入力部２４が出力した位置変更指示を入力すると、第１の回転軸の近傍の一部領域のみをトリミングしたトリミング指示および位置変更指示を動画像データ出力制御部２２に出力する。
次いで、本実施形態におけるカメラや被写体の位置関係について説明する。
図２に示すように、カメラａ〜ｈは、中心点Ｐに対して径方向に均等距離を空けて、かつ周方向に均等間隔を空けてそれぞれ設置される。このときの中心点Ｐとカメラａ〜ｈは、中心点Ｐを交点としたＸＹ座標として設置される。例えば、カメラａ〜ｈが、中心点Ｐから径方向外方に５ｍ空けて、かつ周方向に均等間隔を空けて設置される。つまり、中心点Ｐ（０，０）、カメラａ（０，−５）、カメラｂ（−３．５，−３．５）、カメラｃ（−５，０）、カメラｄ（−３．５，３．５）、カメラｅ（０，５）、カメラｆ（３．５，３．５）、カメラｇ（５，０）、カメラｈ（３．５，−３．５）の座標位置にカメラａ〜ｈが設置される。
このとき、カメラａ〜ｈの各光軸は、すべて中心点Ｐを通り、対向するカメラの光軸はそれぞれ一致している。例えば、カメラａとｅ、カメラｂとｆ、カメラｃとｇ、カメラｄとｈは、それぞれ互いに対向しており、それぞれの光軸は中心点Ｐを通り互いに一致している。
また、カメラａ〜ｈの焦点距離は、すべて５０ｍｍに設定されている。
これらカメラａ〜ｈの座標位置情報及び焦点距離は、ユーザによる操作部３の操作によって、記憶部５にあらかじめ記憶される。
図２に示すように、カメラａ〜ｈは、中心点Ｐに対して径方向に均等距離を空けて、かつ周方向に均等間隔を空けてそれぞれ設置される。このときの中心点Ｐとカメラａ〜ｈは、中心点Ｐを交点としたＸＹ座標として設置される。例えば、カメラａ〜ｈが、中心点Ｐから径方向外方に５ｍ空けて、かつ周方向に均等間隔を空けて設置される。つまり、中心点Ｐ（０，０）、カメラａ（０，−５）、カメラｂ（−３．５，−３．５）、カメラｃ（−５，０）、カメラｄ（−３．５，３．５）、カメラｅ（０，５）、カメラｆ（３．５，３．５）、カメラｇ（５，０）、カメラｈ（３．５，−３．５）の座標位置にカメラａ〜ｈが設置される。
このとき、カメラａ〜ｈの各光軸は、すべて中心点Ｐを通り、対向するカメラの光軸はそれぞれ一致している。例えば、カメラａとｅ、カメラｂとｆ、カメラｃとｇ、カメラｄとｈは、それぞれ互いに対向しており、それぞれの光軸は中心点Ｐを通り互いに一致している。
また、カメラａ〜ｈの焦点距離は、すべて５０ｍｍに設定されている。
これらカメラａ〜ｈの座標位置情報及び焦点距離は、ユーザによる操作部３の操作によって、記憶部５にあらかじめ記憶される。
符号Ａｒは、カメラａ〜ｈによって撮影される全撮影領域を示すものである。すなわち、カメラａ〜ｈによって、全撮影領域Ａｒに示す範囲が撮影される。さらに、カメラａが通常撮影するのは、全撮影領域Ａｒのうち、カメラａの光軸に対して中心点Ｐにおいて直角に延びる仮想線の範囲であり、この仮想線が、カメラａによって撮影される全領域ａ１となる。同様にして、カメラｂは全領域ｂ１、カメラｃは全領域ｃ１、カメラｄは全領域ｄ１、カメラｅは全領域ｅ１、カメラｆは全領域ｆ１、カメラｇは全領域ｇ１およびカメラｈは全領域ｈ１の範囲を撮影する。
なお、図２において符号Ａ〜Ｅで示すのが、被写体である。
なお、図２において符号Ａ〜Ｅで示すのが、被写体である。
さらに、本実施形態におけるカメラａ〜ｈの動画像データについて説明する。
カメラａ〜ｈの動画像データは、中心点Ｐを中心として、画角サイズ、垂直に対する傾き、画面中心およびタイミングが、あらかじめ調整されて記憶部５に記憶されている。
また、図３（１）に示すように、カメラａ〜ｈの各動画像データは、各時間（タイミング）ごとの画像データ（フレーム）が複数集まって構成されている。例えば、カメラａの動画像データは、図２に示す位置座標（０，−５）において全領域ａ１を撮影した画像データａｔ１、ａｔ２、ａｔ３・・・が時間順に並べられて構成されたものである。すなわち、ここでは、一つ一つのフレームを表すときは「画像データ」とし、複数の画像データが時間順に並べられた集まりを表すときは「動画像データ」と記載するものとする。
また、各画像データには、カメラａ〜ｈの識別情報がそれぞれ埋め込まれている。ここでは、カメラａ〜ｈは、図２に示す位置にあらかじめ設置されていることから、カメラａ〜ｈの識別情報自体が、中心点Ｐに対するアングルの識別情報となる。そのため、ここでは、カメラａ〜ｈとアングルａ〜ｈとは対応している。
カメラａ〜ｈの動画像データは、中心点Ｐを中心として、画角サイズ、垂直に対する傾き、画面中心およびタイミングが、あらかじめ調整されて記憶部５に記憶されている。
また、図３（１）に示すように、カメラａ〜ｈの各動画像データは、各時間（タイミング）ごとの画像データ（フレーム）が複数集まって構成されている。例えば、カメラａの動画像データは、図２に示す位置座標（０，−５）において全領域ａ１を撮影した画像データａｔ１、ａｔ２、ａｔ３・・・が時間順に並べられて構成されたものである。すなわち、ここでは、一つ一つのフレームを表すときは「画像データ」とし、複数の画像データが時間順に並べられた集まりを表すときは「動画像データ」と記載するものとする。
また、各画像データには、カメラａ〜ｈの識別情報がそれぞれ埋め込まれている。ここでは、カメラａ〜ｈは、図２に示す位置にあらかじめ設置されていることから、カメラａ〜ｈの識別情報自体が、中心点Ｐに対するアングルの識別情報となる。そのため、ここでは、カメラａ〜ｈとアングルａ〜ｈとは対応している。
次に、このように構成された実施形態における動画像処理表示装置１の動作について説明する。
カメラａ〜ｈの動画像データは、画角サイズ等が調整されて記憶部５に記憶されているものとする。また、ここでは、後述する回避処理モードのフラグがオフになっているものとする。
図４は、動画像処理表示装置１の動作フローを示すフローチャートである。
まず、ユーザの操作によって操作部３から動画像の再生指示が出力されると、動画像データ出力制御部２２は、当該再生指示を入力する。そして、動画像データ出力制御部２２は、記憶部５から、カメラａの画像データａｔ１、ａｔ２、ａｔ３・・・を順に読み出して、表示部４に出力する（ステップＳ１、動画像出力ステップ）。
表示部４は、動画像データ出力制御部２２が出力したカメラａの画像データａｔ１、ａｔ２、ａｔ３・・・を順に入力して表示画面に表示する（ステップＳ２）。これにより、図５に示すように、全領域ａ１の動画像が表示画面に表示される。
カメラａ〜ｈの動画像データは、画角サイズ等が調整されて記憶部５に記憶されているものとする。また、ここでは、後述する回避処理モードのフラグがオフになっているものとする。
図４は、動画像処理表示装置１の動作フローを示すフローチャートである。
まず、ユーザの操作によって操作部３から動画像の再生指示が出力されると、動画像データ出力制御部２２は、当該再生指示を入力する。そして、動画像データ出力制御部２２は、記憶部５から、カメラａの画像データａｔ１、ａｔ２、ａｔ３・・・を順に読み出して、表示部４に出力する（ステップＳ１、動画像出力ステップ）。
表示部４は、動画像データ出力制御部２２が出力したカメラａの画像データａｔ１、ａｔ２、ａｔ３・・・を順に入力して表示画面に表示する（ステップＳ２）。これにより、図５に示すように、全領域ａ１の動画像が表示画面に表示される。
このとき、ユーザがマウスを動かして表示画面上のポインタＰｔを左から右へとドラッグさせる。これにより、操作部３が第１の回転軸を中心とした右回りのアングル切り替え指示をアングル切り替え指示入力部２３に出力する。すなわち、表示画面の左端から右端までの全画面の座標が均等間隔に８つのアングル切り換え領域Ａｎ１〜Ａｎ８に分けられており、一のアングル切り替え領域から他のアングル切り替え領域にポインタＰｔが動かされることにより、操作部３からアングル切り替え指示が出力される。例えば、アングル切り替え領域Ａｎ４に配されたポインタＰｔをドラッグして、マウスを左から右に動かすというユーザの一連の動作によって、当該ポインタＰｔをアングル切り替え領域Ａｎ５，Ａｎ６へと移動させる。そうすると、ポインタＰｔがアングル切り替え領域Ａｎ４からＡｎ５に移動した段階で、操作部３が右回りのアングル切り替え指示を出力し、連続してポインタＰｔがアングル切り替え領域Ａｎ６に移動した段階で、操作部３が右回りのアングル切り替え指示を連続して出力する。一方、ポインタＰｔを右から左にドラッグすると、左隣のアングル切り替え領域にポインタＰｔが移動した段階で、操作部３が左回りのアングル切り替え指示を出力する。
さて、操作部３が、右回りのアングル切り替え指示を出力すると、アングル切り替え指示入力部２３が当該右回りのアングル切り替え指示を入力する（ステップＳ３、第１のアングル切り替え指示入力ステップ）。そして、アングル切り替え指示入力部２３は、右回りのアングル切り替え指示を動画像データ出力制御部２２に出力する。動画像データ出力制御部２２は、当該右回りのアングル切り替え指示を入力すると、読み出す動画像データを右回りに隣り合うカメラの動画像データに切り換えて、当該切り換えた動画像データを表示部４に出力する（ステップＳ４，第１の切り換えステップ）。例えば、画像データａｔ１が表示画面に表示されているときに、動画像データ出力制御部２２が、右回りのアングル切り替え指示を入力すると、アングルａから右回りに隣り合うアングルｂに切り換えて画像データｂｔ２を読み出して表示部４に出力する。さらに、動画像データ出力制御部２２が、アングル切り替え指示入力部２３が連続して出力した右回りのアングル切り替え指示を連続して入力すると、アングルｂからアングルｃに切り換えて画像データｃｔ３を連続して読み出して表示部４に連続して出力する。そして、表示部４は、当該画像データを連続して入力して、動画像を連続して表示する。
同様にして、動画像データ出力制御部２２は、アングルｃからアングルｄ，ｅ，ｆ，ｇ，ｈと順に動画像データを連続して読み出して表示部４に連続して出力していく。そのため、図６（１）〜（４）に示すように、表示される動画像がアングルａ〜ｈの右回りの順番に切り換えられていく。なお、図６においては、アングルｂ，ｄ，ｆ，ｈの表示画面を省略していることは言うまでもない。また、図６（２）及び（４）において、他の被写体の表示を省略していることは言うまでもない。さらに、アングルｈに対して右回りに隣り合うのはアングルａとなり、アングルａ〜ｈは連続して循環して表示されるのは言うまでもない。
同様にして、動画像データ出力制御部２２は、アングルｃからアングルｄ，ｅ，ｆ，ｇ，ｈと順に動画像データを連続して読み出して表示部４に連続して出力していく。そのため、図６（１）〜（４）に示すように、表示される動画像がアングルａ〜ｈの右回りの順番に切り換えられていく。なお、図６においては、アングルｂ，ｄ，ｆ，ｈの表示画面を省略していることは言うまでもない。また、図６（２）及び（４）において、他の被写体の表示を省略していることは言うまでもない。さらに、アングルｈに対して右回りに隣り合うのはアングルａとなり、アングルａ〜ｈは連続して循環して表示されるのは言うまでもない。
このとき、図２に示すように、中心点Ｐを通る鉛直線が第１の回転軸Ｂ１となり、この第１の回転軸Ｂ１が回転中心となり、表示される動画像のアングルがａ〜ｈに連続して切り換えられていく。これにより、ポインタＰｔを左から右に連続的に移動させるというユーザによる一連の動作だけで、表示される動画像のアングルが連続して切り換えられていく。また、このときの動画像は、カメラａ〜ｈの全領域ａ１〜ｈ１の同一線上に第１の回転軸Ｂ１が設定されていることから、カメラａ〜ｈが配置された円の径方向の外から内へ向かう内方向視点となって表示画面に表示される。すなわち、第１の回転軸Ｂ１上の全領域ａ１〜ｈ１における動画像が切り替え表示されていくことから、視聴者は、全撮影領域Ａｒの外から中心点Ｐに向かって、３６０°全方向から中心点Ｐの周りを見ているような感覚で動画像を視聴することができる。
なお、ポインタＰｔをドラッグしながら左から右に連続して移動させるとしたが、これとは反対に、ポインタＰｔをドラッグしながら右から左に連続して移動させると、上記と左右反対にして、アングルｈ〜ａが左回りに切り換えられて表示画面に連続して表示されることは言うまでもない。
なお、ポインタＰｔをドラッグしながら左から右に連続して移動させるとしたが、これとは反対に、ポインタＰｔをドラッグしながら右から左に連続して移動させると、上記と左右反対にして、アングルｈ〜ａが左回りに切り換えられて表示画面に連続して表示されることは言うまでもない。
さらに、ユーザが特定の被写体を選択する。つまり、図５に示す状態で、ユーザがマウスを操作して、ポインタＰｔを特定の被写体に重ねた状態でクリックする。このときの特定の被写体を被写体Ａとする。すると、操作部３は、第１の回転軸Ｂ１の位置を変更するための位置変更指示を第１の位置変更指示入力部２４に出力する。この位置変更指示は、図７に示すように、第１の回転軸Ｂ１の位置を中心点Ｐから被写体Ａの位置である回転中心ＡＡに変更する指示であり、回転中心ＡＡの位置情報を含むものである。
第１の位置変更指示入力部２４は、当該位置変更指示を入力する（ステップＳ５）と、当該位置変更指示をトリミング制御部２７に出力する。トリミング制御部２７は、当該位置変更指示を入力すると、回転中心ＡＡを通り全領域ａ１と平行な線上であって、かつ回転中心ＡＡを左右の中心とした一部領域ａ１１のみをトリミングするためのトリミング情報を算出する。このときの一部領域ａ１１は、全領域ａ１に平行であって、かつ回転中心ＡＡを通る線上のうち、全領域ａ１よりも小さい範囲で適宜設定することができる。さらに、トリミング制御部２７は、上記と同様にして、すべての一部領域ｂ１１〜ｈ１１を算出する。なお、トリミング情報は、一部領域ａ１１〜ｈ１１の位置を特定するための位置情報を含むものである。
トリミング制御部２７は、トリミング情報を算出すると、当該トリミング情報を含むトリミング指示及び位置変更指示を動画像データ出力制御部２２に出力する。
第１の位置変更指示入力部２４は、当該位置変更指示を入力する（ステップＳ５）と、当該位置変更指示をトリミング制御部２７に出力する。トリミング制御部２７は、当該位置変更指示を入力すると、回転中心ＡＡを通り全領域ａ１と平行な線上であって、かつ回転中心ＡＡを左右の中心とした一部領域ａ１１のみをトリミングするためのトリミング情報を算出する。このときの一部領域ａ１１は、全領域ａ１に平行であって、かつ回転中心ＡＡを通る線上のうち、全領域ａ１よりも小さい範囲で適宜設定することができる。さらに、トリミング制御部２７は、上記と同様にして、すべての一部領域ｂ１１〜ｈ１１を算出する。なお、トリミング情報は、一部領域ａ１１〜ｈ１１の位置を特定するための位置情報を含むものである。
トリミング制御部２７は、トリミング情報を算出すると、当該トリミング情報を含むトリミング指示及び位置変更指示を動画像データ出力制御部２２に出力する。
動画像データ出力制御部２２は、それらトリミング指示及び位置変更指示を入力すると（ステップＳ６）、トリミング情報と位置変更指示に含まれる回転中心ＡＡの位置情報とを記憶部５に記憶して、記憶部５から読み出した画像データとともに、一部領域ａ１１の位置情報を含むトリミング指示を表示部４に出力する。
表示部４は、これら画像データ及びトリミング指示を入力すると、当該画像データを再生するとともに、当該画像データのうちトリミング指示に含まれるトリミングの位置情報に応じて、全領域ａ１のうちの一部領域ａ１１のみを表示画面に表示する（ステップＳ７）。すなわち、図６（１）に示す全領域ａ１を表示する状態から、図８（１）に示すように、被写体Ａを含む一部分が拡大されて被写体Ａが表示画面の中央に配された状態に切り換えられる。なお、図８（２）及び（４）において、他の被写体の表示を省略していることは言うまでもない。
表示部４は、これら画像データ及びトリミング指示を入力すると、当該画像データを再生するとともに、当該画像データのうちトリミング指示に含まれるトリミングの位置情報に応じて、全領域ａ１のうちの一部領域ａ１１のみを表示画面に表示する（ステップＳ７）。すなわち、図６（１）に示す全領域ａ１を表示する状態から、図８（１）に示すように、被写体Ａを含む一部分が拡大されて被写体Ａが表示画面の中央に配された状態に切り換えられる。なお、図８（２）及び（４）において、他の被写体の表示を省略していることは言うまでもない。
この状態から、上記と同様にして、ユーザからの操作によって操作部３が右回りのアングル切り替え指示を出力すると、アングル切り替え指示入力部２３が当該アングル切り替え指示を入力する（ステップＳ８、第１のアングル切り替え指示入力ステップ）。そして、アングル切り替え指示入力部２３は、右回りのアングル切り替え指示を動画像データ出力制御部２２に出力する。動画像データ出力制御部２２は、当該アングル切り替え指示を入力すると、右回りに隣り合うアングルｂの画像データ及び一部領域ｂ１１の位置情報を記憶部５から読み出して、当該画像データと一部領域ａ１１の位置情報を含むトリミング指示とを表示部４に出力する（ステップＳ９、第１の切り換えステップ）。これらの動作を繰り返すことにより、図８（１）〜（４）に示すように、回転中心ＡＡを第１の回転軸Ｂ１として、異なるアングルの動画像が連続的に切り換えられて表示される。このときの動画像も、第１の回転軸Ｂ１（回転中心ＡＡ）上の一部領域ａ１１〜ｈ１１が表示されるため、円の外から被写体Ａに向かって３６０°全方向から被写体Ａの周りを見ているような内方向視点で表示画面に切り換え表示される。
さらに、ユーザが第２の回転軸の設定を要求する。つまり、ユーザがマウスを操作して、図８（１）に示す表示画面において、Ｓｈｉｆｔキー押下とクリックを同時に行う。すると、操作部３が第２の回転軸設定指示を出力する。動画像データ出力制御部２２は、当該第２の回転軸設定指示を入力すると（ステップＳ１０）、第２の動画像データを生成するための第２の動画像データの生成指示を第２の動画像データ生成部２５に出力する。第２の動画像データ生成部２５は、当該第２の動画像データの生成指示を入力すると、記憶部５に記憶された、後述する回避処理モードのフラグを読み出す。ここでは、回避処理モードのフラグがオフになっていることから、第２の動画像データ生成部２５は、回避処理用の動画像データを生成することなく、通常の第２の動画像データを生成して（ステップＳ１１）、記憶部５に記憶する。
ここで、第２の動画像データについて説明する。
表示画面に表示されている動画像は、例えば一部領域ａ１１であるものとする。図１０に示すように、この一部領域ａ１１を撮影しているのは、一部領域ａ１１と直交する光軸を有するカメラａ，ｅのうち、正面のカメラａである。
第２の動画像データは、アングルの回転中心が回転中心ＡＡから回転中心２ＡＡに変更されて生成される。例えば、図３（１）に示す画像データａｔ１のように、所定の時間ｔ１かつ所定のアングルａにおいて、図１０に示す全撮影領域Ａｒのうち、一部領域ａ１１を撮影している正面のカメラａと、一部領域ａ１１を通る線との間の第２領域２Ａｒに、回転中心２ＡＡが設定される。具体的には、第２領域２Ａｒのうち、回転中心ＡＡを通り、かつカメラａの光軸に平行な線上であって、回転中心ＡＡの近傍に回転中心２ＡＡが設定される。ここでの近傍とは、アングルを変えたときに回転中心ＡＡが表示画面に表示される程度の距離である。ただし、この距離に限ることはなく、回転中心ＡＡが表示画面に表示されないような距離であってもよい。
表示画面に表示されている動画像は、例えば一部領域ａ１１であるものとする。図１０に示すように、この一部領域ａ１１を撮影しているのは、一部領域ａ１１と直交する光軸を有するカメラａ，ｅのうち、正面のカメラａである。
第２の動画像データは、アングルの回転中心が回転中心ＡＡから回転中心２ＡＡに変更されて生成される。例えば、図３（１）に示す画像データａｔ１のように、所定の時間ｔ１かつ所定のアングルａにおいて、図１０に示す全撮影領域Ａｒのうち、一部領域ａ１１を撮影している正面のカメラａと、一部領域ａ１１を通る線との間の第２領域２Ａｒに、回転中心２ＡＡが設定される。具体的には、第２領域２Ａｒのうち、回転中心ＡＡを通り、かつカメラａの光軸に平行な線上であって、回転中心ＡＡの近傍に回転中心２ＡＡが設定される。ここでの近傍とは、アングルを変えたときに回転中心ＡＡが表示画面に表示される程度の距離である。ただし、この距離に限ることはなく、回転中心ＡＡが表示画面に表示されないような距離であってもよい。
また、第２の動画像データは、カメラａ〜ｈの全８つよりも少ない台数のカメラで撮影された動画像データによって生成される。例えば、第２の動画像データは、正面のカメラａに対向するカメラｅと、中心点Ｐに対して左右９０°のカメラｃ，ｇの４つのカメラの動画像データから生成される。すなわち、カメラａ〜ｈ及び被写体の位置関係を上面視したときに、第２領域２Ａｒにおいて、一部領域ａ１１を一辺とした四角形となるように、一部領域ｃ２１，ｅ２１，ｇ２１が算出される。一部領域ａ１１に対して右回りに隣り合う辺となる一部領域ｃ２１は、当該一部領域ｃ２１と回転中心２ＡＡを挟んで対向する側の領域に配置された正面のカメラｃによって撮影された画像データの一部である。また、一部領域ａ１１に対向した辺となる一部領域ｅ２１は、当該一部領域ｅ２１と回転中心２ＡＡを挟んで対向する側の領域に配置された正面のカメラｅによって撮影された画像データの一部である。また、一部領域ａ１１に対して左回りに隣り合う辺となる一部領域ｇ２１は、当該一部領域ｇ２１と回転中心２ＡＡを挟んで対向する側の領域に配置された正面のカメラｇによって撮影された画像データの一部である。
すなわち、これら一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１は、それぞれを撮影するカメラａ，ｃ，ｅ，ｇに対して第２の回転軸（回転中心２ＡＡ）を挟んで対向する側の領域となり、これら一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１における動画像が、後述するように切り替え表示されていく。
なお、第１の回転軸Ｂ１として回転中心ＡＡを中心に回転させるときの基準画像となる一部領域ａ１１と、第２の動画像データの一辺を構成するときの基準画像となる一部領域ａ１１とが一致するように設定される。すなわち、動画像データ出力制御部２２が第２の回転軸設定指示を入力したときに表示部４が表示している表示画像（一部領域ａ１１）が第１の基準画像となり、第２の動画像データ生成部２５が第２の動画像データを生成して表示部４が最初に表示する表示画像（一部領域ａ１１）が第２の基準画像となり、これら第１の基準画像と第２の基準画像が一致するように設定されている。なお、基準画像とは、アングル切り替え表示する上での元となる最初のアングルの画像をいうものである。
すなわち、これら一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１は、それぞれを撮影するカメラａ，ｃ，ｅ，ｇに対して第２の回転軸（回転中心２ＡＡ）を挟んで対向する側の領域となり、これら一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１における動画像が、後述するように切り替え表示されていく。
なお、第１の回転軸Ｂ１として回転中心ＡＡを中心に回転させるときの基準画像となる一部領域ａ１１と、第２の動画像データの一辺を構成するときの基準画像となる一部領域ａ１１とが一致するように設定される。すなわち、動画像データ出力制御部２２が第２の回転軸設定指示を入力したときに表示部４が表示している表示画像（一部領域ａ１１）が第１の基準画像となり、第２の動画像データ生成部２５が第２の動画像データを生成して表示部４が最初に表示する表示画像（一部領域ａ１１）が第２の基準画像となり、これら第１の基準画像と第２の基準画像が一致するように設定されている。なお、基準画像とは、アングル切り替え表示する上での元となる最初のアングルの画像をいうものである。
さらに、これら一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１が順に連結されることにより、第２の画像データが生成される。すなわち、第２の動画像データ生成部２５は、図３（２）に示すように、所定の時間ｔ３における所定のアングルａ，ｃ，ｅ，ｇの画像データを読み出し、それぞれ順に連結して一つの第２の画像データを生成する。そして、第２の動画像データ生成部２５は、これら所定のタイミングにおける第２の画像データを時間順に複数並べて、第２の動画像データを生成する。
このような第２の動画像データを第２の動画像データ生成部２５が生成していき、記憶部５に記憶していく。なお、第２の動画像データ生成部２５は、最初の第２の画像データを生成すると、一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１のトリミング情報及び生成完了信号を動画像データ出力制御部２２に出力する。
動画像データ出力制御部２２は、これらトリミング情報及び生成完了信号を入力すると、トリミング情報を記憶部５に記憶した後、第２の画像データに切り換えて読み出して、当該第２の画像データ及びトリミング情報を表示部４に出力する。
表示部４は、これら第２の画像データ及びトリミング情報を入力すると、当該第２の画像データの全体を再生し、トリミング情報に基づいて一部領域ａ１１のみを表示画面に
表示する。このときの表示画面の状態が、図９（１）に示されている。
このとき、一部領域ａ１１が、第１の基準画像と第２の基準画像として一致していることから、第１の回転軸を中心とした動画像を表示する図８（１）と、第２の動画像を表示する図９（１）とは、表示画面上はまったく同じ状態となる。
このような第２の動画像データを第２の動画像データ生成部２５が生成していき、記憶部５に記憶していく。なお、第２の動画像データ生成部２５は、最初の第２の画像データを生成すると、一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１のトリミング情報及び生成完了信号を動画像データ出力制御部２２に出力する。
動画像データ出力制御部２２は、これらトリミング情報及び生成完了信号を入力すると、トリミング情報を記憶部５に記憶した後、第２の画像データに切り換えて読み出して、当該第２の画像データ及びトリミング情報を表示部４に出力する。
表示部４は、これら第２の画像データ及びトリミング情報を入力すると、当該第２の画像データの全体を再生し、トリミング情報に基づいて一部領域ａ１１のみを表示画面に
表示する。このときの表示画面の状態が、図９（１）に示されている。
このとき、一部領域ａ１１が、第１の基準画像と第２の基準画像として一致していることから、第１の回転軸を中心とした動画像を表示する図８（１）と、第２の動画像を表示する図９（１）とは、表示画面上はまったく同じ状態となる。
この状態から、ユーザがＳｈｉｆｔキーを押下したまま、ポインタＰｔをドラッグして移動させると、上記と同様にして、操作部３が、第２の回転軸を中心とした右回りの第２のアングル切り替え指示を出力する。アングル切り替え指示入力部２３が当該第２のアングル切り替え指示を入力する（ステップＳ１２、第２のアングル切り替え指示入力ステップ）。そして、アングル切り替え指示入力部２３は、右回りの第２のアングル切り替え指示を動画像データ出力制御部２２に出力する。動画像データ出力制御部２２は、当該右回りの第２のアングル切り替え指示を入力すると、第２の画像データと右回りに隣り合うカメラｃのトリミング情報とを記憶部５から読み出して、当該第２の画像データとトリミング指示とを表示部４に出力する（ステップＳ１３、第２の切り換えステップ）。
表示部４は、これら第２の画像データ及びトリミング指示を入力すると、第２の画像データを再生するとともに、当該第２の画像データのうち、トリミング指示に応じた一部領域ｃ２１のみを表示画面に表示する（ステップＳ１４）。
これらを繰り返すことにより、図９（１）〜（４）に示すように、回転中心２ＡＡを第２の回転軸Ｂ２として、異なるアングルの動画像が切り換えられて表示される。
表示部４は、これら第２の画像データ及びトリミング指示を入力すると、第２の画像データを再生するとともに、当該第２の画像データのうち、トリミング指示に応じた一部領域ｃ２１のみを表示画面に表示する（ステップＳ１４）。
これらを繰り返すことにより、図９（１）〜（４）に示すように、回転中心２ＡＡを第２の回転軸Ｂ２として、異なるアングルの動画像が切り換えられて表示される。
なお、一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１が第２の回転軸Ｂ２（回転中心２ＡＡ）上ではなく、これら一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１によって区画される区画領域ＳＡｒ（図１０に示す）の中に配されることから、このときの動画像は、回転中心２ＡＡを中心にして径方向の内から外に向かう外方向視点となって表示画面に表示される。すなわち、それぞれのカメラａ，ｃ，ｅ，ｇに対して、第２の回転軸Ｂ２を挟んで対向する側の一部領域ａ１１，ｃ２１，ｅ２１，ｇ２１における動画像が切り替え表示されることから、視聴者は、回転中心２ＡＡから外方向に向かって、あたかも回転中心２ＡＡに立って周囲を見ているような感覚で動画像を視聴することができる。なお、第２の回転軸Ｂ２におけるアングル切り替え画像が表示されているときに、ユーザからの所定の操作を受け付けて操作部３が通常表示指示を動画像データ出力制御部２２に出力することにより、第１の回転軸Ｂ１におけるアングル切り替え画像に切り換えることができる。例えば、ユーザからの所定の操作として、ＥＳＣキーの押下などがあるが、他の操作でもよいことは言うまでもない。
次いで、一部領域ａ１１を表示している場合において、さらに第１の回転軸Ｂ１の位置を変更するときの動画像処理表示装置１の動作について説明する。
図１１は、第１の回転軸Ｂ１の位置をさらに変更する場合の動画像処理表示装置１の動作を示すフローチャートである。
表示画面には、図１２（１）に示すように、一部領域ａ１１が表示されているものとする。
まず、ユーザが被写体Ｂを表示画面の中央に移動させる。つまり、図１２（１）に示す状態でユーザがマウスを操作して、ポインタＰｔを被写体Ｂに重ねた状態でドラッグする。そして、ドラッグ状態のまま、ユーザがマウスを右に動かして、ポインタＰｔを表示画面の中央に移動させると、図１２（２）に示すように、被写体Ｂが表示画面の中央に配されるように、動画像がスライドしていく。すなわち、ユーザがマウスを操作してポインタＰｔをドラッグ移動させ解放すると、操作部３が第１の回転軸の位置変更指示及びスライド指示を出力する。第１の位置変更指示入力部２４は、これら位置変更指示及びスライド指示を入力すると（ステップＳ２０）、第１の回転軸Ｂ１の位置を被写体Ｂの位置に切り換えて記憶部５に記憶し、スライド指示をトリミング制御部２７に出力する。具体的には、このときの第１の回転軸の位置は、図７に示す回転中心ＢＢとなる。
トリミング制御部２７は、第１の位置変更指示入力部２４が出力したスライド指示を入力すると、スライド指示に応じてトリミング情報を生成し動画像データ出力制御部２２に出力する。動画像データ出力制御部２２は、当該トリミング情報を入力すると、記憶部５から読み出した画像データとともに当該トリミング情報を表示部４に出力する。
表示部４は、これら画像データ及びトリミング情報を入力すると、画像データを再生するとともに、トリミング情報に応じて画像データをトリミングして表示画面に表示していく（ステップＳ２１）。そして、被写体Ｂが表示画面の中央に表示される。
図１１は、第１の回転軸Ｂ１の位置をさらに変更する場合の動画像処理表示装置１の動作を示すフローチャートである。
表示画面には、図１２（１）に示すように、一部領域ａ１１が表示されているものとする。
まず、ユーザが被写体Ｂを表示画面の中央に移動させる。つまり、図１２（１）に示す状態でユーザがマウスを操作して、ポインタＰｔを被写体Ｂに重ねた状態でドラッグする。そして、ドラッグ状態のまま、ユーザがマウスを右に動かして、ポインタＰｔを表示画面の中央に移動させると、図１２（２）に示すように、被写体Ｂが表示画面の中央に配されるように、動画像がスライドしていく。すなわち、ユーザがマウスを操作してポインタＰｔをドラッグ移動させ解放すると、操作部３が第１の回転軸の位置変更指示及びスライド指示を出力する。第１の位置変更指示入力部２４は、これら位置変更指示及びスライド指示を入力すると（ステップＳ２０）、第１の回転軸Ｂ１の位置を被写体Ｂの位置に切り換えて記憶部５に記憶し、スライド指示をトリミング制御部２７に出力する。具体的には、このときの第１の回転軸の位置は、図７に示す回転中心ＢＢとなる。
トリミング制御部２７は、第１の位置変更指示入力部２４が出力したスライド指示を入力すると、スライド指示に応じてトリミング情報を生成し動画像データ出力制御部２２に出力する。動画像データ出力制御部２２は、当該トリミング情報を入力すると、記憶部５から読み出した画像データとともに当該トリミング情報を表示部４に出力する。
表示部４は、これら画像データ及びトリミング情報を入力すると、画像データを再生するとともに、トリミング情報に応じて画像データをトリミングして表示画面に表示していく（ステップＳ２１）。そして、被写体Ｂが表示画面の中央に表示される。
この状態で、上記と同様にして、ユーザがマウスを動かしてポインタＰｔを左右に移動させると、図１２（３）〜（５）に示すように、回転中心ＢＢを中心とした内方向視点で動画像が表示画面に表示される。
なお、図１１におけるステップＳ８〜ステップＳ１４は、上記と同様であるので、ここでの説明は省略する。
なお、図１１におけるステップＳ８〜ステップＳ１４は、上記と同様であるので、ここでの説明は省略する。
次に、第２の動画像が表示画面に表示されるときに、特定の被写体によって遮られる場合の回避処理について説明する。
図１３は、回避処理を行うときの動画像処理表示装置１の動作を示すフローチャートである。
上記と同様にして、ステップＳ７を経て、図８（１）に示す一部領域ａ１１が表示画面に表示されているものとする。また、ユーザの操作によって、回避処理モードのフラグがあらかじめオンされているものとする。すなわち、ユーザの操作によって表示画面上の回避処理モードがクリックされると、操作部３が回避処理モードのオン信号を出力し、第２の動画像データ生成部２５が当該オン信号を入力して記憶部５において回避処理モードのフラグをオンにする。
図１３は、回避処理を行うときの動画像処理表示装置１の動作を示すフローチャートである。
上記と同様にして、ステップＳ７を経て、図８（１）に示す一部領域ａ１１が表示画面に表示されているものとする。また、ユーザの操作によって、回避処理モードのフラグがあらかじめオンされているものとする。すなわち、ユーザの操作によって表示画面上の回避処理モードがクリックされると、操作部３が回避処理モードのオン信号を出力し、第２の動画像データ生成部２５が当該オン信号を入力して記憶部５において回避処理モードのフラグをオンにする。
動画像データ出力制御部２２は、操作部３が出力した第２の回転軸設定指示を入力すると（ステップＳ１０）、第２の動画像データの生成指示を第２の動画像データ生成部２５に出力する。第２の動画像データ生成部２５は、当該第２の動画像データの生成指示を入力すると、記憶部５に記憶された回避処理モードのフラグを読み出す。そして、第２の動画像データ生成部２５は、記憶部５において回避処理モードのフラグがオンになっていることを読み出すと、まずは、第２の動画像データを生成する（ステップＳ１１）。そして、上記と同様にして、表示部４が、図９（１）に示す第２の動画像を表示画面に表示する。
さらに、第２の動画像データ生成部２５は、１つ目（例えば、時間ｔ３）の第２の画像データを生成すると、２つ目以降（例えば、時間ｔ４以降）の第２の画像データを生成する上で、選択された被写体Ａや他の被写体によって遮られた遮断画像データがあるか否かを判定する（ステップＳ３１）。ここでは、カメラａ〜ｈのすべての動画像データに対して判定する。
さらに、第２の動画像データ生成部２５は、１つ目（例えば、時間ｔ３）の第２の画像データを生成すると、２つ目以降（例えば、時間ｔ４以降）の第２の画像データを生成する上で、選択された被写体Ａや他の被写体によって遮られた遮断画像データがあるか否かを判定する（ステップＳ３１）。ここでは、カメラａ〜ｈのすべての動画像データに対して判定する。
ここで、遮断画像データの判定について説明する。
図１４に示すように、例えば、第１の回転軸Ｂ１（回転中心ＡＡ）とカメラｅとの間に被写体Ａ，Ｃが存在している。すなわち、第１の回転軸Ｂ１と、この第１の回転軸Ｂ１上の領域（一部領域ａ１１）に対して、第２の回転軸（回転中心２ＡＡ）を挟んで対向する領域（一部領域ｅ２１）を撮影するカメラｅとの間に、被写体Ａ，Ｃが存在している。この場合、カメラｅの一部領域ｅ２１における動画像が、被写体Ａ，Ｃによって遮られている。つまり、一部領域ｅ２１において、被写体Ａ，Ｃが写ることになる。
このような遮られた遮断画像を以下のようにして検出する。
第２の動画像データ生成部２５は、一つ目の第２の画像データを生成すると、被写体の位置情報を入力するための位置情報送信指示を位置検出部２６に出力する。位置検出部２６は、当該位置情報送信指示を入力し、被写体の位置情報を検出する。具体的には、画像データ間の差分により被写体の変位を検出する。そして、位置検出部２６は、カメラｅの位置情報（０，５）とカメラｅの焦点距離（５０ｍｍ）とを記憶部５から読み出し、全撮影領域Ａｒにおける各被写体Ａ〜Ｅの位置座標を位置情報として検出する。そして、位置検出部２６は、各被写体Ａ〜Ｅの位置情報を第２の動画像データ生成部２５に出力する。第２の動画像データ生成部２５は、それら位置情報を入力すると、第１の回転軸Ｂ１とカメラｅとの間に、被写体Ａ，Ｃが位置していることを検出し、一部領域ｅ２１における被写体Ａの投影領域Ａ２２と被写体Ｃの投影領域Ｃ２２とを算出する。具体的には、第２の動画像データ生成部２５が、被写体Ａの位置情報に基づいて、カメラｅから被写体Ａまでの距離と、被写体Ａから一部領域ｅ２１までの距離とを算出し、三角測量法により、一部領域ｅ２１における被写体Ａの左右の投影領域Ａ２２を算出する。同様にして、第２の動画像データ生成部２５は、一部領域ｅ２１における被写体Ｃの投影領域Ｃ２２を算出する。そして、第２の動画像データ生成部２５は、一部領域ｅ２１における被写体Ａ，Ｃの投影領域Ａ２２，Ｃ２２を算出することにより、一部領域ｅ２１において被写体Ａ，Ｃによって遮られた遮断画像データがあることを判定する。
図１４に示すように、例えば、第１の回転軸Ｂ１（回転中心ＡＡ）とカメラｅとの間に被写体Ａ，Ｃが存在している。すなわち、第１の回転軸Ｂ１と、この第１の回転軸Ｂ１上の領域（一部領域ａ１１）に対して、第２の回転軸（回転中心２ＡＡ）を挟んで対向する領域（一部領域ｅ２１）を撮影するカメラｅとの間に、被写体Ａ，Ｃが存在している。この場合、カメラｅの一部領域ｅ２１における動画像が、被写体Ａ，Ｃによって遮られている。つまり、一部領域ｅ２１において、被写体Ａ，Ｃが写ることになる。
このような遮られた遮断画像を以下のようにして検出する。
第２の動画像データ生成部２５は、一つ目の第２の画像データを生成すると、被写体の位置情報を入力するための位置情報送信指示を位置検出部２６に出力する。位置検出部２６は、当該位置情報送信指示を入力し、被写体の位置情報を検出する。具体的には、画像データ間の差分により被写体の変位を検出する。そして、位置検出部２６は、カメラｅの位置情報（０，５）とカメラｅの焦点距離（５０ｍｍ）とを記憶部５から読み出し、全撮影領域Ａｒにおける各被写体Ａ〜Ｅの位置座標を位置情報として検出する。そして、位置検出部２６は、各被写体Ａ〜Ｅの位置情報を第２の動画像データ生成部２５に出力する。第２の動画像データ生成部２５は、それら位置情報を入力すると、第１の回転軸Ｂ１とカメラｅとの間に、被写体Ａ，Ｃが位置していることを検出し、一部領域ｅ２１における被写体Ａの投影領域Ａ２２と被写体Ｃの投影領域Ｃ２２とを算出する。具体的には、第２の動画像データ生成部２５が、被写体Ａの位置情報に基づいて、カメラｅから被写体Ａまでの距離と、被写体Ａから一部領域ｅ２１までの距離とを算出し、三角測量法により、一部領域ｅ２１における被写体Ａの左右の投影領域Ａ２２を算出する。同様にして、第２の動画像データ生成部２５は、一部領域ｅ２１における被写体Ｃの投影領域Ｃ２２を算出する。そして、第２の動画像データ生成部２５は、一部領域ｅ２１における被写体Ａ，Ｃの投影領域Ａ２２，Ｃ２２を算出することにより、一部領域ｅ２１において被写体Ａ，Ｃによって遮られた遮断画像データがあることを判定する。
このようにして、第２の動画像データ生成部２５は、遮断画像データがあるか否かを判定し、遮断画像データがないと判定すると（ステップＳ３１：ＮＯ）、上記と同様にして、第２の画像データを生成し（ステップＳ３４）、生成完了信号及びトリミング情報を動画像データ出力制御部２２に出力する。
一方、ステップＳ３１において、第２の動画像データ生成部２５が、遮断画像データがあると判定すると（ステップＳ３１：ＹＥＳ）、非遮断画像データがあるか否かを判定する（ステップＳ３２）。すなわち、第２の動画像データ生成部２５は、遮断画像データと同一の時間ｔにおいて、他のカメラによって、一部領域ｅ２１以外の他の一部領域における各被写体の投影領域が算出されていない非遮断画像データがあるか否かを判定する。そして、第２の動画像データ生成部２５は、非遮断画像データがないと判定すると（ステップＳ３２：ＮＯ）、ステップＳ３４において上記と同様の処理を行う。
一方、ステップＳ３１において、第２の動画像データ生成部２５が、遮断画像データがあると判定すると（ステップＳ３１：ＹＥＳ）、非遮断画像データがあるか否かを判定する（ステップＳ３２）。すなわち、第２の動画像データ生成部２５は、遮断画像データと同一の時間ｔにおいて、他のカメラによって、一部領域ｅ２１以外の他の一部領域における各被写体の投影領域が算出されていない非遮断画像データがあるか否かを判定する。そして、第２の動画像データ生成部２５は、非遮断画像データがないと判定すると（ステップＳ３２：ＮＯ）、ステップＳ３４において上記と同様の処理を行う。
一方、第２の動画像データ生成部２５は、非遮断画像データがあると判定すると（ステップＳ３２：ＹＥＳ）、遮断されていない第２の画像データを生成する（ステップＳ３３）。ここでは、例えば、カメラｆの画像データが非遮断画像データであるものとする。第２の動画像データ生成部２５は、カメラａ，ｃ，ｅ，ｆ，ｇの画像データを読み出し、図１５に示すように、一部領域ｅ２１に代えて他の一部領域ｆ２１を利用して、被写体Ａ，Ｃによって遮断されない第２の画像データを生成する。具体的には、第２の動画像データ生成部２５は、一部領域ｅ２１，ｇ２１のうち投影領域Ａ２２，Ｃ２２の端部から、これら投影領域Ａ２２，Ｃ２２がすべて含まれなくなるように、カメラｆの一部領域ｆ２１を貼り合わせ、カメラａ，ｃ，ｅ，ｆ，ｇの画像データによって回転中心２ＡＡを中心とした第２の画像データを生成して、記憶部５に記憶する。
この状態から、ユーザがＳｈｉｆｔキーを押下したまま、ポインタＰｔをドラッグして移動させると、操作部３が、第２の回転軸を中心とした右回りのアングル切り替え指示を出力する。そして、上記と同様にして、ステップＳ１３を経て、表示部４が、第２の動画像データを時間順にアングルを切り換えて表示する（ステップＳ１４）。このとき、本来であれば被写体Ａ，Ｃが映ってしまう動画像であっても、被写体Ａ，Ｃによって遮られていない一部領域ｃ２１，ｅ２１，ｆ２１，ｇ２１が表示されることから、回転中心２ＡＡから外方向視点で見たときに、見えないはずの被写体が表示されなくなる。
なお、ここでは、説明を簡易にするために、一部領域ｅ２１における投影領域のみを算出しているが、それのみではない。すなわち、第２の動画像データ生成部２５は、第１の回転軸Ｂ１と各カメラｂ，ｃ，ｄ，ｅ，ｆ，ｇ，ｈとの間に被写体が存在していることを検出し、第１の回転軸Ｂ１上の領域（一部領域ａ１１）以外の他の領域（一部領域ｃ２１，ｅ２１，ｇ２１など）における被写体の投影領域を算出することにより、遮断されていない第２の画像データを生成する。
なお、ここでは、説明を簡易にするために、一部領域ｅ２１における投影領域のみを算出しているが、それのみではない。すなわち、第２の動画像データ生成部２５は、第１の回転軸Ｂ１と各カメラｂ，ｃ，ｄ，ｅ，ｆ，ｇ，ｈとの間に被写体が存在していることを検出し、第１の回転軸Ｂ１上の領域（一部領域ａ１１）以外の他の領域（一部領域ｃ２１，ｅ２１，ｇ２１など）における被写体の投影領域を算出することにより、遮断されていない第２の画像データを生成する。
以上より、本実施形態における動画像処理表示装置１、動画像処理表示方法及び動画像処理プログラムによれば、ユーザの指示によって、第１の回転軸Ｂ１を中心にしてアングルを連続して切り換えた動画像を表示部４が連続して表示することができ、かつ、第２の回転軸Ｂ２を中心にしてアングルを連続して切り換えた動画像を表示部４が連続して表示することができる。
すなわち、動画像を表示しているときに、第１の回転軸Ｂ１及び第２の回転軸Ｂ２という２つの回転軸を中心としてアングルを切り換えた動画像をユーザの指示によって連続して切り換えて表示することができる。
そのため、動画像を視聴する視聴者に対してエンタテイメント性を向上させることができる。
また、第１の回転軸Ｂ１が、所定の時間ｔ及び所定のアングル（アングルａ〜ｈのいずれか一つ）における被写体（例えば被写体Ａ）の位置に設定され、同一の時間ｔ及び同一のアングルにおける被写体（例えば被写体Ａ）の近傍に第２の回転軸Ｂ２が設定され、それそれで表示する領域を変えていることから、第１の回転軸Ｂ１におけるアングル切り替え画像表示と、第２の回転軸Ｂ２におけるアングル切り替え画像表示とで、表示する視点の向きを変えることができる。具体的には、第１の回転軸Ｂ１におけるアングル切り替え画像表示では、外から内を見るような内方向視点とし、第２の回転軸Ｂ２におけるアングル切り替え画像表示では、内から外をみる外方向視点とすることができる。そのため、エンタテイメント性をさらに向上させることができる。
すなわち、動画像を表示しているときに、第１の回転軸Ｂ１及び第２の回転軸Ｂ２という２つの回転軸を中心としてアングルを切り換えた動画像をユーザの指示によって連続して切り換えて表示することができる。
そのため、動画像を視聴する視聴者に対してエンタテイメント性を向上させることができる。
また、第１の回転軸Ｂ１が、所定の時間ｔ及び所定のアングル（アングルａ〜ｈのいずれか一つ）における被写体（例えば被写体Ａ）の位置に設定され、同一の時間ｔ及び同一のアングルにおける被写体（例えば被写体Ａ）の近傍に第２の回転軸Ｂ２が設定され、それそれで表示する領域を変えていることから、第１の回転軸Ｂ１におけるアングル切り替え画像表示と、第２の回転軸Ｂ２におけるアングル切り替え画像表示とで、表示する視点の向きを変えることができる。具体的には、第１の回転軸Ｂ１におけるアングル切り替え画像表示では、外から内を見るような内方向視点とし、第２の回転軸Ｂ２におけるアングル切り替え画像表示では、内から外をみる外方向視点とすることができる。そのため、エンタテイメント性をさらに向上させることができる。
また、第１の回転軸Ｂ１におけるアングル切り替え画像のうち、第１の基準画像（例えば、一部領域ａ１１）と、第２の回転軸Ｂ２におけるアングル切り替え画像のうち第２の基準画像（例えば、一部領域ａ１１）とが一致していることから、第１の回転軸Ｂ１におけるアングル切り替え表示と、第２の回転軸Ｂ２におけるアングル切り替え表示とを、視聴者に対して違和感を与えることなくスムーズに切り換えることができる。具体的には、図８（１）に示す第１の基準画像と、図９（１）に示す第２の基準画像とが同一になるように設定されていることから、第１の回転軸Ｂ１におけるアングル切り替え画像表示と第２の回転軸Ｂ２におけるアングル切り替え画像表示とがスムーズに切り換えられる。
また、被写体Ａ〜Ｅが複数撮影されており、これら複数の被写体Ａ〜Ｅのいずれか一つの位置に第１の回転軸Ｂ１が設定されることから、被写体を中心にアングルを連続して切り換えて表示することができ、エンタテイメント性を向上させることができる。
また、被写体Ａ〜Ｅが複数撮影されており、これら複数の被写体Ａ〜Ｅのいずれか一つの位置に第１の回転軸Ｂ１が設定されることから、被写体を中心にアングルを連続して切り換えて表示することができ、エンタテイメント性を向上させることができる。
また、第１の位置変更指示入力部２４によって、ユーザの操作を介して、第１の回転軸Ｂ１の位置を任意の位置に変更することができることから、ユーザが所望する位置に第１の回転軸Ｂ１の位置を変更することができ、当該変更した第１の回転軸Ｂ１におけるアングル切り替え画像を連続的に切り換えて表示することができる。例えば、スポーツ中継の動画像やアイドルグループのライブの動画像のように、複数の被写体がいる場合であっても、ユーザが見たい被写体に対してアングル切り替え画像を連続的に切り換えて表示することができる。そのため、エンタテイメント性を向上させることができる。なお、第１の回転軸Ｂ１の位置を変更した場合、変更した第１の回転軸Ｂ１の位置に応じて、第２の回転軸Ｂ２の位置も変更される。もちろん、第２の回転軸Ｂ２の位置が変わらないようにしてもよい。
また、第２の動画像データ生成部２５による遮断画像及び非遮断画像の検出結果に応じて、被写体によって遮られていない動画像が表示されることから、第２の回転軸Ｂ２におけるアングル切り替え画像において、特定の被写体によって遮られないように動画像を表示することができる。例えば、被写体Ａの近傍に第２の回転軸Ｂ２が設定され第２の基準画像が表示されている場合に、第２の回転軸Ｂ２におけるアングル切り替え画像が表示されると、あたかも被写体Ａとして回転中心２ＡＡに立って周囲を見回しているような感覚をユーザに与えることができる。すなわち、被写体Ａとして回転中心２ＡＡに立って被写体Ａの視点で周囲を見回すときに、本来映らないはずの被写体が映ってしまうと、その動画像を見ているユーザに違和感を与えてしまうが、そのような違和感を与えるような被写体を表示させないようにすることによって、ユーザがまるで動画像の中に入って周りを見回すような感覚をユーザに与えることができる。
また、動画像データ出力制御部２２がトリミング指示を表示部４に出力し、表示部４が全領域のうち一部領域のみをトリミングして表示することから、ユーザが見たい被写体を集中して表示することができる。
また、第２の動画像データ生成部２５による遮断画像及び非遮断画像の検出結果に応じて、被写体によって遮られていない動画像が表示されることから、第２の回転軸Ｂ２におけるアングル切り替え画像において、特定の被写体によって遮られないように動画像を表示することができる。例えば、被写体Ａの近傍に第２の回転軸Ｂ２が設定され第２の基準画像が表示されている場合に、第２の回転軸Ｂ２におけるアングル切り替え画像が表示されると、あたかも被写体Ａとして回転中心２ＡＡに立って周囲を見回しているような感覚をユーザに与えることができる。すなわち、被写体Ａとして回転中心２ＡＡに立って被写体Ａの視点で周囲を見回すときに、本来映らないはずの被写体が映ってしまうと、その動画像を見ているユーザに違和感を与えてしまうが、そのような違和感を与えるような被写体を表示させないようにすることによって、ユーザがまるで動画像の中に入って周りを見回すような感覚をユーザに与えることができる。
また、動画像データ出力制御部２２がトリミング指示を表示部４に出力し、表示部４が全領域のうち一部領域のみをトリミングして表示することから、ユーザが見たい被写体を集中して表示することができる。
なお、本願に関する動画像処理装置等の技術範囲は上記の実施形態に限定されるものではなく、種々の変更を加えることが可能である。
例えば、第２の回転軸Ｂ２の位置を変更するための第２の位置変更指示を入力する第２の位置変更指示入力手段を設けてもよい。すなわち、操作部３が第２の位置変更指示を出力すると、ステップＳ５と同様に、第２の位置変更指示入力手段が当該第２の位置変更指示を入力し、変更後に第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、変更後の第２の回転軸Ｂ２を中心にアングルを回転させた動画像を表示装置に出力して当該表示装置に表示させるようにしてもよい。
また、第１の回転軸Ｂ１におけるアングル切り替え画像を内方向視点とし、第２の回転軸Ｂ２におけるアングル切り替え画像を外方向視点としたが、これに限ることはなく、適宜変更可能である。例えば、第１の回転軸Ｂ１におけるアングル切り替え画像を外方向視点とし、かつ第２の回転軸Ｂ２におけるアングル切り替え画像を内方向視点としたり、いずれのアングル切り替え画像も内方向視点にしたり、いずれのアングル切り替え画像も外方向視点にしたりしてもよい。
また、図３（１）に示すように、第１の回転軸におけるアングル切り替え表示のときに各画像データを利用しているが、これに限ることはなく、各画像データの構成は適宜変更可能である。例えば、図３（２）に示すように、各画像データを連結してもよい。
また、図３（２）に示すように、第２の回転軸におけるアングル切り替え表示のときに各画像データを連結して利用しているが、これに限ることはなく、各画像データの構成は適宜変更可能である。例えば、図３（１）に示すように、各画像データを連結せずに利用してもよい。
例えば、第２の回転軸Ｂ２の位置を変更するための第２の位置変更指示を入力する第２の位置変更指示入力手段を設けてもよい。すなわち、操作部３が第２の位置変更指示を出力すると、ステップＳ５と同様に、第２の位置変更指示入力手段が当該第２の位置変更指示を入力し、変更後に第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、変更後の第２の回転軸Ｂ２を中心にアングルを回転させた動画像を表示装置に出力して当該表示装置に表示させるようにしてもよい。
また、第１の回転軸Ｂ１におけるアングル切り替え画像を内方向視点とし、第２の回転軸Ｂ２におけるアングル切り替え画像を外方向視点としたが、これに限ることはなく、適宜変更可能である。例えば、第１の回転軸Ｂ１におけるアングル切り替え画像を外方向視点とし、かつ第２の回転軸Ｂ２におけるアングル切り替え画像を内方向視点としたり、いずれのアングル切り替え画像も内方向視点にしたり、いずれのアングル切り替え画像も外方向視点にしたりしてもよい。
また、図３（１）に示すように、第１の回転軸におけるアングル切り替え表示のときに各画像データを利用しているが、これに限ることはなく、各画像データの構成は適宜変更可能である。例えば、図３（２）に示すように、各画像データを連結してもよい。
また、図３（２）に示すように、第２の回転軸におけるアングル切り替え表示のときに各画像データを連結して利用しているが、これに限ることはなく、各画像データの構成は適宜変更可能である。例えば、図３（１）に示すように、各画像データを連結せずに利用してもよい。
また、第１の回転軸Ｂ１及び第２の回転軸Ｂ２を表示画面の中央に配しているが、これに限ることはなく、表示画面の所望の位置に適宜変更可能である。例えば、第１の回転軸Ｂ１及び第２の回転軸Ｂ２を表示画面の中央より左右方向に偏心させた位置（例えば表示画面の隅など）に設定してもよい。
また、ステップＳ２０において、所定の被写体をドラッグして表示画面の中央に移動させることにより、第１の回転軸Ｂ１を変更させるとしたが、これに限ることはなく、当該変更指示は適宜変更可能である。例えば、図１６（１）に示す表示画面において、ユーザが被写体Ｂをクリックすると、操作部３が第１の回転軸Ｂ１の位置変更指示及びスライド指示を第１の位置変更指示入力部２４に出力する。そして、上記と同様にして、トリミング制御部２７が被写体Ｂの近傍を拡大表示するためのトリミング情報を算出して、動画像データ出力制御部２２が、当該トリミング情報と記憶部５から読み出した画像データとを表示部４に出力する。表示部４は、これらトリミング情報と画像データを入力すると、画像データを再生し、トリミング情報に応じた領域を拡大して表示画面に表示する。すなわち、図１６(２)に示すように、被写体Ｂや他の被写体Ａ，Ｃが拡大されて表示画面の中央に配される。この状態で、アングル切り替え指示入力部２３がアングル切り替え指示を入力すると、上記と同様にして、図１６（３）に示すように、第１の回転軸Ｂ１を回転中心としてアングルが切り換えられた画像を拡大して表示部４が表示する。
また、ステップＳ２０において、所定の被写体をドラッグして表示画面の中央に移動させることにより、第１の回転軸Ｂ１を変更させるとしたが、これに限ることはなく、当該変更指示は適宜変更可能である。例えば、図１６（１）に示す表示画面において、ユーザが被写体Ｂをクリックすると、操作部３が第１の回転軸Ｂ１の位置変更指示及びスライド指示を第１の位置変更指示入力部２４に出力する。そして、上記と同様にして、トリミング制御部２７が被写体Ｂの近傍を拡大表示するためのトリミング情報を算出して、動画像データ出力制御部２２が、当該トリミング情報と記憶部５から読み出した画像データとを表示部４に出力する。表示部４は、これらトリミング情報と画像データを入力すると、画像データを再生し、トリミング情報に応じた領域を拡大して表示画面に表示する。すなわち、図１６(２)に示すように、被写体Ｂや他の被写体Ａ，Ｃが拡大されて表示画面の中央に配される。この状態で、アングル切り替え指示入力部２３がアングル切り替え指示を入力すると、上記と同様にして、図１６（３）に示すように、第１の回転軸Ｂ１を回転中心としてアングルが切り換えられた画像を拡大して表示部４が表示する。
また、第１の回転軸Ｂ１を設定するときに、表示画面上において、被写体が奥行方向に複数存在する場合がある。その場合、第１の回転軸Ｂ１は、それら奥行方向の被写体ごとに設定することができるようにしてもよい。例えば、図１７（１）〜（３）の俯瞰図に示すように、同一画面上において、被写体Ａ〜Ｃが奥行方向Ｄに複数重なっている場合がある。この場合、ステップＳ２において、表示部４が動画像を表示しているときに、位置検出部２６が被写体Ａ〜Ｃの位置を検出し、各位置情報を動画像データ出力制御部２２に出力する。動画像データ出力制御部２２は、被写体Ａ〜Ｃが奥行方向Ｄに重なっていると判定すると、ユーザ操作を介して操作部３から出力される奥行選択指示を受け付ける。例えば、ユーザが被写体Ａをクリックすると、操作部３が被写体Ａの位置を回転中心ＡＡとする奥行選択指示を出力する。動画像データ出力制御部２２は、当該奥行選択指示を入力すると、回転中心ＡＡを第１の回転軸Ｂ１の位置として記憶部５に記憶する。そして、上記と同様にして、表示部４が、回転中心ＡＡを中心としたアングル切り替え画像を連続的に切り換えて表示する。
一方、ユーザが被写体Ａを２回クリックすると、操作部３が被写体Ｂの位置を回転中心ＢＢとする奥行選択指示を出力する。動画像データ出力制御部２２は、当該奥行選択指示を入力すると、図１７(２)に示すように、第１の回転軸Ｂ１の位置が奥行方向Ｄに切り換えられたことを示すフレーム（奥行変更表示）Ｆ２の表示指示を表示部４に出力して表示させるとともに、回転中心ＢＢを第１の回転軸Ｂ１の位置として記憶部５に記憶する。そして、上記と同様にして、表示部４が、回転中心ＢＢを中心としたアングル切り替え画像を連続的に切り換えて表示する。また、ユーザが被写体Ａを３回クリックすると、操作部３が被写体Ｃの位置を回転中心ＣＣとする奥行選択指示を出力する。動画像データ出力制御部２２は、当該奥行選択指示を入力すると、図１７(３)に示すように、フレームＦ２よりも小さなフレームＦ３の表示指示を表示部４に出力して表示させるとともに、回転中心ＣＣを第１の回転軸Ｂ１の位置として記憶部５に記憶する。そして、上記と同様にして、表示部４が、回転中心ＣＣを中心としたアングル切り替え画像を連続的に切り換えて表示する。
また、被写体が人であるものとしているが、これに限ることはなく、例えば、動植物、機械又はスポーツ用のボールなどであってもよい。
また、一つの被写体を一人の人であるものとしているが、これに限ることはなく、被写体の単位は適宜変更可能である。すなわち、複数の人が集まった集合体を被写体とすることができる。例えば、ダンスグループなどのように複数の人が集まったまとまりを一つの被写体とすることにより、その中央部を被写体の位置として第１の回転軸Ｂ１を設定することができる。また、例えば、サッカーのＰＫなどのように、複数の選手が集まったまとまりを一つの被写体とすることにより、その中央部を被写体の位置として第１の回転軸Ｂ１を設定することができる。すなわち、ここでの被写体とは、個別単位での個別被写体と、複数のまとまりとしての集合被写体とを含むものである。
また、位置検出部２６が、画像処理によって被写体の位置を検出するものとしているが、これに限ることはなく、位置検出の手段は適宜変更可能である。例えば、赤外線などのセンサによって位置を検出するものや、被写体に位置情報発信装置を取り付けて、当該位置情報発信装置から送信される位置情報に基づいて位置を検出するものであってもよい。
また、一つの被写体を一人の人であるものとしているが、これに限ることはなく、被写体の単位は適宜変更可能である。すなわち、複数の人が集まった集合体を被写体とすることができる。例えば、ダンスグループなどのように複数の人が集まったまとまりを一つの被写体とすることにより、その中央部を被写体の位置として第１の回転軸Ｂ１を設定することができる。また、例えば、サッカーのＰＫなどのように、複数の選手が集まったまとまりを一つの被写体とすることにより、その中央部を被写体の位置として第１の回転軸Ｂ１を設定することができる。すなわち、ここでの被写体とは、個別単位での個別被写体と、複数のまとまりとしての集合被写体とを含むものである。
また、位置検出部２６が、画像処理によって被写体の位置を検出するものとしているが、これに限ることはなく、位置検出の手段は適宜変更可能である。例えば、赤外線などのセンサによって位置を検出するものや、被写体に位置情報発信装置を取り付けて、当該位置情報発信装置から送信される位置情報に基づいて位置を検出するものであってもよい。
また、第２の回転軸Ｂ２の位置が、第２領域２Ａｒのうち、回転中心ＡＡを通り、かつカメラａの光軸に平行な線上であって、回転中心ＡＡの近傍に設定されるものとしているが、これに限ることはなく、その位置は適宜変更可能である。
また、第２の動画像データ生成部２５が、４つのカメラａ，ｃ，ｅ，ｇの動画像データに基づいて第２の動画像データを生成するものとしているが、これに限ることはなく、使用する動画像データは適宜変更可能である。また、使用する動画像データは、４つではなく、３つから８つまで適宜変更可能である。
また、カメラａ〜ｈの設置数を８つとしているが、これに限ることはなく、その設置数は適宜変更可能である。
また、第２の動画像データ生成部２５が、４つのカメラａ，ｃ，ｅ，ｇの動画像データに基づいて第２の動画像データを生成するものとしているが、これに限ることはなく、使用する動画像データは適宜変更可能である。また、使用する動画像データは、４つではなく、３つから８つまで適宜変更可能である。
また、カメラａ〜ｈの設置数を８つとしているが、これに限ることはなく、その設置数は適宜変更可能である。
また、ステップＳ２において、表示部４が、図６（１）に示すように、全体動画像を表示画面に表示しているときに、上記と同様にして、第２の回転軸Ｂ２におけるアングル切り替え指示により、第２の回転軸Ｂ２におけるアングル切り替え動画像を切り換えて表示することができることは言うまでもない。
また、ステップＳ３１の前に、ステップＳ１１において最初に第２の動画像データを生成しているが、これに限ることはなく、第２の動画像データ生成部２６が第２の動画像データの生成指示を入力すると、ステップＳ１１を経ることなく、ステップＳ１３において遮断画像データの判定をしてもよい。
また、ステップＳ３１において、第２の動画像データ生成部２５が、カメラａ〜ｈのすべての動画像データを検出するものとしたが、これに限ることはなく、検出対象とする動画像データの数は適宜変更可能である。例えば、カメラａ〜ｈのうちの一部のカメラの動画像データのみを検出対象としてもよい。
また、ステップＳ３１において、第２の動画像データ生成部２５が、一致領域ＡＣがあるか否かを判定するものとしているが、これに限ることはなく、適宜変更可能である。例えば、第２の動画像データ生成部２５が、一致領域ＡＣの長さを検出し、当該長さがあらかじめ設定された遮断許容量の閾値を越えるか否かを判定し、当該閾値を超える場合にのみ、ステップＳ３３に進むものとしてもよい。これにより、遮られていない第２の動画像データを生成するときに、被写体の遮断量に応じて、当該第２の動画像データを生成するかしないかを調整することができ、利便性を向上させることができる。
また、ステップＳ３１の前に、ステップＳ１１において最初に第２の動画像データを生成しているが、これに限ることはなく、第２の動画像データ生成部２６が第２の動画像データの生成指示を入力すると、ステップＳ１１を経ることなく、ステップＳ１３において遮断画像データの判定をしてもよい。
また、ステップＳ３１において、第２の動画像データ生成部２５が、カメラａ〜ｈのすべての動画像データを検出するものとしたが、これに限ることはなく、検出対象とする動画像データの数は適宜変更可能である。例えば、カメラａ〜ｈのうちの一部のカメラの動画像データのみを検出対象としてもよい。
また、ステップＳ３１において、第２の動画像データ生成部２５が、一致領域ＡＣがあるか否かを判定するものとしているが、これに限ることはなく、適宜変更可能である。例えば、第２の動画像データ生成部２５が、一致領域ＡＣの長さを検出し、当該長さがあらかじめ設定された遮断許容量の閾値を越えるか否かを判定し、当該閾値を超える場合にのみ、ステップＳ３３に進むものとしてもよい。これにより、遮られていない第２の動画像データを生成するときに、被写体の遮断量に応じて、当該第２の動画像データを生成するかしないかを調整することができ、利便性を向上させることができる。
また、ステップＳ３２において、第２の動画像データ生成部２５が、遮断量の少ない画像データの一例として非遮断画像データがあるか否かを判定するものとしているが、これに限ることはなく、適宜変更可能である。例えば、第２の動画像データ生成部２５が、他の画像データから一致領域の量を算出して、ステップＳ３２において、非遮断画像データがないと判定した後、当該他の画像データの一致領域の量が、一致領域ＡＣの量より少ないか否かを判定してもよい。そして、当該他の画像データの一致領域の量が、一致領域ＡＣの量より少ないと、第２の動画像データ生成部２５が判定した場合にのみ、当該他の画像データを利用して、第２の動画像データ生成部２５が、第２の動画像データを生成するようにしてもよい。これにより、被写体が遮断されているときの当該被写体をなるべく多く表示することができる。
また、ステップＳ３３において、第２の動画像データ生成部２５が、カメラａ，ｃ，ｄ，ｅ，ｇの画像データを読み出して第２の画像データを生成するものとしているが、これに限ることはなく、適宜変更可能である。例えば、第２の動画像データ生成部２５は、一致領域ＡＣを撮影したカメラｅのデータを読み出すことなく、当該カメラｅの画像データに代えてカメラｄの画像データを読み出し、カメラａ，ｄ，ｇのみで第２の非遮断画像データを生成してもよい。
また、ステップＳ３３において、第２の動画像データ生成部２５が、カメラａ，ｃ，ｄ，ｅ，ｇの画像データを読み出して第２の画像データを生成するものとしているが、これに限ることはなく、適宜変更可能である。例えば、第２の動画像データ生成部２５は、一致領域ＡＣを撮影したカメラｅのデータを読み出すことなく、当該カメラｅの画像データに代えてカメラｄの画像データを読み出し、カメラａ，ｄ，ｇのみで第２の非遮断画像データを生成してもよい。
また、動画像処理表示装置１の各機能を別個の装置として独立させて、動画像処理表示装置１と当該別個の装置とを接続するようにしてもよい。もちろん、動画像処理表示装置１とそれら別個の装置とをネットワークを介して接続するようにしてもよい。例えば、図１８に示すように、動画像処理表示システム１０は、表示装置２０と画像処理装置３０とがネットワークＮを介して接続されて構成されている。なお、図１８において、図１から図１７に記載の構成要素と同一部分については同一符号を付し、その説明を省略する。この変形例と上記実施形態とは基本的構成は同一であり、ここでは主として異なる点について説明する。
表示装置２０は、全体の制御を行う制御部２０１と、通信処理を行う通信部２０３と、操作部３と表示部４とを備えている。
また、画像処理装置３０は、通信処理を行う通信部３０１と、制御部２と記憶部５と入力部６とを備えている。なお、表示装置２０と画像処理装置３０とは、通信部２０３，３０１を介して、データの入出力を行うようになっている。例えば、操作部３及び表示部４と制御部２とは、通信部２０３，３０１を介して、上記実施形態と同様にして、データの入出力を行う。
表示装置２０は、全体の制御を行う制御部２０１と、通信処理を行う通信部２０３と、操作部３と表示部４とを備えている。
また、画像処理装置３０は、通信処理を行う通信部３０１と、制御部２と記憶部５と入力部６とを備えている。なお、表示装置２０と画像処理装置３０とは、通信部２０３，３０１を介して、データの入出力を行うようになっている。例えば、操作部３及び表示部４と制御部２とは、通信部２０３，３０１を介して、上記実施形態と同様にして、データの入出力を行う。
また、第１の回転軸Ｂ１を被写体の位置に設定しているが、これに限ることはなく、第１の回転軸Ｂ１の位置は、適宜変更可能である。例えば、第１の回転軸Ｂ１の位置を被写体の位置以外に設定してもよい。
また、第１の回転軸Ｂ１におけるアングル切り替え画像のうちの第１の基準画像と、第２の回転軸におけるアングル切り替え画像のうちの第２の基準画像とが一致しているものとしているが、これに限ることはなく、これら第１の基準画像と第２の基準画像とを異なるものとして設定してもよい。
また、被写体が複数撮影されているものとしているが、これに限ることはなく、被写体は一つであってもよい。
また、第１の位置変更指示入力手段によって、第１の回転軸の位置を変更するものとしているが、これに限ることはなく、第１の回転軸の位置が変更できないようになっていてもよい。
また、遮断画像検出手段と他アングル画像検出手段との検出結果に応じて、被写体が遮断量の少ない動画像を検出するものとしているが、これに限ることはなく、これら遮断画像検出手段と他アングル画像検出手段とを無くして、被写体が遮断されたまま表示するようにしてもよい。
また、第１の回転軸Ｂ１におけるアングル切り替え画像のうちの第１の基準画像と、第２の回転軸におけるアングル切り替え画像のうちの第２の基準画像とが一致しているものとしているが、これに限ることはなく、これら第１の基準画像と第２の基準画像とを異なるものとして設定してもよい。
また、被写体が複数撮影されているものとしているが、これに限ることはなく、被写体は一つであってもよい。
また、第１の位置変更指示入力手段によって、第１の回転軸の位置を変更するものとしているが、これに限ることはなく、第１の回転軸の位置が変更できないようになっていてもよい。
また、遮断画像検出手段と他アングル画像検出手段との検出結果に応じて、被写体が遮断量の少ない動画像を検出するものとしているが、これに限ることはなく、これら遮断画像検出手段と他アングル画像検出手段とを無くして、被写体が遮断されたまま表示するようにしてもよい。
また、カメラａ〜ｈの配置は円上にすることなく、適宜変更可能である。例えば、カメラａ〜ｈを円の全周のうちの一部のみに周上に配置したり、任意の曲線上に配置したりしてもよい。さらに、カメラａ〜ｈを高さ方向に配置してもよいし、縦横や前後に配置してもよい。また、カメラの設置角度・位置・設置数などは適宜変更可能である。
また、画像品質として３０ｆｐｓを想定しているが、当該画像品質は適宜変更可能である。例えば、１０ｆｐｓ〜１２０ｆｐｓなどとしてもよい。
また、操作部３として、マウスなどを例示しているが、これに限ることはなく、適宜変更可能である。例えば、タッチパネルなどのように、表示画面と指との接触位置を移動させるようにして、アングル切り替え指示を行ってもよい。この場合、表示画面における接触位置が、アングル切り替え指示の座標として機能する。
また、画像品質として３０ｆｐｓを想定しているが、当該画像品質は適宜変更可能である。例えば、１０ｆｐｓ〜１２０ｆｐｓなどとしてもよい。
また、操作部３として、マウスなどを例示しているが、これに限ることはなく、適宜変更可能である。例えば、タッチパネルなどのように、表示画面と指との接触位置を移動させるようにして、アングル切り替え指示を行ってもよい。この場合、表示画面における接触位置が、アングル切り替え指示の座標として機能する。
アングル切り替え指示入力手段として、表示画面を見る視聴者の位置の変位を検出する変位検出手段が視聴者の位置の変位に応じて、アングル切り替え指示を入力するようにしてもよい。例えば、視聴者から発せられる赤外線によって視聴者の移動を検知する赤外線検知手段や、視聴者の携帯端末のＧＰＳ機能などを利用したＧＰＳ位置検出手段、又は、画像処理により差分画像に基づいて視聴者の位置の変位を検出する画像位置検出手段などによって、視聴者の移動を検知してもよい。
また、視聴者の移動を検知するだけでなく、例えば、人でなくても、ネコや犬などのような動物や機械であってよい。
また、視聴者の身体全体の移動を検知することなく、例えば、視聴者の身体の少なくとも一部の移動を検知するものであってもよい。具体的には、指示空間座標内において、視聴者が手を左から右にスライド移動させたときの手の動きをアングル切り替え指示として検知するようにしてもよい。これにより、手などの身体を動かすとその動きに合わせて動画像のアングルを連続して変化させることができるため、視聴者が動画像のアングルの変化を見ながら、手を動かすなどのアングル切り替え指示をリアルタイムに行うことができる。
また、視聴者の移動を検知するだけでなく、例えば、人でなくても、ネコや犬などのような動物や機械であってよい。
また、視聴者の身体全体の移動を検知することなく、例えば、視聴者の身体の少なくとも一部の移動を検知するものであってもよい。具体的には、指示空間座標内において、視聴者が手を左から右にスライド移動させたときの手の動きをアングル切り替え指示として検知するようにしてもよい。これにより、手などの身体を動かすとその動きに合わせて動画像のアングルを連続して変化させることができるため、視聴者が動画像のアングルの変化を見ながら、手を動かすなどのアングル切り替え指示をリアルタイムに行うことができる。
また、視聴者が表示手段の傾きや角度を変化させたときに、その変化に応じて、動画像のアングルを連続して切り替えることができるように、アングル切り替え指示入力手段が傾き検知部や角度検知部などであってもよい。例えば、スマートフォンなどの携帯端末に、アングル切り替え指示入力手段としての傾き検知部や角度検知部を設けてもよい。すなわち、ユーザが当該携帯端末を把持して表示部を見ている状態で、携帯端末の角度を連続して切り替えることにより、傾き検知部や角度検知部がアングル変更指示を連続して入力し、表示手段がアングルを連続して切り替えて表示するようにしてもよい。これにより、ユーザが携帯端末を把持しながら角度を変えていくだけで、表示手段に映る動画像のアングルが連続して切り替えられる。
また、メガネなどの目を覆う部分（ガラスやレンズの部分）に動画像を表示することができるようなメガネ式のデバイスに、アングル切り替え指示入力手段としての傾き検知部や角度検知部を設けてもよい。すなわち、ユーザが当該メガネ式デバイスを装着したまま顔の角度を変えていくことにより、傾き検知部や角度検知部がアングル切り換え指示を連続して入力し、表示手段としての目を覆う部分がアングルを連続して切り替えて表示するようにしてもよい。これにより、ユーザがメガネ式デバイスを装着して顔の角度を変えていくだけで、表示手段に映ったユーザの見ている動画像のアングルが連続して切り替えられる。
また、表示手段としては、液晶、プラズマ、有機ＥＬなどのモニタだけでなく、ホログラムなどによる立体的な表示であってもよい。
また、上記実施形態と上記変形例を自由に組み合わせることができることは言うまでもない。
また、メガネなどの目を覆う部分（ガラスやレンズの部分）に動画像を表示することができるようなメガネ式のデバイスに、アングル切り替え指示入力手段としての傾き検知部や角度検知部を設けてもよい。すなわち、ユーザが当該メガネ式デバイスを装着したまま顔の角度を変えていくことにより、傾き検知部や角度検知部がアングル切り換え指示を連続して入力し、表示手段としての目を覆う部分がアングルを連続して切り替えて表示するようにしてもよい。これにより、ユーザがメガネ式デバイスを装着して顔の角度を変えていくだけで、表示手段に映ったユーザの見ている動画像のアングルが連続して切り替えられる。
また、表示手段としては、液晶、プラズマ、有機ＥＬなどのモニタだけでなく、ホログラムなどによる立体的な表示であってもよい。
また、上記実施形態と上記変形例を自由に組み合わせることができることは言うまでもない。
また、上記実施形態における動画像処理表示装置１の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより動画像の処理や表示を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ、ＤＶＤ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ、ＤＶＤ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。
以上の実施形態等に関し、さらに以下の付記を記す。
（付記１）
被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置であって、
前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力手段と、
前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力手段と、
前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力手段とを備え、
前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させ、前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる動画像処理装置。
被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置であって、
前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力手段と、
前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力手段と、
前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力手段とを備え、
前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させ、前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる動画像処理装置。
（付記２）
前記第１の回転軸が、所定のタイミングかつ所定のアングルにおける前記被写体の位置に設定されており、
前記第２の回転軸が、前記所定のタイミングかつ前記所定のアングルにおける前記被写体の近傍に設定されており、
前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸上の領域における動画像を前記表示装置に出力して前記表示装置に表示させ、前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、当該切り替え指示されたアングルを撮影する前記カメラに対して前記第２の回転軸を挟んで対向する側の領域における動画像を前記表示装置に出力して前記表示装置に表示させる付記１に記載の動画像処理装置。
前記第１の回転軸が、所定のタイミングかつ所定のアングルにおける前記被写体の位置に設定されており、
前記第２の回転軸が、前記所定のタイミングかつ前記所定のアングルにおける前記被写体の近傍に設定されており、
前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸上の領域における動画像を前記表示装置に出力して前記表示装置に表示させ、前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、当該切り替え指示されたアングルを撮影する前記カメラに対して前記第２の回転軸を挟んで対向する側の領域における動画像を前記表示装置に出力して前記表示装置に表示させる付記１に記載の動画像処理装置。
（付記３）
前記第１の回転軸が設定された画像のうち、前記所定のタイミングかつ前記所定のアングルにおける第１の基準画像と、前記第２の回転軸が設定された画像のうち、前記所定のタイミングかつ前記所定のアングルにおける第２の基準画像とが一致している付記２に記載の動画像処理装置。
前記第１の回転軸が設定された画像のうち、前記所定のタイミングかつ前記所定のアングルにおける第１の基準画像と、前記第２の回転軸が設定された画像のうち、前記所定のタイミングかつ前記所定のアングルにおける第２の基準画像とが一致している付記２に記載の動画像処理装置。
（付記４）
前記被写体が複数撮影されており、
前記第１の回転軸が、複数の被写体のうちのいずれか一つの被写体の位置に設定されている付記２又は付記３に記載の動画像処理装置。
前記被写体が複数撮影されており、
前記第１の回転軸が、複数の被写体のうちのいずれか一つの被写体の位置に設定されている付記２又は付記３に記載の動画像処理装置。
（付記５）
前記第２の回転軸を中心とした動画像のうち、特定のタイミングかつ特定のアングルにおいて、特定の被写体によって遮られた遮断画像を検出する遮断画像検出手段と、
前記特定のタイミングにおいて、前記特定の被写体によって遮られた遮断量の少ない他のアングルの画像を検出する他アングル画像検出手段とを備え、
前記動画像出力手段は、前記遮断画像検出手段が前記遮断画像を検出した場合において、前記第２のアングル切り替え指示入力手段が前記遮断画像へのアングル切り替え指示を入力したとき、前記他アングル画像検出手段が検出した他のアングルの画像を前記表示装置に出力して前記表示装置に表示させる付記４に記載の動画像処理装置。
前記第２の回転軸を中心とした動画像のうち、特定のタイミングかつ特定のアングルにおいて、特定の被写体によって遮られた遮断画像を検出する遮断画像検出手段と、
前記特定のタイミングにおいて、前記特定の被写体によって遮られた遮断量の少ない他のアングルの画像を検出する他アングル画像検出手段とを備え、
前記動画像出力手段は、前記遮断画像検出手段が前記遮断画像を検出した場合において、前記第２のアングル切り替え指示入力手段が前記遮断画像へのアングル切り替え指示を入力したとき、前記他アングル画像検出手段が検出した他のアングルの画像を前記表示装置に出力して前記表示装置に表示させる付記４に記載の動画像処理装置。
（付記６）
前記第１の回転軸の位置を変更するための位置変更指示を入力する第１の位置変更指示入力手段を備え、
前記動画像出力手段は、前記第１の位置変更指示入力手段が前記位置変更指示を入力すると、前記第１の回転軸の位置を変更し、変更後に前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、変更後の第１の回転軸を中心にアングルを回転させた動画像を前記表示装置に出力して前記表示装置に表示させる付記１から付記５のいずれか一項に記載の動画像処理装置。
前記第１の回転軸の位置を変更するための位置変更指示を入力する第１の位置変更指示入力手段を備え、
前記動画像出力手段は、前記第１の位置変更指示入力手段が前記位置変更指示を入力すると、前記第１の回転軸の位置を変更し、変更後に前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、変更後の第１の回転軸を中心にアングルを回転させた動画像を前記表示装置に出力して前記表示装置に表示させる付記１から付記５のいずれか一項に記載の動画像処理装置。
（付記７）
前記動画像出力手段は、前記動画像の撮影領域の全領域のうち一部領域をトリミングするトリミング指示を前記表示装置に出力して前記表示装置に前記一部領域を表示させる付記１から付記６のいずれか一項に記載の動画像処理装置。
前記動画像出力手段は、前記動画像の撮影領域の全領域のうち一部領域をトリミングするトリミング指示を前記表示装置に出力して前記表示装置に前記一部領域を表示させる付記１から付記６のいずれか一項に記載の動画像処理装置。
（付記８）
被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理方法であって、
動画像出力手段が、前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力ステップと、
第１のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力ステップと、
第２のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力ステップと、
前記動画像出力手段が、前記第１のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第１の切り換えステップと、
前記動画像出力手段が、前記第２のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第２の切り換えステップと
を含む動画像処理方法。
被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理方法であって、
動画像出力手段が、前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力ステップと、
第１のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力ステップと、
第２のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力ステップと、
前記動画像出力手段が、前記第１のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第１の切り換えステップと、
前記動画像出力手段が、前記第２のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第２の切り換えステップと
を含む動画像処理方法。
（付記９）
被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置におけるプログラムであって、
動画像出力手段が、前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力ステップと、
第１のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力ステップと、
第２のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力ステップと、
前記動画像出力手段が、前記第１のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第１の切り換えステップと、
前記動画像出力手段が、前記第２のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第２の切り換えステップと
を前記動画像処理装置のコンピュータに実行させる動画像処理プログラム。
被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置におけるプログラムであって、
動画像出力手段が、前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力ステップと、
第１のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力ステップと、
第２のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力ステップと、
前記動画像出力手段が、前記第１のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第１の切り換えステップと、
前記動画像出力手段が、前記第２のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第２の切り換えステップと
を前記動画像処理装置のコンピュータに実行させる動画像処理プログラム。
（付記１０）
被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置と、前記動画像処理装置によって処理された動画像を表示する表示装置とが接続された動画像処理表示システムであって、
前記表示装置は、
前記動画像処理装置から出力された動画像を表示する表示手段を備え、
前記動画像処理装置は、
前記動画像を前記表示装置に出力して前記表示装置に表示させる動画像出力手段と、
前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力手段と、
前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力手段とを備え、
前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させ、かつ前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる動画像処理表示システム。
被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置と、前記動画像処理装置によって処理された動画像を表示する表示装置とが接続された動画像処理表示システムであって、
前記表示装置は、
前記動画像処理装置から出力された動画像を表示する表示手段を備え、
前記動画像処理装置は、
前記動画像を前記表示装置に出力して前記表示装置に表示させる動画像出力手段と、
前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力手段と、
前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力手段とを備え、
前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させ、かつ前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる動画像処理表示システム。
１ 動画像処理表示装置（動画像処理表示システム）
４ 表示部（表示装置）
１０ 動画像処理表示システム
２０ 表示装置
２２ 動画像データ出力制御部（動画像出力手段）
２３ アングル切り替え指示入力部（第１のアングル切り替え指示入力手段、第２のアングル切り替え指示入力手段）
２４ 第１の位置変更指示入力部（第１の位置変更指示入力手段）
２５ 第２の動画像データ生成部（遮断画像検出手段、他アングル画像検出手段）
３０ 画像処理装置
ａ１１一部領域（第１の基準画像、第２の基準画像）
Ｓ１ 第１の回転軸
Ｓ２ 第２の回転軸
４ 表示部（表示装置）
１０ 動画像処理表示システム
２０ 表示装置
２２ 動画像データ出力制御部（動画像出力手段）
２３ アングル切り替え指示入力部（第１のアングル切り替え指示入力手段、第２のアングル切り替え指示入力手段）
２４ 第１の位置変更指示入力部（第１の位置変更指示入力手段）
２５ 第２の動画像データ生成部（遮断画像検出手段、他アングル画像検出手段）
３０ 画像処理装置
ａ１１一部領域（第１の基準画像、第２の基準画像）
Ｓ１ 第１の回転軸
Ｓ２ 第２の回転軸
Claims (9)
- 被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置であって、
前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力手段と、
前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力手段と、
前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力手段とを備え、
前記第１の回転軸が、所定のタイミングかつ所定のアングルにおける前記被写体の位置に設定されており、
前記第２の回転軸が、前記所定のタイミングかつ前記所定のアングルにおける前記被写体の近傍に設定されており、
前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸上の領域における動画像であって前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させ、前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、当該切り替え指示されたアングルを撮影する前記カメラに対して前記第２の回転軸を挟んで対向する側の領域における動画像であって前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる動画像処理装置。 - 前記第１の回転軸が設定された画像のうち、前記所定のタイミングかつ前記所定のアングルにおける第１の基準画像と、前記第２の回転軸が設定された画像のうち、前記所定のタイミングかつ前記所定のアングルにおける第２の基準画像とが一致している請求項１に記載の動画像処理装置。
- 前記被写体が複数撮影されており、
前記第１の回転軸が、複数の被写体のうちのいずれか一つの被写体の位置に設定されている請求項１又は請求項２に記載の動画像処理装置。 - 前記第２の回転軸を中心とした動画像のうち、特定のタイミングかつ特定のアングルにおいて、特定の被写体によって遮られた遮断画像を検出する遮断画像検出手段と、
前記特定のタイミングにおいて、前記特定の被写体によって遮られた遮断量の少ない他のアングルの画像を検出する他アングル画像検出手段とを備え、
前記動画像出力手段は、前記遮断画像検出手段が前記遮断画像を検出した場合において、前記第２のアングル切り替え指示入力手段が前記遮断画像へのアングル切り替え指示を入力したとき、前記他アングル画像検出手段が検出した他のアングルの画像を前記表示装置に出力して前記表示装置に表示させる請求項３に記載の動画像処理装置。 - 前記第１の回転軸の位置を変更するための位置変更指示を入力する第１の位置変更指示入力手段を備え、
前記動画像出力手段は、前記第１の位置変更指示入力手段が前記位置変更指示を入力すると、前記第１の回転軸の位置を変更し、変更後に前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、変更後の第１の回転軸を中心にアングルを回転させた動画像を前記表示装置に出力して前記表示装置に表示させる請求項１から請求項４のいずれか一項に記載の動画像処理装置。 - 前記動画像出力手段は、前記動画像の撮影領域の全領域のうち一部領域をトリミングするトリミング指示を前記表示装置に出力して前記表示装置に前記一部領域を表示させる請求項１から請求項５のいずれか一項に記載の動画像処理装置。
- 被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理方法であって、
動画像出力手段が、前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力ステップと、
第１のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力ステップと、
第２のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力ステップとを含み、
前記第１の回転軸が、所定のタイミングかつ所定のアングルにおける前記被写体の位置に設定されており、
前記第２の回転軸が、前記所定のタイミングかつ前記所定のアングルにおける前記被写体の近傍に設定されており、
前記動画像出力手段が、前記第１のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第１の回転軸上の領域における動画像であって前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第１の切り換えステップと、
前記動画像出力手段が、前記第２のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、当該切り替え指示されたアングルを撮影する前記カメラに対して前記第２の回転軸を挟んで対向する側の領域における動画像であって前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第２の切り換えステップと
を含む動画像処理方法。 - 被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置におけるプログラムであって、
動画像出力手段が、前記動画像を表示装置に出力して前記表示装置に表示させる動画像出力ステップと、
第１のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力ステップと、
第２のアングル切り替え指示入力手段が、前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力ステップとを含み、
前記第１の回転軸が、所定のタイミングかつ所定のアングルにおける前記被写体の位置に設定されており、
前記第２の回転軸が、前記所定のタイミングかつ前記所定のアングルにおける前記被写体の近傍に設定されており、
前記動画像出力手段が、前記第１のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、前記第１の回転軸上の領域における動画像であって前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第１の切り換えステップと、
前記動画像出力手段が、前記第２のアングル切り替え指示入力ステップによってアングル切り替え指示が入力されると、当該切り替え指示されたアングルを撮影する前記カメラに対して前記第２の回転軸を挟んで対向する側の領域における動画像であって前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる第２の切り換えステップと
を前記動画像処理装置のコンピュータに実行させる動画像処理プログラム。 - 被写体に対して複数のカメラで複数のアングルから撮影した動画像を処理する動画像処理装置と、前記動画像処理装置によって処理された動画像を表示する表示装置とが接続された動画像処理表示システムであって、
前記表示装置は、
前記動画像処理装置から出力された動画像を表示する表示手段を備え、
前記動画像処理装置は、
前記動画像を前記表示装置に出力して前記表示装置に表示させる動画像出力手段と、
前記表示装置が表示する動画像に対して、第１の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第１のアングル切り替え指示入力手段と、
前記表示装置が表示する動画像に対して、第２の回転軸を中心とした前記動画像のアングル切り換え指示を入力する第２のアングル切り替え指示入力手段とを備え、
前記第１の回転軸が、所定のタイミングかつ所定のアングルにおける前記被写体の位置に設定されており、
前記第２の回転軸が、前記所定のタイミングかつ前記所定のアングルにおける前記被写体の近傍に設定されており、
前記動画像出力手段は、前記第１のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、前記第１の回転軸上の領域における動画像であって前記第１の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させ、前記第２のアングル切り替え指示入力手段がアングル切り替え指示を入力すると、当該切り替え指示されたアングルを撮影する前記カメラに対して前記第２の回転軸を挟んで対向する側の領域における動画像であって前記第２の回転軸を中心にしてアングルを切り換えた動画像を前記表示装置に出力して前記表示装置に表示させる動画像処理表示システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015193873A JP6164780B2 (ja) | 2015-09-30 | 2015-09-30 | 動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システム。 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015193873A JP6164780B2 (ja) | 2015-09-30 | 2015-09-30 | 動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システム。 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017069787A JP2017069787A (ja) | 2017-04-06 |
| JP6164780B2 true JP6164780B2 (ja) | 2017-07-19 |
Family
ID=58495363
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015193873A Active JP6164780B2 (ja) | 2015-09-30 | 2015-09-30 | 動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システム。 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6164780B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7249755B2 (ja) * | 2018-10-26 | 2023-03-31 | キヤノン株式会社 | 画像処理システムおよびその制御方法、プログラム |
| JP7237538B2 (ja) * | 2018-11-14 | 2023-03-13 | キヤノン株式会社 | 情報処理装置、それを含むシステム、情報処理方法、およびプログラム |
| WO2020137584A1 (ja) * | 2018-12-25 | 2020-07-02 | ソニー株式会社 | 映像再生装置、再生方法、およびプログラム |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4439373B2 (ja) * | 2004-10-15 | 2010-03-24 | 日本放送協会 | 多視点カメラ映像表現システム、装置及びプログラム |
| JP2010232814A (ja) * | 2009-03-26 | 2010-10-14 | Nikon Corp | 映像編集プログラムおよび映像編集装置 |
-
2015
- 2015-09-30 JP JP2015193873A patent/JP6164780B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2017069787A (ja) | 2017-04-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10948993B2 (en) | Picture-taking within virtual reality | |
| EP3241088B1 (en) | Methods and systems for user interaction within virtual or augmented reality scene using head mounted display | |
| US8330793B2 (en) | Video conference | |
| US10846927B2 (en) | Method and apparatus for displaying a bullet-style comment in a virtual reality system | |
| TWI571130B (zh) | 體積式視訊呈現 | |
| WO2017104579A1 (ja) | 情報処理装置および操作受付方法 | |
| US11184597B2 (en) | Information processing device, image generation method, and head-mounted display | |
| WO2017131970A1 (en) | Methods and systems for navigation within virtual reality space using head mounted display | |
| WO2018104869A1 (en) | Telepresence system | |
| JP2013258614A (ja) | 画像生成装置および画像生成方法 | |
| CN107844190B (zh) | 基于虚拟现实vr设备的图像展示方法及装置 | |
| US9799141B2 (en) | Display device, control system, and control program | |
| KR101703924B1 (ko) | 관람위치 변경이 가능한 가상현실안경을 포함하는 가상현실 시스템 | |
| JP2017220032A (ja) | 情報処理装置、情報処理方法、およびコンピュータプログラム | |
| KR20160094190A (ko) | 시선 추적 장치 및 방법 | |
| JP2016151798A (ja) | 情報処理装置および方法、並びにプログラム | |
| WO2021044745A1 (ja) | 表示処理装置、表示処理方法及び記録媒体 | |
| JP6164780B2 (ja) | 動画像処理装置、動画像処理方法、動画像処理プログラム及び動画像処理表示システム。 | |
| US11151804B2 (en) | Information processing device, information processing method, and program | |
| US11287881B2 (en) | Presenting images on a display device | |
| KR20140047620A (ko) | 입체적 효과 조정을 위한 상호적인 사용자 인터페이스 | |
| JP2018094086A (ja) | 情報処理装置および画像生成方法 | |
| EP3702008A1 (en) | Displaying a viewport of a virtual space | |
| WO2019235106A1 (ja) | ヒートマップ提示装置およびヒートマップ提示用プログラム | |
| JP2021089382A (ja) | 電子機器、電子機器の制御方法、プログラム、記憶媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170210 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20170210 |
|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20170501 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170511 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170525 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170615 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170619 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6164780 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |