JP2019114147A - 情報処理装置、情報処理装置の制御方法及びプログラム - Google Patents

Abstract

【課題】 仮想視点画像の視点の設定を簡略化することを目的とする。【解決手段】 本発明は、複数の撮影装置により撮影された複数の画像を用いて生成される仮想視点画像に係る視点の位置を決定する情報処理装置であって、前記複数の撮影装置の撮影対象に基づく所定の範囲内の位置を示す位置情報を取得する第１取得手段と、前記第１取得手段により取得された位置情報に基づいて、前記第１取得手段により取得された位置情報が示す位置とは異なる位置を視点として前記撮影対象を写すための仮想視点画像に係る視点の位置を決定する決定手段と、を有することを特徴とする。【選択図】 図３

Description

本発明は、仮想視点画像を生成する技術に関するものである。

複数の撮像装置を異なる位置に設置し、複数の撮像装置が同期して被写体を撮像し、当該撮像により得られた複数の視点の画像を用いて、撮像装置の設置位置の画像だけでなく任意の視点の画像を仮想視点画像として生成する技術がある。例えば、スポーツ競技を撮像した画像から、ユーザにより指定された視点に応じた仮想視点画像を生成することにより、ユーザは、自身の好みの視点で試合を観戦することができる。特許文献１では、複数の撮像装置により撮影された画像から仮想視点画像を生成する技術が開示されている。

特開２００８−２１７２４３号公報

例えば、スタジアムでのスポーツ競技を観戦しているユーザが、自身の携帯端末などの表示装置を用いて、スポーツ競技の仮想視点画像を視聴する場合を考える。この場合、ユーザは、ユーザからは見えにくい視点から競技を視聴することができ、利便性が向上し得る。

しかしながら、仮想視点の設定に慣れていないユーザでは、ユーザの位置における視界を考慮した仮想視点の設定に時間がかかってしまったり、所望の位置に仮想視点を設定できなかったりする恐れがあった。この場合、競技がリアルタイムで進行していると、ユーザは、仮想視点の設定のための操作に集中してしまい競技を見逃す可能性があった。このような仮想視点の設定に慣れていないユーザであっても、利便性が向上する仮想視点画像に係る視点の設定を容易にするための技術が望まれる。なお、仮想視点画像に係る視聴対象は、スポーツ競技に限らず、コンサートや他のイベントでも同様な問題が生じ得る。

上述の課題を鑑みて、本発明は、仮想視点画像に係る視点の設定を容易にすることを目的とする。

上述した課題を解決するために、本発明は、
複数の撮影装置により撮影された複数の画像を用いて生成される仮想視点画像に係る視点の位置を決定する情報処理装置であって、
前記複数の撮影装置の撮影対象から所定の範囲内の位置を示す位置情報を取得する第１取得手段と、
前記第１取得手段により取得された位置情報に基づいて、前記第１取得手段により取得された位置情報が示す位置とは異なる位置を視点として前記撮影対象を写すための仮想視点画像に係る視点の位置を決定する決定手段と、
を有することを特徴とする。

また、本発明の他の態様は、
複数の撮影装置により撮影された複数の画像を用いて生成される仮想視点画像に係る視点の位置を決定する情報処理装置であって、
ユーザに関する位置情報を取得する第１取得手段と、
前記複数の撮影装置のうちの少なくとも１つ以上により撮影される特定の位置を示す位置情報を取得する第２取得手段と、
前記第１取得手段により取得された位置情報が示す位置と、前記第２取得手段により取得された位置情報が示す位置とに基づいて、前記複数の撮影装置の撮影対象を写すための仮想視点画像に係る視点の位置を決定する決定手段と、
を有することを特徴とする。

本発明によれば、仮想視点画像の視点の設定が容易になる。

画像処理システムの概略を示す図である。 画像処理システムを示す図である。 画像処理システムの構成を示す図である 仮想視点決定処理の流れを示すフローチャートである。 仮想視点画像の視線の角度と焦点距離の決定方法の一例を示す図である。 仮想視点画像の視点の決定方法の高さの一例を示す図である。 装置のハードウェアの構成を示す図である。 仮想視点の位置補正処理の一例を示すフローチャートである。 障害物情報の例を示す図である。 仮想視点の位置を水平方向へ補正する例を示す図である。 仮想視点の位置を垂直方向へ補正する例を示す図である。

以下、図面を参照して実施形態を説明する。図１は、本実施形態の画像処理システムの概略の一例を示す図である。図１に示す通り、競技等を実際に行うフィールドと、観客席を有するスタジアムに、複数のカメラを設置している。複数のカメラは、フィールドと観客席を囲むように設置される。また、ユーザは観客席から競技を観戦している。

次に図２を参照して、本実施形態に係る画像処理システムの構成について説明する。図２に示すように画像処理システムは、スタジアムに設置された複数のカメラと、画像生成装置２００と、情報処理装置１００と、ユーザ端末３００を有する。複数のカメラは、伝送ケーブルを介して相互に接続される。複数のカメラは、撮影画像を画像生成装置２００に伝送する。図１に示す例では、サッカー場などのスタジアムの全てまたは一部の範囲が複数のカメラで撮像されるように、複数のカメラが配置される。複数のカメラは、静止画像を撮像するカメラであっても、動画像を撮像するカメラであっても、静止画像および動画像の双方を撮像するカメラであってもよい。本実施形態では、画像という文言を特に断りがない限り静止画および動画を含むものとして説明を行う。

画像生成装置２００は、仮想視点画像を生成する装置である。画像生成装置２００は、複数のカメラにより撮像された画像を蓄積する。画像生成装置２００は、複数のカメラにより撮像された画像を用いて、仮想視点画像群を生成する。仮想視点画像群とは、それぞれが異なる視点である複数の仮想視点画像である。画像生成装置２００は、生成した仮想視点画像を、情報処理装置１００に伝送する。画像生成装置２００は、例えば、サーバ装置であり、複数の撮影画像や生成した仮想視点画像群を記憶するデータベース機能や、仮想視点画像を生成するための画像処理機能を有する。また、スタジアム内の複数のカメラと、画像生成装置２００は、有線もしくは無線の通信ネットワーク回線や、ＳＤＩ（Ｓｅｒｉａｌ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ）などのケーブル回線で接続されている。画像生成装置２００は、この回線を通じて複数のカメラからの撮影された画像を受信してデータベースに記憶する。

情報処理装置１００は、画像生成装置２００で生成される仮想視点画像群から、ユーザ端末３００に提供する仮想視点画像を選択する。即ち、情報処理装置１００は、出力する仮想視点画像に係る視点や視線の方向を決定する装置である。情報処理装置１００は、ユーザ端末３００からユーザの操作に基づく仮想視点情報を取得した場合、仮想視点情報に対応する位置と方向を、出力する仮想視点画像の視点や視線の方向として決定する。仮想視点情報には、位置情報と方向情報とが少なくとも含まれる。情報処理装置１００は、仮想視点情報に対応する仮想視点画像を仮想視点画像群から選択し、出力する。なお、情報処理装置１００は、仮想視点情報に対応する仮想視点画像を、画像生成装置２００で生成される仮想視点画像群を画像処理することで生成してもよい。

また、情報処理装置１００は、ユーザ端末３００からユーザの位置情報を取得した場合、ユーザ端末３００の位置情報に対応した仮想視点画像を、画像生成装置２００で生成される仮想視点画像群から選択して出力する。なお、情報処理装置１００は、ユーザ端末３００の位置情報に対応する仮想視点画像を、画像生成装置２００で生成される仮想視点画像群を画像処理することで生成してもよい。

情報処理装置１００は、例えば、パーソナルコンピュータである。なお、情報処理装置１００は、画像生成装置２００に組み込まれていてもよく、また、ユーザ端末３００に組み込まれていてもよい。即ち、情報処理装置１００は、画像生成装置２００と一体の装置であってもよいし、ユーザ端末３００一体の装置であってもよい。

ユーザ端末３００は、本実施形態に係る画像処理システムを利用するユーザが所持する情報処理装置である。なお、ユーザ端末３００は、ユーザのＩＤと関連付けられている情報処理装置であってもよい。ユーザ端末３００は、情報処理装置１００から出力される仮想視点画像をユーザ端末３００が備える表示画面に表示する。また、ユーザ端末３００は、ユーザの入力に基づいて、例えば、仮想視点の位置の移動、仮想視点の視線方向の変更、および視点の切り替えの指示を受け付け、その内容を示す伝送信号を仮想視点情報として情報処理装置１００へ伝送する。また、ユーザ端末３００は、位置情報に基づく仮想視点の自動設定を情報処理装置１００に要求する。ここで、ユーザ端末３００は、例えば、ＰＣ（ＰＥＲＳＯＮＡＬ ＣＯＭＰＵＴＥＲ）、スマートフォンなどの携帯電話またはタブレットであり、例えば、マウス、キーボード、６軸コントローラ、およびタッチパネルの少なくとも１つを有する。ユーザ端末３００は、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）などにより位置情報を取得する機能を有する。

画像生成装置２００、情報処理装置１００及びユーザ端末３００は、例えば、インターネットなどのネットワークを介して相互に情報のやり取りが可能である。装置間の通信は、無線通信を介してもよいし、有線通信を介してもよい。

次に、画像生成装置２００、情報処理装置１００及びユーザ端末３００の構成の一例について説明する。図７は、画像生成装置２００、情報処理装置１００及びユーザ端末３００のハードウェアの構成の一例を示す図である。装置７０００（ユーザ端末３００、画像生成装置２００または情報処理装置１００）は、コントローラユニット７００、操作ユニット７０９、および表示装置７１０を含む。

コントローラユニット７００は、ＣＰＵ７０１を有する。ＣＰＵ７０１は、ＲＯＭ７０２に格納されているブートプログラムによりＯＳ（ＯＰＥＲＡＴＩＮＧ ＳＹＳＴＥＭ）を起動する。ＣＰＵ７０１は、このＯＳ上で、ＨＤＤ（ＨＡＲＤ ＤＩＳＫ ＤＲＩＶＥ）７０４に格納されているアプリケーションプログラムを実行する。ＣＰＵ７０１は、アプリケーションプログラムの実行によって各種処理を実現する。ＣＰＵ７０１の作業領域としてはＲＡＭ７０３が用いられる。ＨＤＤ７０４は、アプリケーションプログラムなどを格納する。なお、ＣＰＵ７０１は、一つのプロセッサであっても、複数のプロセッサであってもよい。

ＣＰＵ７０１は、システムバス７０８を介して、ＲＯＭ７０２、ＲＡＭ７０３、操作部Ｉ／Ｆ７０５、表示部Ｉ／Ｆ７０６、および通信Ｉ／Ｆ７０７と相互に接続される。操作部Ｉ／Ｆ７０５は、操作ユニット７０９とのインターフェースである。操作部Ｉ／Ｆ７０５は、操作ユニット７０９によってユーザにより入力された情報をＣＰＵ７０１に送出する。操作ユニット７０９は、例えば、マウスおよびキーボードなどを有する。表示部Ｉ／Ｆ７０６は、表示装置７１０に表示すべき画像データを表示装置７１０に対して出力する。表示装置７１０は、液晶ディスプレイなどのディスプレイを有する。通信Ｉ／Ｆ７０７は、例えばイーサネット（登録商標）などの通信を行うためのインターフェースであり、伝送ケーブルに接続される。通信Ｉ／Ｆ７０７は、伝送ケーブルを介して、外部装置との間で情報の入出力を行う。なお、通信Ｉ／Ｆ７０７は、無線通信を行うための回路やアンテナであってもよい。また、装置７０００は、ケーブルやネットワークを介して接続された外部の表示装置７１０に画像を表示させる表示制御を行うことも可能である。この場合、装置７０００は、表示データを表示装置７１０に出力することで表示制御を実現する。なお、図７で示した構成のすべてが画像生成装置２００または情報処理装置１００において必須の構成とは限らない。例えば画像生成装置２００において、表示装置７１０は必須の構成ではない。なお、コントローラユニット７００が、ＣＰＵ７０１を有するものとして説明を行ったが、これに限らない。例えば、コントローラユニット７００は、ＣＰＵ７０１の代わりに、または、ＣＰＵ７０１と共に、ＡＳＩＣやＦＰＧＡなどのハードウェアを有していてもよい。この場合、ＡＳＩＣやＦＰＧＡなどのハードウェアが、ＣＰＵ７０１が行うべき処理の一部または全てを行ってもよい。

＜情報処理装置１００＞
次に、図３を参照して、情報処理装置１００及び画像生成装置２００の機能構成の一例を説明する。図３は、本実施形態の情報処理装置１００及び画像生成装置２００の機能的な構成の一例を示す図である。図３に示す各構成は、図７のＣＰＵ７０１がＲＯＭ７０２に記録された各種プログラムを読み出して各部の制御を実行することにより実現される。なお、図３に示す各構成は、一部またはすべてを、専用のハードウェアにより実現されてもよい。専用のハードウェアは、例えば、ＡＳＩＣやＦＰＧＡである。

情報処理装置１００は、図３に示す通り、制御部１０１、記憶部１０２、分離部１０３、取得部１０４、視点決定部１０５、画像取得部１０６及び画像出力部１０７を有する。これらは、内部バス１０８によって相互に接続され、制御部１０１による制御の下、相互にデータを送受信することができる。

制御部１０１は、記憶部１０２に格納されているコンピュータプログラムに従って情報処理装置１００全体の動作を制御する。記憶部１０２は、ハードディスクなどの不揮発性メモリを有する。記憶部１０２の不揮発性メモリには、情報処理装置１００全体の動作を制御するコンピュータプログラム等が格納されている。分離部１０３は、画像生成装置２００から取得した仮想視点画像群と、回転基点データとを分離して出力する。回転基点データの詳細については後述する。

取得部１０４は、ユーザに関する位置情報または仮想視点情報をユーザ端末３００から取得する。取得部１０４は、ユーザ端末３００がＧＰＳで取得した位置情報をユーザの位置情報としてユーザ端末３００から取得してよい。また、取得部１０４は、スタジアムの観客席の席番号など位置を示す情報を取得し、取得した情報に基づいてユーザの位置情報を特定してもよい。また、取得部１０４は、スタジアムなどの地図情報からユーザの選択により特定された位置をユーザ端末３００からユーザの位置情報として取得してもよい。また、取得部１０４は、ユーザ端末３００の位置情報とユーザ端末３００が測距したユーザとの距離に基づいてユーザの位置情報を特定してもよい。また、取得部１０４は、スタジアム敷地内であり、複数のカメラによる撮影対象であるフィールド上の選手やフィールドの所定の位置を見ることができる位置を示す位置情報を取得するようにしてもよい。取得部１０４は、撮影対象であるフィールドから所定の範囲内である位置を示す位置情報を取得するようにしてもよい。ここでの所定の範囲は、フィールドから１０ｍ以内など予め定めた範囲であってもよい。また、所定の範囲は、撮影対象であるフィールドを有するスタジアムから数ｍ〜数１０ｍなどの範囲であってもよい。また、所定の範囲は、撮影対象であるフィールドを有するスタジアムなど、人物が存在し得る範囲であってもよい。また、所定の範囲は、ユーザから座席番号を取得し、取得した座席番号からら数ｍ〜数１０ｍ以内などの範囲であってもよい。また、所定の範囲は、撮影対象であるフィールドを有する座席がある領域内など、人物が存在し得る範囲であってもよい。また、所定の範囲は、回転基点から数ｍ〜数１０ｍなどの範囲など、人物が存在し得る範囲であってもよい。また、情報処理装置１００は、取得した位置情報が示す位置が撮影対象であるフィールドを有するスタジアム内等の定めた所定の範囲内ではない場合、エラーとして処理を終了してもよい。また、情報処理装置１００は、取得部１０４が取得した位置情報により示される位置が、複数のカメラによる撮影対象であるフィールド上の選手やフィールドの所定の位置を見ることができない位置である場合、処理をエラー終了してもよい。また、取得部１０４は、後述する回転基点から所定の範囲内であって、回転基点を見ることができる位置を示す位置情報を取得するようにしてもよい。また、情報処理装置１００は、後述する回転基点から所定の範囲ではなく、回転基点を見ることができない位置を示す位置情報を取得した場合、処理をエラー終了してもよい。

視点決定部１０５は、ユーザ端末３００に出力する仮想時点画像に係る視点の位置及び／または視線の方向を決定する。視点決定部１０５は、仮想時点画像に係る視点の位置として三次元座標上の位置を決定するものとして説明を行うが、二次元平面上の位置を決定する構成としてもよい。この場合、視点決定部１０５は、仮想時点画像に係る視点の位置の高さを、取得部１０４が取得した位置情報を用いることなく、任意の値または固定値に決定してもよい。

視点決定部１０５は、取得部１０４が、ユーザ端末３００から仮想視点情報を取得した場合、その仮想視点情報が示す位置や方向を、ユーザ端末３００に出力する仮想時点画像に係る視点の位置や視線の方向として決定する。また、視点決定部１０５は、取得部１０４が、ユーザ端末３００から位置情報を取得した場合、分離部１０３で分離した回転基点データと位置情報をもとに出力する仮想視点画像の視点の位置や視線の方向を決定する。画像取得部１０６は、視点決定部１０５で決定した視点に対応する仮想視点画像を取得する。なお、画像取得部１０６は、画像生成装置２００から受信した情報に基づいて仮想視点画像をレンダリングして生成する機能を有していてもよい。画像出力部１０７は、画像取得部１０６によって取得された画像を、ユーザ端末３００に出力する。

＜画像生成装置２００＞
次に、図３を参照して、画像生成装置２００の機能構成の一例を説明する。

画像生成装置２００は、制御部２０１、記憶部２０２、撮影画像入力部２０３、画像記憶部２０４、仮想視点画像生成部２０５、回転基点データ生成部２０６、画像解析部２０７及びデータ出力部２０８を有する。これらは、内部バス１０８によって相互に接続され、制御部２０１による制御の下、相互にデータを送受信することができる。

制御部２０１は、記憶部２０２に格納されているコンピュータプログラムに従って画像生成装置２００全体の動作を制御する。記憶部２０２は、ハードディスクなどの不揮発性メモリを有する。記憶部２０２の不揮発性メモリには、画像生成装置２００全体の動作を制御するコンピュータプログラム等が格納されている。

撮影画像入力部２０３はスタジアムに設置された複数のカメラが撮影した画像を所定のフレームレートで取得し、画像記憶部２０４へ出力する。撮影画像入力部２０３は、有線もしくは無線の通信モジュール、或いはＳＤＩ等の画像伝送モジュールにより撮影画像を取得する。画像記憶部２０４は、撮影画像入力部２０３より取得した撮影画像、及びそれらを元に生成された仮想視点画像群を記憶する大容量の記憶装置である。画像記憶部２０４としては、たとえば、磁気ディスク、光ディスク、半導体メモリ、等が使用される。なお、画像記憶部２０４は、画像生成装置２００に対して物理的に外部にあってもよい。また、画像記憶部２０４に記憶されている撮影画像及びそれを元に生成された仮想視点画像群は、画像フォーマットとして例えば、ＭＸＦ形式（Ｍａｔｅｒｉａｌ ｅＸｃｈａｎｇｅ Ｆｏｒｍａｔ）で記憶される。画像記憶部２０４に記憶されている撮影画像及びそれを元に生成された仮想視点画像群は、例えば、Ｍｐｅｇ２形式で圧縮される。

仮想視点画像生成部２０５は、画像記憶部２０４に記憶される複数の撮影画像から仮想視点画像群を生成する。仮想視点画像群を生成する方式として、例えば、イメージベースレンダリングを用いる方式が挙げられる。イメージベースレンダリングは、モデリング（幾何学図形を使用して物体の形状を作成する過程）をしないで、複数視点の撮影画像から仮想視点画像を生成するレンダリング方法である。また、仮想視点画像群を生成する方法は、イメージベースレンダリングに限られず、モデルベースレンダリング（ＭＯＤＥＬ−ＢＡＳＥＤ ＲＥＮＤＥＲＩＮＧ：ＭＢＲ）を用いてもよい。ＭＢＲとは、被写体を複数の方向から撮像した複数の撮影画像に基づいて生成される三次元モデルを用いて仮想視点画像を生成する方式である。具体的にＭＢＲは、視体積交差法、ＭＵＬＴＩ−ＶＩＥＷ−ＳＴＥＲＥＯ（ＭＶＳ）などの三次元形状復元手法により得られた対象シーンの三次元形状（モデル）を利用し、仮想視点からのシーンの見えを画像として生成する技術である。また、仮想視点画像生成部２０５は、出力した仮想視点画像群に、後述する回転基点データ生成部２０６で生成される回転基点を示すデータを付与する。

ここで、仮想視点画像生成部２０５が生成する仮想視点画像群は様々な視点の位置や視線の方向の仮想視点画像を含んでおり、それらを一つの画像ストリームとして空間方向及び時間方向に圧縮符号化されているものとする。なお、仮想視点画像群は、一つの画像ストリームとして空間方向及び時間方向に圧縮符号化されているものとして説明を行うがこれに限らない。仮想視点画像群は、一つの画像ストリームではなく、それぞれが独立した複数の画像であってもよい。また、仮想視点画像群は、圧縮符号化されていなくてもよい。

また、画像生成装置２００は、仮想視点画像群に代えて、例えば、三次元モデルを示す情報や三次モデル情報が示す三次元モデルにマッピングするための画像など仮想視点画像を生成するための情報を生成してもよい。即ち、仮想視点画像生成部２０５は、レンダリングされた仮想視点画像を生成することに代えて、情報処理装置１００またはユーザ端末３００で仮想視点画像をレンダリングするために必要な情報を生成してもよい。回転基点データ生成部２０６は、後述する画像解析部２０７によって取得される特定のオブジェクトまたは特定の位置の位置情報を回転基点として、仮想視点画像生成部２０５へ出力する。回転基点とは、仮想視点画像の視点を決定する際に用いる基準点である。情報処理装置１００は、回転基点を中心として、ユーザ端末３００の位置を回転した点を仮想視点画像に係る視点の位置として決定する。なお、回転基点は、回転を行う中心として用いられるだけでなく、仮想視点画像の視点を決定する際に用いる基準として用いられればよい。例えば、情報処理装置１００は、仮想視点画像に係る視点から見た回転基点が仮想視点画像の中心になるようにする等、回転基点を仮想視点画像に係る視線の向きを決定するために用いてもよい。また、例えば、情報処理装置１００は、ユーザ端末３００の位置から回転基点に向かって所定距離移動した点を仮想視点画像に係る視点の位置として決定してもよい。回転基点の位置は、スポーツ競技の場合、特定の選手やレフリーなどの人物、ボールなど、複数のカメラうちの少なくとも一つ以上に撮影される特定のオブジェクトの位置であってよい。また、複数のカメラうちの少なくとも一つ以上に撮影されるフィールドの中央、ゴール前またはペナルティマーク等のフィールド上の特定の固定位置を回転基点としてもよい。また、回転基点は、事前に登録している任意の位置を用いてもよい。

画像解析部２０７は、撮影画像入力部２０３に入力された撮影画像を解析し、回転基点の位置情報を取得する。画像解析部２０７は、例えば、ビジュアルハルなどの技術を用いて回転基点とする特定のオブジェクトまたは特定の位置の位置情報を取得する。上述の通り、特定のオブジェクトは、スポーツ競技の場合、特定の選手レフリーなどの人物またはボールである。また、回転基点は、フィールドの中央、ゴール前、ペナルティマーク等のフィールド上の所定の位置であってもよい。また、複数のカメラの光軸が共通の位置に向けるように設置される場合、回転基点は、その位置であってもよい。また、複数の撮影画像から特定のオブジェクトの位置情報を判定する手法は例えば特開２０１５−１８７７９７号公報に記載の技術を用いてもよい。また、回転基点の位置は、ユーザ端末３００の位置情報や向きなどの情報を用いて決定されてもよい。

データ出力部２０８は、仮想視点画像生成部２０５で生成された仮想視点画像群を情報処理装置１００へ所定のフレームレートで出力する。

以上の構成を有する画像処理システムの動作について後述する。

＜仮想視点決定処理＞
情報処理装置１００で行われる仮想視点決定処理について説明する。仮想視点決定処理は、情報処理装置１００がユーザの位置情報に基づいて仮想視点画像の視点を決定する処理である。

図４は、情報処理装置１００で行われる仮想視点決定処理の一例を示すフローチャートである。なお、図４のフローチャートは、例えば、情報処理装置１００がユーザ端末３００から仮想視点画像決定処理を要求された場合に開始される。なお、図４のフローチャートは、情報処理装置１００が仮想視点画像群を取得したことに応じて開始されてもよい。図４のフローチャートに示す処理は、ＣＰＵ７０１が情報の演算や各ハードウェアを制御することで実現される。なお、図４のフローチャートの少なくとも一部のステップが専用のハードウェアにより実行されてもよい。専用のハードウェアは、例えば、ＡＳＩＣやＦＰＧＡである。

Ｓ４０１において、情報処理装置１００は、ユーザに関する位置情報を取得部１０４により取得する。取得部１０４は、ユーザ端末３００がＧＰＳにより取得した位置情報をユーザの位置を示す情報として取得してもよいし、ユーザにスタジアムの観客席の座席番号を入力してもらい、座席番号から位置情報を算出してもよい。なお、情報処理装置１００は、取得した位置情報が撮影対象に基づいて規定される所定の範囲内、例えば、撮影対象であるフィールドを有するスタジアム内ではない場合、エラーとして処理を終了してもよい。また、情報処理装置１００は、Ｓ４０１において、複数のカメラによる撮影対象を見ることができない位置を示す位置情報を取得した場合、処理をエラー終了してもよい。また、これらの場合、情報処理装置１００は、ユーザ端末３００にエラーであることを示す情報を表示させてもよい。ユーザ端末３００により表示されるエラーであることを示す情報は、例えば、「不適切な位置情報です。スタジアム内に移動して再度位置情報を取得してください」など、エラーの理由や位置情報の再取得を促す情報であってもよい。

Ｓ４０２において、情報処理装置１００は、画像生成装置２００から取得した仮想視点画像群に関連付けられた回転基点データを取得し、回転基点データが示す、仮想視点を決定するために用いる回転基点の位置情報を取得する。

Ｓ４０３において、情報処理装置１００は、Ｓ４０１で取得したユーザの位置情報とＳ４０２で取得した回転基点の位置に基づいて仮想視点画像の視点を決定する。視点決定の方法について図５及び図６を用いて説明する。

図５は、本実施形態に係る仮想視点の決定方法を説明する図であり、スタジアムの俯瞰図である。ユーザ端末３００の位置にユーザがいるものとし、回転基点をボールの位置とする。なお、回転基点は、上述の通り、特定の選手やレフリーなどの人物の位置であってもよい。また、複数のカメラの光軸が共通の位置に向けるように設置される場合、回転基点は、その位置であってもよい。また、回転基点は、フィールド上の任意の位置であってもよい。また、情報処理装置１００は、ユーザ端末３００の位置情報に基づいて、ユーザ端末３００（ユーザ）を三次元座標上のある一点に存在するものとして処理を行う。

情報処理装置１００は、スタジアムの俯瞰図において、点とみなしたユーザ端末３００と回転基点とを結ぶ線と、回転基点と仮想視点との結ぶ線とがなす角度が１８０°となる位置を仮想視点の位置と決定する。即ち、情報処理装置１００は、撮影対象を上から見た場合のユーザ端末３００と回転基点とを結ぶ線と、回転基点と仮想視点との結ぶ線とがなす角度が１８０°となる位置を仮想視点の位置と決定する。また、情報処理装置１００は、フィールドと平行な面において、ユーザ端末３００を射影した点を、回転基点を射影した点を中心として１８０°回転した点を仮想視点の位置と決定する。

なお、図５において、決定される仮想視点の位置に仮想カメラを図示する。また、情報処理装置１００は、仮想視点の視線方向を回転基点に向けた方向とする。このように、情報処理装置１００は、回転基点を中心としたユーザ端末３００の位置の点対称となる位置を仮想視点の位置として決定する。また、情報処理装置１００は、ユーザ端末３００の位置を、回転基点を中心として点対称移動した位置を仮想視点の位置として決定する。したがって、本実施形態によれば、ユーザは、仮想視点画像を生成するために、仮想視点の位置を決定するための煩雑な操作を行わずとも、ユーザからは見えない位置から着目すべき位置を写した仮想視点画像を閲覧することが可能になる。

また、情報処理装置１００は、出力される仮想視点画像の画角を決定してもよい。例えば、情報処理装置１００は、ユーザと回転基点の距離が近いほど、生成する仮想視点画像に係る画角が大きくなるよう仮想視点画像の画角を設定してよい。この場合、ユーザと回転基点との距離が近いユーザには、全体が見渡せる広い範囲を写す仮想視点画像を提供することでき、回転基点との距離が遠いユーザには、狭い範囲を写す仮想視点画像を提供することできる。なお、情報処理装置１００は、ユーザと回転基点の距離が近いほど、生成する仮想視点画像に係る画角を小さくするように設定してもよい。なお、仮想視点画像の画角は、変動させず、固定値を用いてもよい。

また、情報処理装置１００は、ユーザ端末３００の位置に存在する点を、回転基点を中心として点対称移動した点を所定方向に所定距離移動させた点を仮想視点画像に係る視点の位置としてもよい。例えば、情報処理装置１００は、回転後の点を、回転基点に近づける方向または回転基点に遠ざける方向に所定距離移動させた点を仮想視点画像に係る視点の位置としてもよい。

また、情報処理装置１００は、撮影対象を俯瞰した場合のユーザ端末３００と回転基点とを結ぶ線と、回転基点と仮想視点との結ぶ線とがなす角度が所定の角度となる位置であって、回転基点と仮想視点との結ぶ線上の任意の点を仮想視点の位置と決定してよい。

続いて、仮想視点の高さの決定方法について説明する。図６は、本実施形態に係る仮想視点の高さの決定方法を説明する図であり、スタジアムを横から見た図である。図６において、ユーザ端末３００の位置にユーザがいるものとし、その高さをｈとする。最高視点位置とはスタジアム内に設置されているカメラの中で高度が最も高いものを示し、その高さをｈ＿ｍａｘとする。最低視点位置とはスタジアム内に設置されているカメラの中で高度が最も低いものを示し、その高さをｈ＿ｍｉｎとする。ここで、情報処理装置１００は、仮想カメラの高さｈ’を、ｈ’＝ｈ＿ｍａｘ−ｈ＋ｈ＿ｍｉｎとする。このように、情報処理装置１００は、ユーザ端末３００に高さに応じて、その高さと異なる高さを仮想視点の高さとする。したがって、例えば、ユーザが観客席の高い位置にいる場合はユーザ端末３００ではフィールドに近い低い位置からの画像が表示され、ユーザが観客席の低い位置にいる場合はユーザ端末３００ではフィールドを高い位置から俯瞰した画像が表示される。このように、ユーザの視点と異なる高さの仮想視点画像を生成することで、ユーザに様々な視界から競技などの撮影対象を鑑賞させることができる。なお、仮想カメラの高さを、ユーザの視点と異なる高さとするものとして説明を行ったが、仮想カメラの高さを、ユーザの視点と同じ高さとしてもよいし、任意の高さを固定値として用いてもよい。

Ｓ４０４において、情報処理装置１００はＳ４０３で決定した視点に基づく仮想視点画像を、画像取得部１０６により取得する。画像取得部１０６はＳ４０３で決定した仮想カメラの位置から回転基点を撮影した視点となる仮想視点画像を取得する。

なお、Ｓ４０４において、情報処理装置１００は、決定した仮想カメラの位置、画角及び高さに対応する仮想視点画像を仮想視点画像群から選択することで仮想視点画像を取得する。また、情報処理装置１００は、決定した仮想カメラの位置、画角及び高さに近い仮想視点画像を仮想視点画像群から選択し、選択した仮想視点画像に対して画像処理を施すことで決定した仮想カメラの位置、画角及び高さに対応する仮想視点画像を取得してよい。

また、情報処理装置１００は、仮想視点画像群から決定した仮想視点の位置に対応する仮想視点画像を選択し、選択した仮想視点画像に対してデジタルズームを行ってもよい。情報処理装置１００は、仮想視点画像群から選択した仮想視点画像に対してデジタルズームを施すことで決定した画角や決定した高さに対応する仮想視点画像を生成してもよい。

また、情報処理装置１００は、画像生成装置２００から三次元モデルやマッピングに使用する画像など仮想視点画像を生成するための情報を取得し、決定した仮想視点の位置、高さ及び画角に対応する仮想視点画像をレンダリングすることで取得してもよい。

また、情報処理装置１００は、仮想視点画像の画角を一定とし、決定した仮想カメラの位置を光軸方向に前後に移動させ、移動後の仮想カメラの位置に対応する仮想視点画像を取得することで仮想視点画像に写される光景の範囲を変更させてもよい。

Ｓ４０５において、情報処理装置１００は、Ｓ４０４で取得した仮想視点画像を画像出力部１０７によりユーザ端末３００へ出力する。

以上説明した通り、本実施形態によれば、ユーザ端末３００の位置情報を基に仮想視点画像の視点位置を決定することで、ユーザは煩雑な操作を必要とせずとも、ユーザのいる位置から見えない画像をユーザ端末３００に表示することが可能となる。

また、本実施形態によれば、ユーザの位置からの視界では見えにくい視点からの仮想視点画像で競技を表示装置で視聴することができ、利便性が向上し得る。また、仮想視点の設定に慣れていないユーザであっても、煩雑な操作を行うことなく、ユーザの位置と、回転基点とに基づく仮想視点画像を容易に視聴することができる。

（その他の実施形態）
なお、上述の説明において、仮想視点画像の回転基点となる対象物の位置情報を用いて仮想視点を決定したが、これに限らない。例えば、情報処理装置１００は、回転基点を用いず、ユーザ端末３００の位置情報により示される位置を仮想視点の位置として決定してもよい。即ち、情報処理装置１００は、ユーザ端末３００の位置を仮想カメラの位置としてもよい。このようにすることで、ユーザ端末３００の位置をユーザによる煩雑な操作を伴うことなく仮想視点の位置として設定することができる。また、このようにすることで、ユーザは、ユーザ端末３００の位置が仮想カメラの位置となるので、仮想カメラの位置を容易に認識することができる。また、この仮想カメラを移動させる入力を行うことで、所望の位置を仮想視点位置とすることが容易となる。

また、情報処理装置１００は、ユーザの位置情報と、回転基点となる注目すべき被写体の位置情報とに基づいて、ユーザが直接試合や競技を閲覧すべきことを警告する表示をユーザ端末３００に表示させる制御を行ってもよい。例えば、ユーザ端末３００の位置と回転基点（例えばボールや特定選手）の位置とが所定の距離以内であれば、競技を直接見るべきと判定し、情報処理装置１００は、警告をユーザ端末３００に表示させる制御を行う。なお、この警告は、ユーザ端末３００に出力される仮想視点画像に重畳されて表示されてもよい。このように、ユーザが競技を直接見たほうがよい場面では警告情報を表示することで、ユーザはユーザ端末３００の操作に没頭して競技を見逃すことがなくなる。

また、上述の説明において、画像生成装置２００は、ユーザ端末３００に出力する仮想視点画像の視点が決定する前に予め複数の視点に対応する仮想視点画像群を生成する構成を説明した。しかしながら、これに限らず、画像生成装置２００は、ユーザ端末３００に出力する仮想視点画像の視点の位置や視線の方向が決定した後に、この視点に関する情報を取得し、決定された視点に対応する仮想視点画像を生成する構成としてもよい。また、画像生成装置２００がレンダリングした画像をユーザ端末３００が表示する構成として説明を行った。しかしながら、画像生成装置２００から受信した情報に基づいて情報処理装置１００またはユーザ端末３００がレンダリングした仮想視点画像を表示する構成としてもよい。

また、Ｓ４０１において、情報処理装置１００は、ユーザ端末３００の位置情報に限らず、ユーザ端末３００の向きに関する情報をさらに取得する構成としてもよい。この場合、情報処理装置１００は、ユーザ端末３００の電子コンパスなどにより取得される向きに関する情報を取得する。情報処理装置１００は、ユーザ端末３００の位置と向きとから回転基点とする被写体を特定してもよい。例えば、情報処理装置１００は、ユーザがユーザ端末３００を向けている方向に存在する選手を回転基点とするオブジェクトとして特定してもよい。

また、上述の説明において、情報処理装置１００は、回転基点を中心としたユーザ端末３００の位置の点対称となる位置を仮想視点の位置として決定したが、これに限らない。例えば、情報処理装置１００は、ユーザ端末３００と回転基点とを結ぶ線と、回転基点と仮想視点との結ぶ線とがなす角度が任意の所定の角度となる位置を仮想視点の位置を決定するようにしてもよい。また、情報処理装置１００は、ユーザ端末３００と回転基点とを結ぶ線と、回転基点と仮想視点との結ぶ線とがなす角度が一意の角度だけでなく、例えば、１５０°〜２１０°など幅がある角度帯から仮想視点の位置を決定するようにしてもよい。

また、上述の実施形態において、回転基点が一つの例を説明したが、回転基点は２つ以上の複数あってよい。この場合、情報処理装置１００は、複数の回転基点の位置と、ユーザの位置とに基づいて、仮想視点画像に係る視点の位置や視線の方向を決定してもよい。例えば、情報処理装置１００は、撮影対象を上から見た場合のユーザの位置に存在するとみなす点を、第１の回転基点を中心に、第１の角度回転する。また、情報処理装置１００は、回転後の点を、第２の回転基点を中心に、第２の角度回転し、回転後の点の位置を仮想視点画像に係る視点としてもよい。なお、第１の角度と第２の角度は同じ値でも異なる値でもよい。また、情報処理装置１００は、第１の回転基点と、第２の回転基点と、ユーザの位置とを結ぶ三角形の重心を仮想視点画像に係る視点の位置としてよい。また、例えば、情報処理装置１００は、複数の回転基点を写すことができる位置を、仮想視点画像に係る視点の位置としてもよい。このように、複数の回転基点を設けることで、複数の回転基点を考慮した仮想視点画像を生成することができる。

また、上述の説明において、ユーザ端末３００と回転基点とを結ぶ線と、回転基点と仮想視点とを結ぶ線とがなす角度を用いて仮想視点の位置及び方向を決定していたが、これに限定しない。情報処理装置１００は、ユーザ端末３００の位置情報により示される位置を仮想視点の位置として決定した上で、仮想視点の位置から回転基点へ向けた方向を仮想視点の方向として決定してもよい。このようにすることで、実空間におけるユーザ視野に近い仮想視点画像を最初にユーザ端末３００に表示することができ、その後のユーザ端末３００のユーザによる仮想カメラの操縦が容易となる。また、情報処理装置１００は、仮想視点の位置から回転基点までの距離が所定値以上であれば仮想視点の位置を補正してもよい。この場合、仮想視点の位置を回転基点から所定値未満の距離となるように移動させてもよい。このようにすることで、ユーザの視点より撮影対象に近い位置で仮想視点画像を生成できるので視認性を向上させることができる。

また、上述の説明において、仮想視点を水平垂直方向へ移動させる位置補正について説明したが、これに限定しない。仮想視点の位置補正処理の一例を、図８に示すフローチャートを用いて説明する。なお、図８では、図４と同じステップについては同一の符号を付し、その説明を省略する。以下では、図４に示すフローチャートとの差分を説明する。

図８において、Ｓ４０１の処理を行い、Ｓ４０２において回転基点の位置情報を取得した後、Ｓ８０１において、情報処理装置１００は、取得部１０４を介して障害物情報を取得する。障害物情報とは、複数のカメラの撮影範囲おいて、選手やボールなどの特定のオブジェクトや撮影対象であるフィールドを遮蔽する恐れがある物体や構造物の位置やサイズを示す情報である。障害物情報の一例を図９に示す。図９に示す例では、障害物情報には、複数のカメラの撮影範囲であるフィールド上に存在する障害物の設置位置（緯度経度ＤＥＧ形式）とサイズ（横幅×高さ×奥行）が含まれる。なお、障害物情報は、これらの形式に限らず、例えば、３次元のモデル情報として示されてもよい。また、障害物情報により示される障害物の一例として、ゴール、広告またはベンチなどが一例として挙げられる。なお、障害物情報により示される障害物これに限定されず、他の物体や構造物であってもよい。

Ｓ８０２において、情報処理装置１００は、Ｓ４０１で取得したユーザの位置情報とＳ４０２で取得した回転基点の位置に基づいて仮想視点の位置と方向を決定する。Ｓ８０３において、情報処理装置１００は、Ｓ８０２で決定した補正前の仮想視点の位置と回転基点とを結ぶ直線上に障害物が存在するか否かを判定する。なお、Ｓ８０３における判定は、補正前の仮想視点の位置において仮想視点画像を生成した場合、生成する仮想視点画像に障害物情報により示される障害物が写るか否かを判定してもよい。また、Ｓ８０３における判定は、補正前の仮想視点の位置において仮想視点画像を生成した場合、生成する仮想視点画像において、障害物情報により示される障害物が人物やボールなどの特定のオブジェクトを遮蔽するか否かを判定してもよい。障害物が存在する場合（Ｓ８０３のＹｅｓ）、Ｓ８０４へ進み補正処理を行う。障害物が存在しない場合（Ｓ８０３のＮｏ）、補正処理をスキップしてＳ４０４へ進む。

Ｓ８０４において、情報処理装置１００は、補正前の仮想カメラと回転基点とを結ぶ直線上に障害物が存在する場合、障害物が回転基点を遮蔽しない位置まで仮想カメラの位置を移動させる。仮想カメラの位置補正について図１０及び図１１を用いて説明する。図１０はスタジアムを俯瞰した図であり、補正前の仮想カメラ１０００と回転基点との間に障害物であるゴールが存在することを示した図である。なお、図１０に示す例では、Ｓ８０２で仮想カメラの方向と位置をユーザ端末３００の位置から回転基点を向けた方向とした場合の例について説明する。図１０において、情報処理装置１００は、仮想カメラ１０００と回転基点とを結ぶ直線上を回転基点に向けて仮想カメラ１０００を移動させ、ゴール手前である仮想カメラ１００１の位置まで移動させる。また、水平方向の位置補正だけでなく図１１のように垂直方向にも位置補正できる。図１１はスタジアムを真横から見た図である。この場合、情報処理装置１００は、仮想カメラ１１００と回転基点とを結ぶ直線がゴールに接触しなくなるまで上昇させ、仮想カメラ１１０１の位置まで移動させる。また、Ｓ８０４における仮想視点の位置の変更による補正は、障害物が回転基点または回転基点付近に存在する人物やボールなどの特定のオブジェクトを遮蔽しない位置まで仮想視点の位置を移動することにより行われてもよい。また、Ｓ８０４における仮想視点の位置の変更による補正は、障害物が仮想視点画像に写らない位置まで仮想視点の位置を移動することにより行われてもよい。また、８０４における仮想視点の位置の変更による補正は、回転基点を中心に仮想視点の位置を回転すること行われてもよい。

このようにすることで、表示する仮想視点画像に障害物が表示されることがなくなるため、その後の仮想カメラの操縦が容易となる。また、障害物が写らないように仮想視点画像に係る視点の位置を決定するので、視認性を向上させる仮想視点画像を生成することができる。なお、障害物情報に含まれる障害物はフィールド上の障害物に限定せず、ユーザ端末３００の周辺にいる観客、撮影機材または旗などであってもよい。例えば、ユーザ端末３００に搭載される人感センサーによって取得されたデータに基づいて仮想視点の位置を補正してもよい。

また、上述の実施形態において、仮想視点画像に係る視点を決定する際の基準とするものを点（回転基点）として説明を行ったが、仮想視点画像に係る視点を決定する際の基準とするものに軸を用いてもよい。この場合、情報処理装置１００は、仮想視点画像に係る視点を決定する際の基準とする軸（回転基軸）を中心にユーザの位置に存在するとみなす点を所定の角度回転した点を仮想視点画像に係る視点の位置としてもよい。

また、上述の実施形態において、情報処理装置１００は、回転基点を示す回転基点データを仮想視点画像群に付加された状態で取得したが、回転基点を示す回転基点データを仮想視点画像群とは別途に取得してもよい。

本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ等）によっても実現可能である。また、そのプログラムをコンピュータにより読み取り可能な記録媒体に記録して提供してもよい。

１００ 情報処理装置
２００ 画像生成装置
３００ ユーザ端末
１０４ 取得部
１０５ 視点決定部

Claims (26)

1. 複数の撮影装置により撮影された複数の画像を用いて生成される仮想視点画像に係る視点の位置を決定する情報処理装置であって、
   前記複数の撮影装置の撮影対象から所定の範囲内の位置を示す位置情報を取得する第１取得手段と、
   前記第１取得手段により取得された位置情報に基づいて、前記第１取得手段により取得された位置情報が示す位置とは異なる位置を視点として前記撮影対象を写すための仮想視点画像に係る視点の位置を決定する決定手段と、
   を有することを特徴とする情報処理装置。
2. 前記第１取得手段により取得された位置情報が示す位置が前記所定の範囲内ではない場合、当該位置情報に基づく、仮想視点画像に係る視点の位置を決定する処理をエラーとすることを特徴とする請求項１に記載の情報処理装置。
3. 前記所定の範囲内は、前記撮影対象であるフィールドを有するスタジアム内であることを特徴とする請求項１または２に記載の情報処理装置。
4. 前記複数の撮影装置のうちの少なくとも１つ以上により撮影される特定の位置を示す位置情報を取得する第２取得手段を有し、
   前記決定手段は、前記第１取得手段により取得された位置情報が示す位置と、前記第２取得手段により取得された位置情報が示す位置とに基づいて、前記撮影対象を写すための仮想視点画像に係る視点の位置を決定することを特徴とする請求項１から３までのいずれか１項に記載の情報処理装置。
5. 複数の撮影装置により撮影された複数の画像を用いて生成される仮想視点画像に係る視点の位置を決定する情報処理装置であって、
   ユーザに関する位置を示す位置情報を取得する第１取得手段と、
   前記複数の撮影装置のうちの少なくとも１つ以上により撮影される特定の位置を示す位置情報を取得する第２取得手段と、
   前記第１取得手段により取得された位置情報が示す位置と、前記第２取得手段により取得された位置情報が示す位置とに基づいて、前記複数の撮影装置の撮影対象を写すための仮想視点画像に係る視点の位置を決定する決定手段と、
   を有することを特徴とする情報処理装置。
6. 前記第２取得手段は、特定のオブジェクトの位置またはあらかじめ定められた固定位置を示す位置情報を取得することを特徴とする請求項４または５に記載の情報処理装置。
7. 前記決定手段は、前記第１取得手段により取得された位置情報が示す位置と、前記第２取得手段により取得された位置情報が示す位置とを結ぶ線と、前記第２取得手段により取得された位置情報が示す位置と仮想視点画像に係る視点の位置とを結ぶ線とがなす角の角度が、所定の角度となるように仮想視点画像に係る視点の位置を決定することを特徴とする請求項４から６までのいずれか１項に記載の情報処理装置。
8. 前記決定手段は、前記第１取得手段により取得された位置情報が示す位置と、前記第２取得手段により取得された位置情報が示す位置とに基づいて、仮想視点画像に係る画角をさらに決定することを特徴とする請求項４から７までのいずれか１項に記載の情報処理装置。
9. 前記決定手段は、前記第１取得手段により取得された位置情報が示す位置に基づいて、仮想視点画像に係る視点の高さを決定することを特徴とする請求項１から８までのいずれか１項に記載の情報処理装置。
10. 前記決定手段は、前記第１取得手段により取得された位置情報が示す位置の高さと、前記複数の撮影装置が設置されている高さとに基づいて、仮想視点画像に係る視点の高さを決定することを特徴とする請求項９に記載の情報処理装置。
11. 前記決定手段は、決定された視点の位置において、前記第２取得手段により取得された位置情報が示す位置が写るよう、仮想視点画像に係る視線の方向を決定することを特徴とする請求項５に記載の情報処理装置。
12. 前記決定手段より決定された視点の位置に応じた仮想視点画像を出力するための制御を行う制御手段をさらに有することを特徴とする請求項１から１１までのいずれか１項に記載の情報処理装置。
13. 前記第１取得手段は、ユーザが所持する他の情報処理装置の位置情報を取得することを特徴とする請求項１または５に記載の情報処理装置。
14. 前記決定手段より決定された視点の位置に応じた仮想視点画像を出力するための制御を行う制御手段をさらに有し、
    前記第１取得手段は、前記ユーザに関する位置情報として、他の情報処理装置の位置情報を取得し、
    前記制御手段は、前記決定手段より決定された視点の位置に応じた仮想視点画像を取得し、取得した仮想視点画像を前記他の情報処理装置に出力することを特徴とする請求項５に記載の情報処理装置。
15. 前記第１取得手段は、前記他の情報処理装置がＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）により取得した位置情報を前記他の情報処理装置から取得することを特徴とする請求項１３または１４に記載の情報処理装置。
16. 前記特定のオブジェクトは、人物またはボールであることを特徴とする請求項６に記載の情報処理装置。
17. 前記第１取得手段により取得された位置情報が示す位置と、前記第２取得手段により取得された位置情報が示す位置との距離が、所定の距離より短い場合、警告をユーザに出力する出力手段をさらに有することを特徴とする請求項４または５に記載の情報処理装置。
18. 前記出力手段は、前記特定の位置を直接見るべきことを促す警告を出力することを特徴とする請求項１７に記載の情報処理装置。
19. 前記特定の位置は、フィールドの中央、ゴール前またはペナルティマークの位置であることを特徴とする請求項４または５に記載の情報処理装置。
20. 前記撮影対象は、競技を行うためのフィールドであることを特徴とする請求項１または請求項５に記載の情報処理装置。
21. 前記撮影対象を遮蔽し得る障害物に関する障害物情報を取得する手段を有し、
    前記決定手段は、前記障害物情報に基づいて、仮想視点画像に係る視点の位置を決定することを特徴とする請求項１から２０までのいずれか１項に記載の情報処理装置。
22. 前記決定手段は、前記障害物情報が示す前記障害物が写らないように仮想視点画像に係る視点の位置を決定することを特徴とする請求項２１に記載の情報処理装置。
23. 前記障害物は、ゴール、広告、ベンチ、撮影機材または観客であることを特徴とする請求項２１または２２に記載の情報処理装置。
24. 複数の撮影装置により撮影された複数の画像を用いて生成される仮想視点画像に係る視点の位置を決定する情報処理装置の制御方法であって、
    前記複数の撮影装置の撮影対象から所定の範囲内の位置を示す位置情報を取得する取得工程と、
    前記取得工程おいて取得された位置情報に基づいて、前記取得工程おいて取得された位置情報が示す位置とは異なる位置を視点として前記撮影対象を写すための仮想視点画像に係る視点の位置を決定する決定工程と、
    を有することを特徴とする情報処理装置の制御方法。
25. 複数の撮影装置により撮影された複数の画像を用いて生成される仮想視点画像に係る視点の位置を決定する情報処理装置の制御方法であって、
    ユーザに関する位置情報を取得する第１取得工程と、
    前記複数の撮影装置のうちの少なくとも１つ以上により撮影される特定の位置を示す位置情報を取得する第２取得工程と、
    前記第１取得工程において取得された位置情報が示す位置と、前記第２取得工程において取得された位置情報が示す位置とに基づいて、前記複数の撮影装置の撮影対象を写すための仮想視点画像に係る視点の位置を決定する決定工程と、
    を有することを特徴とする情報処理装置の制御方法。
26. 請求項１から２３までのいずれか１項に記載の情報処理装置としてコンピュータを動作させるためのプログラム。

Images