JP5197516B2 - 画像構成出力装置、方法及びシステム - Google Patents

Description

本発明は、画像構成出力装置、方法及びシステムに関する。特に、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）を利用した画像構成出力装置、方法及びシステムに関する。

従来、野球やサッカー競技等のテレビ放送は、複数の撮影機が撮影した画像をテレビ放送局が集中管理し、管理している画像の中から場面ごとに切り替えた画像をユーザに配信している。そして、ユーザは、テレビ放送局が一方的に配信する画像をテレビ受像機によって視聴するだけであった。

近年、インターネットの普及と共に、野球やサッカー競技等のテレビ放送をインターネットで視聴できるようになっている。このようなインターネットテレビ中継では、ユーザが見たいシーンを選択することができる。そのようなシステムとして、例えば、特許文献１等が知られている。

特許文献１に記載の発明は、競技場の周囲に配置された複数のデジタルカメラを選択して個別に画像を送出できるように制御している。そして、特許文献１に記載の発明は、ユーザが観覧したい位置のカメラの出力を直接選択できるようにして、競技場の臨場感をユーザに提供できるようにしている。

更に、イベントが行われるスタジアムのまわりにカメラを配置し、配置したカメラが撮影した画像を合成する等の処理を行い、バーチャライズド・リアリティ（仮想化された現実）を実現するシステムが知られている（非特許文献１参照）。このようなシステムでは、処理を行った画像を加工し、カメラがもともとなかった所からの画像を提供することも可能である。

特表２００３−５３２３４６号公報

ビジュアル・サイエンス・フェスタ，２００１年９月２９日，講演「３Ｄ画像技術とスポーツ観戦」金出 武雄、インターネットＵＲＬ：ｈｔｔｐ：／／ｗｗｗ．ｎｉｋｋｅｉ−ｓｃｉｅｎｃｅ．ｃｏｍ／ｖｓｆ／ｌｅｃｔｕｒｅ／ｌ＿０１．ｈｔｍｌ

しかしながら、特許文献１に記載の発明では、ユーザがカメラを選択するようにしているだけなので、選択しているカメラが見たいシーンを撮影しなくなった場合には、ユーザは、見たいシーンを撮影している別のカメラを選択しなければならない。そして、動きが激しい競技等の場合には、見たいシーンを撮影しているカメラを選択することはユーザにとって容易ではない。

一方、ユーザは、野球やサッカー競技場等で実際の競技を観覧していても、別の角度から実際の競技を見たいと思ったり、注目の選手をもっと身近に見たいと思ったりする場合が多い。そのため、ユーザは、実際の競技場等にいても、撮影されて配信されている画像も見ることができることを望んでいる。そこで、野球やサッカー競技場等の実際の競技場で、競技等を撮影している画像を容易にユーザが見ることができる装置が求められている。

本発明は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に見ることができる装置、方法及びシステムを提供することを目的とする。

更に、本発明は、実際にその場所に居なくても、ユーザが見たいと思う被写体の画像を容易に見ることができる装置、方法及びシステムを提供することを目的とする。

本発明では、以下のような解決手段を提供する。

（１） 複数の位置に固定された複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続され、前記画像サーバから受信した画像を画像表示装置に出力する画像構成出力装置であって、全地球測位システムであるＧＰＳの衛星からデータを受信し、受信したデータに基づいて位置を特定するＧＰＳ位置特定手段と、前記ＧＰＳ位置特定手段が所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出する向き情報算出手段と、前記特定した位置及び算出した向きに基づいて対応する画像の送信要求を前記画像サーバに送信する画像送信要求手段と、前記画像送信要求手段が要求した画像を、前記画像サーバから受信して出力する画像出力手段と、を備えることを特徴とする画像構成出力装置。

（１）の構成によれば、本発明に係る画像構成出力装置は、全地球測位システムであるＧＰＳの衛星からデータを受信し、受信したデータに基づいて位置を特定し、所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出する。そして、特定した位置及び算出した向きに基づいて対応する画像の送信要求を画像サーバに送信し、要求した画像を画像サーバから受信して出力する。

すなわち、本発明に係る画像構成出力装置は、競技場等において、特定した位置及び算出した向きに基づいて対応する画像を画像サーバから受信して出力する。例えば、画像サーバが、実際に撮影した画像だけではなく、撮影した画像を合成する等の処理をすることでバーチャライズド・リアリティを構成している場合には、本発明に係る画像構成出力装置は、特定した位置及び算出した向きに基づいて対応するその向きの画像を画像サーバから受信し出力する。したがって、本発明に係る画像構成出力装置は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に提供することができる。

（２） 前記画像サーバは、前記複数の撮影機から受信した画像に基づいて任意の位置及び任意の向きからの画像を合成する画像合成手段を更に備え、前記画像送信要求手段は、前記画像構成出力装置の位置及び向きに基づいて対応する画像の送信要求を前記画像サーバに送信することを特徴とする（１）に記載の画像構成出力装置。

（２）の構成によれば、画像サーバは、複数の撮影機から受信した画像に基づいて任意の位置及び任意の向きからの画像を合成し、本発明に係る画像構成出力装置は、画像構成出力装置の位置及び向きに基づいて対応する画像の送信要求を画像サーバに送信する。そして、画像構成出力装置は、画像構成出力装置の位置及び向きに対応する合成した画像を画像サーバから受信し、あたかも画像構成出力装置に備わったカメラが撮像したかのように表示する。したがって、本発明に係る画像構成出力装置は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う向きの画像を容易に提供することができる。

（３） 前記画像構成出力装置は、前記向き情報算出手段が連続して特定した異なる複数の位置における前記画像構成出力装置の角度を検出する角度検出手段を更に備え、前記画像送信要求手段は、前記画像構成出力装置の位置、向き及び角度に基づいて対応する画像の送信要求を前記画像サーバに送信することを特徴とする（２）に記載の画像構成出力装置。

（３）の構成によれば、本発明に係る画像構成出力装置は、連続して特定した異なる複数の位置における画像構成出力装置の角度を検出し、画像構成出力装置の位置、向き及び角度に基づいて対応する画像の送信要求を画像サーバに送信する。そして、画像構成出力装置は、画像構成出力装置の位置、向き及び角度に対応する合成した画像を画像サーバから受信し、あたかも画像構成出力装置に備わったカメラが狙った被写体を画像構成出力装置を任意の角度に傾けて振ることにより、スタジアム中の任意の角度から撮像したかのように表示する。したがって、本発明に係る画像構成出力装置は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の、見たいと思う角度からの画像を容易に提供することができる。

（４） 複数の位置に固定された複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続され、前記画像サーバから受信した画像を画像表示装置に出力する方法であって、全地球測位システムであるＧＰＳの衛星からデータを受信し、受信したデータに基づいて位置を特定するステップと、所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出するステップと、前記特定した位置及び算出した向きに基づいて対応する画像の送信要求を前記画像サーバに送信するステップと、前記送信要求した画像を、前記画像サーバから受信して出力するステップと、を備えることを特徴とする方法。

（４）の構成によれば、本発明に係る方法は、全地球測位システムであるＧＰＳの衛星からデータを受信し、受信したデータに基づいて位置を特定し、所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出し、特定した位置及び算出した向きに基づいて対応する画像の送信要求を画像サーバに送信し、送信要求した画像を、画像サーバから受信して出力する。すなわち、本発明に係る方法は、競技場等において、特定した位置及び算出した向きに基づいて対応する画像を画像サーバから受信して出力する。したがって、本発明に係る方法は、競技等が実際に行われている競技場で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に提供することができる。

（５） 複数の位置に固定された複数の撮影機から受信した画像を管理する画像サーバと、前記画像サーバと通信可能に接続され、前記画像サーバから受信した画像を画像表示装置に出力する画像構成出力装置と、を備える画像構成出力システムであって、前記画像構成出力装置は、全地球測位システムであるＧＰＳの衛星からデータを受信し、受信したデータに基づいて位置を特定するＧＰＳ位置特定手段と、前記ＧＰＳ位置特定手段が所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出する向き情報算出手段と、前記特定した位置及び算出した向きに基づいて対応する画像の送信要求を前記画像サーバに送信する画像送信要求手段と、前記画像送信要求手段が要求した画像を、前記画像サーバから受信して出力する画像出力手段と、を備え、前記画像サーバは、前記画像構成出力装置から受信した前記特定した位置及び算出した向きに基づいて対応する画像を前記画像構成出力装置に送信する画像送信手段、を備える、ことを特徴とする画像構成出力システム。

（５）の構成によれば、本発明に係る画像構成出力システムにおいて、画像構成出力装置は、全地球測位システムであるＧＰＳの衛星からデータを受信し、受信したデータに基づいて位置を特定し、所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出し、特定した位置及び算出した向きに基づいて対応する画像の送信要求を画像サーバに送信し、要求した画像を、画像サーバから受信して出力する。そして、画像サーバは、画像構成出力装置から受信した特定した位置及び算出した向きに基づいて対応する画像を画像構成出力装置に送信する。すなわち、本発明に係る画像構成出力システムは、競技場等において、特定した位置及び算出した向きに基づいて対応する画像を画像サーバから受信して出力する。したがって、本発明に係る画像構成出力システムは、競技等が実際に行われている競技場で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に提供することができる。

（６） 複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続され、前記画像サーバから受信した画像を出力する画像構成出力装置であって、地理上の任意の基準点を指定する基準点指定手段と、前記基準点指定手段によって指定された前記基準点の近傍で撮影している撮影機が存在するか否かの情報の送信要求を前記画像サーバに送信し、送信要求した前記情報を前記画像サーバから受信する近傍撮影機確認手段と、前記近傍撮影機確認手段が受信した前記情報を確認したユーザによって方向付けられた当該画像構成出力装置の向きを検出する向き検出手段と、前記向き検出手段が検出した向きに対応する画像の送信要求を前記画像サーバに送信する画像送信要求手段と、前記画像送信要求手段が送信要求した画像を、前記画像サーバから受信して出力する画像出力手段と、を備えることを特徴とする画像構成出力装置。

（６）の構成によれば、本発明に係る画像構成出力装置は、複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続され、画像サーバから受信した画像を出力する画像構成出力装置であって、地理上の任意の基準点を指定し、指定された基準点の近傍で撮影している撮影機が存在するか否かの情報の送信要求を画像サーバに送信し、送信要求した情報を画像サーバから受信し、受信した情報を確認したユーザによって方向付けられた当該画像構成出力装置の向きを検出し、検出した向きに対応する画像の送信要求を画像サーバに送信し、送信要求した画像を、画像サーバから受信して出力する。

すなわち、本発明に係る画像構成出力装置は、指定した基準点の近傍で撮影している撮影機を確認したユーザが当該画像構成出力装置を方向付けることによって指定した向きを検出し、検出した向きに対応する画像を画像サーバから受信して出力する。したがって、本発明に係る画像構成出力装置は、実際にその場所に居なくても、ユーザが見たいと思う被写体の画像を容易に提供することができ、ユーザはその場所に居なくてもあたかもその方向に見ているかのように画像を見ることができる。

（７） 前記近傍撮影機確認手段が受信した前記情報に基づいて、前記基準点の近傍で撮影している前記撮影機の位置を表示する近傍撮影機位置表示手段、を更に備えることを特徴とする（６）に記載の画像構成出力装置。

（７）の構成によれば、（６）に記載の画像構成出力装置は、受信した情報に基づいて、基準点の近傍で撮影している撮影機の位置を表示する。したがって、本発明に係る画像構成出力装置は、実際にその場所に居なくても、基準点の近傍で撮影している撮影機の位置を参照したユーザによって方向付けられた向きの画像を容易に提供することができ、ユーザはその場所に居なくてもあたかもその方向に見ているかのように画像を見ることができる。

（８） 前記画像サーバに送信要求する画像のズーム率の指定を受け付けるズーム指定受付手段、を更に備え、前記画像送信要求手段は、前記ズーム指定受付手段が受け付けた前記ズーム率を前記画像の送信要求に加えて送信することを特徴とする（６）又は（７）に記載の画像構成出力装置。

（８）の構成によれば、（６）又は（７）に記載の画像構成出力装置は、画像サーバに送信要求する画像のズーム率の指定を受け付け、受け付けたズーム率を画像の送信要求に加えて送信する。したがって、本発明に係る画像構成出力装置は、実際にその場所に居なくても、ユーザが見たいと思う被写体の画像をズーム率を指定して容易に提供することができる。

（９） 複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続された画像構成出力装置が、前記画像サーバから受信した画像を出力する方法であって、地理上の任意の基準点を指定するステップと、前記指定された前記基準点の近傍で撮影している撮影機が存在するか否かの情報の送信要求を前記画像サーバに送信し、送信要求した前記情報を前記画像サーバから受信するステップと、前記受信した前記情報を確認したユーザによって方向付けられた当該画像構成出力装置の向きを検出するステップと、前記検出した向きに対応する画像の送信要求を前記画像サーバに送信するステップと、前記送信要求した画像を、前記画像サーバから受信して出力するステップと、を備えることを特徴とする方法。

（９）の構成によれば、本発明に係る方法は、地理上の任意の基準点を指定し、指定された基準点の近傍で撮影している撮影機が存在するか否かの情報の送信要求を画像サーバに送信し、送信要求した情報を画像サーバから受信し、受信した情報を確認したユーザによって方向付けられた画像構成出力装置の向きを検出し、検出した向きに対応する画像の送信要求を画像サーバに送信し、送信要求した画像を、画像サーバから受信して出力する。したがって、本発明に係る方法は、実際にその場所に居なくても、ユーザが見たいと思う被写体の画像を容易に提供することができる。

（１０） 複数の撮影機から受信した画像を管理する画像サーバと、前記画像サーバと通信可能に接続され、前記画像サーバから受信した画像を出力する画像構成出力装置と、を備える画像構成出力システムであって、前記画像構成出力装置は、地理上の任意の基準点を指定する基準点指定手段と、前記基準点指定手段によって指定された前記基準点の近傍で撮影している撮影機が存在するか否かの情報の送信要求を前記画像サーバに送信し、送信要求した前記情報を前記画像サーバから受信する近傍撮影機確認手段と、前記近傍撮影機確認手段が受信した前記情報を確認したユーザによって方向付けられた当該画像構成出力装置の向きを検出する向き検出手段と、前記向き検出手段が検出した向きに対応する画像の送信要求を前記画像サーバに送信する画像送信要求手段と、前記画像送信要求手段が送信要求した画像を、前記画像サーバから受信して出力する画像出力手段と、を備え、前記画像サーバは、前記画像構成出力装置から受信した、前記撮影機が存在するか否かの情報の送信要求に応じて、前記基準点の近傍で撮影している前記撮影機の情報を検出し、前記画像構成出力装置に送信する近傍撮影機検出手段と、前記近傍撮影機検出手段が検出した前記撮影機から画像を受信する画像受信手段と、前記画像構成出力装置から受信した、前記向きに対応する画像の送信要求に応じて、前記画像受信手段が受信した画像の中から、前記向きに対応する画像を前記画像構成出力装置に送信する画像送信手段と、を備える、ことを特徴とする画像構成出力システム。

（１０）の構成によれば、本発明に係る画像構成出力システムにおいて、画像構成出力装置は、地理上の任意の基準点を指定し、指定された前記基準点の近傍で撮影している撮影機が存在するか否かの情報の送信要求を画像サーバに送信し、送信要求した情報を画像サーバから受信し、受信した情報を確認したユーザによって方向付けられた当該画像構成出力装置の向きを検出し、検出した向きに対応する画像の送信要求を画像サーバに送信し、送信要求した画像を、画像サーバから受信して出力する。そして、画像サーバは、画像構成出力装置から受信した、撮影機が存在するか否かの情報の送信要求に応じて、基準点の近傍で撮影している撮影機の情報を検出し、画像構成出力装置に送信し、検出した撮影機から画像を受信し、画像構成出力装置から受信した、向きに対応する画像の送信要求に応じて、撮影機から受信した画像の中から、画像構成出力装置から受信した向きに対応する画像を画像構成出力装置に送信する。したがって、本発明に係る画像構成出力システムは、実際にその場所に居なくても、ユーザが見たいと思う被写体の画像を容易に提供することができる。

本発明によれば、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に見ることができる装置、方法及びシステムを提供することができる。

更に、本発明によれば、実際にその場所に居なくても、ユーザが見たいと思う被写体の画像を容易に見ることができる装置、方法及びシステムを提供することを目的とする。

本発明の一実施形態に係る画像構成出力装置１０の特徴を示すブロック図である。 本発明の一実施形態に係る画像構成出力装置１０の機能を示す機能ブロック図である。 本発明の一実施形態に係る画像構成出力装置１０のハードウェア構成を示すブロック図である。 本発明の一実施形態に係る算出位置テーブルを示す図である。 本発明の一実施形態に係る画像構成出力装置１０の処理内容を示すフローチャートである。 本発明の一実施形態に係る画像構成出力装置１０の向き算出処理の処理内容を示すフローチャートである。 本発明の一実施形態に係る画像構成出力装置１０の表示例を示す図である。 本発明の一実施形態に係る画像構成出力装置１０の別の表示例を示す図である。 本発明の一実施形態に係る画像構成出力装置１０の図８に続く表示例を示す図である。 本発明の一実施形態に係る画像構成出力装置１０の図８に続く別の表示例を示す図である。 本発明の一実施形態に係る画像構成出力装置１０の更に別の表示例を示す図である。 本発明の一実施形態に係る画像構成出力装置１０と、画像サーバ３１との実施例２の機能を示す機能ブロック図である。 本発明の一実施形態に係る実施例２の画像構成出力装置１０のハードウェア構成を示すブロック図である。 本発明の一実施形態に係る画像構成出力装置１０の実施例２の処理内容を示すフローチャートである。 本発明の一実施形態に係る画像サーバ３１の撮影機位置ＤＢ４１の例を示す図である。 本発明の一実施形態に係る画像構成出力装置１０の実施例２の表示例を示す図である。 本発明の一実施形態に係る画像構成出力装置１０の実施例２の別の表示例を示す図である。

以下、本発明の実施形態について図を参照しながら説明する。

［実施例１］
図１は、本発明の一実施形態に係る画像構成出力装置１０の特徴を示すブロック図である。

画像構成出力装置１０は、ＧＰＳ位置特定手段としてＧＰＳ位置特定部１１と、向き情報算出手段として向き情報算出部１２と、画像送信要求手段として画像送信要求部１３と、画像出力手段として画像出力部１４と、を備えている。

ＧＰＳ位置特定部１１は、全地球測位システムであるＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）の衛星からデータを受信し、受信したデータに基づいて位置を特定する。ＧＰＳシステムを利用して位置を特定する方法は、搬送波に載せられたコードの伝搬時間の測定による距離の測定が一般的である。この方法によると精度が数ｍオーダの位置を特定することができる。更に、搬送波の位相を測定するＲＴＫ−ＧＰＳ（Ｒｅａｌ Ｔｉｍｅ Ｋｉｎｅｍａｔｉｃ ＧＰＳ）により距離を測定する方法によると、精度が数ｃｍオーダの位置を特定することができる。

ここで、ＧＰＳシステムの概略を説明する。搬送波に載せられたコードによる測定方法では、ＧＰＳ受信機は、ＧＰＳ衛星が予め決められたタイミングで送信する信号を受信し、受信した信号に含まれる時刻情報とＧＰＳ受信機の時刻とを比較し時間差を算出する。算出した時間差に電波の伝播速度（光速Ｃ）を乗ずることによって、ＧＰＳ受信機とＧＰＳ衛星との距離を測定する。

搬送波の位相を測定するＲＴＫ−ＧＰＳ方法では、ＧＰＳ受信機は、同時に各ＧＰＳ衛星からの搬送波を連続的に観測し，搬送波位相積算値を計測する。そして、位置が正確に分かっている基準局から送信された値を基に二重位相差を求めることにより、搬送波の波長ごとの不確定性（アンビギュイティ）を決定し、距離を測定する。

このような方法により、ＧＰＳ受信機は、３つの衛星との距離を測定し、測定した距離に基づいて交点を求め、位置を特定する。そして、ＧＰＳ受信機は、４つ以上のＧＰＳ衛星を利用することにより、ＧＰＳ受信機とＧＰＳ衛星との時刻誤差を補正すると共に、ＧＰＳ衛星の幾何学的配置による誤差を補正している。

更に、ＧＰＳ受信機は、基準局を利用してディファレンシャル補正を行うことができる。基準局は、位置が正確に分かっている基準局自身の位置と、ＧＰＳ衛星から受信した信号に基づいて求めた位置と、の測距誤差を求め、補正値として送信する。ＧＰＳシステムの誤差要因は空間的な相関があるので、離れた地点間でも測距誤差は同様である。そこで、ＧＰＳ受信機は、測定した距離に基準局から受信した補正値を適用し、ＧＰＳ受信機の位置を特定する。

ＧＰＳ位置特定部１１は、上述したようにＧＰＳシステムを利用して、画像構成出力装置１０の位置を特定する。

向き情報算出部１２は、ＧＰＳ位置特定部１１が所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出する。例えば、ユーザが、ある画像を得ようとして画像構成出力装置１０をその被写体に振るとすると、向き情報算出部１２は、画像構成出力装置１０をその被写体に振る前と、その被写体に振った後との異なる位置に基づいて向きを算出することができる。そこで、向き情報算出部１２は、一定の時間間隔でＧＰＳ位置特定部１１が算出した位置を連続的に監視し、所定の時間（例えば、３秒）内に所定の距離（例えば、１５ｃｍ）以上の差がある複数の位置を検出し、検出した複数の位置に基づいて向きを算出する。

検出した異なる複数の位置は、例えば、画像構成出力装置１０を持つユーザの腕を対象の被写体に対して体の後方に振った状態の第１の位置と、その後に、画像構成出力装置１０を持つユーザの腕を前方に振り、見たい被写体に向けた状態の第２の位置と、である。このように、画像構成出力装置１０を所定の方向に振ることで、向きを特定することができる。向きは、特定した第１の位置の位置データ（緯度、経度）と、特定した第２の位置の位置データ（緯度、経度）とから、算出される。例えば、第１の位置をｘ１、ｙ１とし、第２の位置をｘ２、ｙ２とし、Δｘ＝ｘ２−ｘ１、Δｙ＝ｙ２−ｙ１とすると、Δｙ／Δｘ（ただし、Δｘは０でない）が向きになる。

更に、向き情報算出部１２は、最初の向きを算出すると、向きを算出した時の第１の位置を基点として記憶する。そして、新たに見たい被写体に向けた状態の第２の位置と、記憶した基点と、から向きを算出する。このようにして、向き情報算出部１２は、ユーザが被写体の動きに合わせて画像構成出力装置１０を動かす場合に、動きに合わせて向きを算出することができる。

あるいは、異なる複数の位置は、画像構成出力装置１０の操作部２０１３（後述の図３参照）から、第１の位置であることが指定され、同様に第２の位置が指定されるとしてもよい。例えば、ユーザは、第１の位置であることを操作部２０１３から指定した後に、対象の被写体へ数ｍ移動した後に第２の位置であることを操作部２０１３から指定する。向き情報算出部１２は、指定された第１の位置を基点とし、第２の位置を終点とした向きを算出することができる。ＧＰＳ衛星に基づいて特定した位置の精度が得られない場合であっても、数ｍの移動で向きを算出することができる。

向きの算出は、地磁気の大きさや方向を計測する地磁気センサ等との組合せで算出するとしてもよい。向き情報算出部１２は、方向を検知する地磁気センサを用い、真北（地図上の北）との偏差を計算に入れることにより、より精度の良い向きを算出することができる。

画像送信要求部１３は、特定した位置及び算出した向きに基づいて対応する画像の送信要求を画像サーバ３１に送信する。すなわち、画像送信要求部１３は、画像サーバ３１へ、現在の位置データ及び算出した向きデータと、画像要求を示すデータとをネットワーク通信Ｉ／Ｆ部２０４０（後述する図３）を介して送信する。例えば、画像サーバ３１は、受信した現在の位置データ及び算出した向きデータに基づいて対応する被写体を撮影している撮影機の中で受信した位置データに最も近い位置の撮影機の画像（例えば、後述する図７の撮影機４０１の画像）を画像構成出力装置１０に送信する。例えば、画像サーバ３１が撮影機を用いて撮影した画像を合成する等の処理をすることでバーチャライズド・リアリティを構成している場合には、画像サーバ３１は、受信した現在の位置データ及び算出した向きデータに基づいて対応する被写体の、その向きの画像（例えば、後述する図８の位置５０１から向き５０３の画像）を画像構成出力装置１０に送信する。

画像出力部１４は、画像送信要求部１３が要求した画像を、画像サーバ３１から受信して出力する。すなわち、画像出力部１４は、画像サーバ３１が送信した画像をネットワーク通信Ｉ／Ｆ部２０４０（後述する図３）を介して受信して、表示部２０１４（後述する図３）に出力する。

図２は、本発明の一実施形態に係る画像構成出力装置１０の機能を示す機能ブロック図である。

画像構成出力装置１０は、図１の特徴に加え、角度検出手段として角度検出部１５を備え、画像サーバ３１は、画像合成手段として画像合成部３２を更に備えている。

角度検出部１５は、向き情報算出部１２が連続して特定した異なる複数の位置における画像構成出力装置１０の角度を検出する。すなわち、角度検出部１５は、ＧＰＳ位置特定部１１が特定した位置において、ユーザによって回転した画像構成出力装置１０の回転角を検出する。そして、画像送信要求部１３は、ＧＰＳ位置特定部１１による画像構成出力装置１０の位置、向き情報算出部１２による向き及び角度検出部１５による角度に基づいて対応する画像の送信要求を画像サーバ３１に送信する。角度検出部１５は、例えば、画像構成出力装置１０の操作部２０１３の特定キーの操作により角度を検出するとしてもよい。実際に画像構成出力装置１０を回転させるのではないので直感的ではないが、特定キーの１回の押下操作を回転角度に対応付けることにより回転角センサ等を用いることなく角度検出部１５は角度を検出することができる。

画像サーバ３１の画像合成部３２は、複数の撮影機から受信した画像に基づいて任意の位置及び任意の向きからの画像を合成する。すなわち、画像構成出力装置１０は、画像構成出力装置１０の位置及び向きに基づいて対応する画像の送信要求を画像サーバ３１に送信し、送信した位置及び向きを受信した画像サーバ３１から、その位置及び向きに対応する合成された画像を受信し、表示する。

図３は、本発明の一実施形態に係る画像構成出力装置１０のハードウェア構成を示すブロック図である。

図３に示すように、画像構成出力装置１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１１、メモリ２０１２、操作部２０１３、表示部２０１４、補助記憶部２０１５、ネットワーク通信Ｉ／Ｆ２０４０、ＧＰＳ受信部２５００、角度測定部２６００及び時計部２９００がバスラインＢＵＳにより接続されて構成されている。

ＣＰＵ２０１１は、画像構成出力装置１０を統括的に制御する部分であり、メモリ２０１２に記憶された各種プログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、本発明に係る各種機能を実現している。

操作部２０１３は、各種設定や入力操作を行う操作ボタン群、決定操作ボタン等を備えており、操作部２０１３による入力情報はＣＰＵ２０１１の制御下で処理される。すなわち、ユーザは、操作部２０１３を介して、向きを算出するための第１の位置及び第２の位置を指定する操作や、回転角を指定する操作や、画像のズーム指定を入力する操作等が可能である。表示部２０１４は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）や有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）によって構成され、各種情報を表示する。すなわち、表示部２０１４は、画像サーバ３１から受信した画像を表示する。

補助記憶部２０１５は、フラッシュメモリ等により構成され、画像構成出力装置１０が機能するための各種プログラム及び本発明の機能を実行するプログラムを記憶しており、各種データベースを構成可能である。

ネットワーク通信Ｉ／Ｆ２０４０は、画像構成出力装置１０を専用ネットワーク又は公共ネットワークを介して他のサーバ等と接続できるようにするためのネットワーク・アダプタである。例えば、ネットワーク通信Ｉ／Ｆ２０４０を介して、画像サーバ３１とのデータの送受信や、基準局からの測距誤差の受信をすることができる。

ＧＰＳ受信部２５００は、ＧＰＳ衛星から電波を受信する。ＧＰＳ受信部２５００は、無線通信に必要なアンテナ及びアンテナ信号処理回路等を含んで構成される。ＧＰＳ受信部２５００は、受信した電波に基づいて処理を行い、位置データを算出する。

角度測定部２６００は、物体の角度や角速度を検出するジャイロスコープや、回転するものと回転しないものとの差を計測する回転角センサ、例えば、ロータリーエンコーダ等により、画像構成出力装置１０の表示部２０１４を鉛直軸の周りにユーザが回転させた角度を測定する。測定された角度はＢＵＳを介してＣＰＵ２０１１によって検出される。

時計部２９００は、時刻を計測する。計測した時刻のデータは、ＧＰＳ受信部２５００での位置データの算出に用いられる。

なお、画像構成出力装置１０は、いわゆるＧＰＳ受信機能付携帯端末であり、例えば、回転角センサを含むＧＰＳ携帯端末として実現してもよい。

図４は、本発明の一実施形態に係る算出位置テーブルを示す図である。

算出位置テーブルは、ＧＰＳ位置特定部１１が特定した位置と時刻とを対応付けて記憶し、向きを算出した時に基点となった位置を記憶している。向き情報算出部１２は、算出位置テーブルに記憶した位置及び時刻と、現在時刻及びＧＰＳ位置特定部１１が算出した位置と、に基づいて所定の時間（例えば、３秒）内に所定の距離（例えば、１５ｃｍ）以上の差がある複数の位置を検出する。例えば、図４の算出位置テーブルに記憶された位置及び時刻では、時刻１３時１分１３．０２秒に特定した現在の位置が緯度３５°４３′１５．０２３″、経度１３９°５５′３８．７８６″であり、２秒前の時刻１３時１分１１．０２秒に特定した位置が緯度３５°４３′１５．０１３″、経度１３９°５５′３８．７６８″であるので、２秒間に約６０ｃｍ（緯度３５度における緯度差０．０１秒、経度差０．０２秒に相当）の異なる位置を検出していることを示している。向き情報算出部１２は、このような場合に向きを算出する。そして、図４は、向きを算出した時に基点となった時刻１３時１分１１．０２秒に特定した位置を向きの基点として記憶していることを示している。

図５は、本発明の一実施形態に係る画像構成出力装置１０の処理内容を示すフローチャートである。なお、本処理は、例えば、プログラム開始指令を受け付けて開始し、プログラム終了指令を受け付けて終了する。

ステップＳ１０１において、ＣＰＵ２０１１は、現在位置を特定する。より具体的には、ＧＰＳ受信部２５００がＧＰＳ衛星からデータを受信し、距離を測定する。そして、４つ以上のＧＰＳ衛星及び基準局を利用して誤差を補正し、位置を特定する。そして、ＣＰＵ２０１１は、ＧＰＳ受信部２５００が特定した位置及び現在時刻を算出位置テーブルに記憶する。その後、ＣＰＵ２０１１は、処理をステップＳ１０２に移す。

ステップＳ１０２において、ＣＰＵ２０１１は、向きの基点は継続か否かを判断する。すなわち、ＣＰＵ２０１１は、向き算出処理において向きの基点を継続するために特定した向きの基点を記憶したか否かを判断する。この判断がＹＥＳの場合は、処理をステップＳ１０８に移し、ＮＯの場合は処理をステップＳ１０３に移す。

ステップＳ１０３において、ＣＰＵ２０１１は、向き算出処理（後述する図６）を行い、向きを特定する。その後、ＣＰＵ２０１１は、処理をステップＳ１０４に移す。

ステップＳ１０４において、ＣＰＵ２０１１は、向き算出処理が向きを特定したか否かを判断する。すなわち、ＣＰＵ２０１１は、今回特定した位置及び記憶している過去の位置に基づいて、向き算出処理が向きを特定したか否かを判断する。この判断がＹＥＳの場合は、処理をステップＳ１０５に移し、ＮＯの場合は処理をステップＳ１０１に移す。

ステップＳ１０５において、ＣＰＵ２０１１は、角度を検出する。より具体的には、ＣＰＵ２０１１は、角度測定部２６００が測定した画像構成出力装置１０の回転角を検出する。なお、操作部２０１３の特定キーの操作により角度を取得してもよい。その後、ＣＰＵ２０１１は、処理をステップＳ１０６に移す。

ステップＳ１０６において、ＣＰＵ２０１１は、画像サーバ３１に画像の送信要求をする。より具体的には、ＣＰＵ２０１１は、特定した現在の位置データ（例えば、後述する図７の第１の位置５０１）及び算出した向きデータ（例えば、後述する図７の向き５０３）と、画像要求を示すデータとを、画像サーバ３１に送信する。また、ＣＰＵ２０１１は、画像構成出力装置１０の回転の角度を検出している場合には、検出した角度（例えば、後述する図１０の角度５０７）も共に送信する。その後、ＣＰＵ２０１１は、処理をステップＳ１０７に移す。なお、ＣＰＵ２０１１は、操作部２０１３からズーム指定を受け付けるとしてもよい。ズーム指定を受け付けている場合には、受け付けたズーム指定の倍率データを、特定した現在の位置データ、算出した向きデータ及び検出した角度データと、画像要求を示すデータと共に、画像サーバ３１に送信する。

ステップＳ１０７において、ＣＰＵ２０１１は、画像サーバ３１から受信した画像を表示する。すなわち、ＣＰＵ２０１１は、画像サーバ３１が送信した画像をネットワーク通信Ｉ／Ｆ部２０４０を介して受信して、表示部２０１４に出力する。例えば、画像サーバ３１は、受信した位置及び向きデータに対応する被写体を撮影している撮影機の中で受信した位置データに最も近い位置の撮影機の画像（例えば、後述する図７の撮影機４０１の画像）を送信し、その画像を受信したＣＰＵ２０１１は、表示部２０１４に出力する。また、画像サーバ３１が、画像合成部３２を備えてバーチャライズド・リアリティを実現している場合には、受信した位置及び向きデータに基づいて対応する被写体の、その向きの画像（例えば、後述する図８の位置５０１から向き５０３の画像）を送信し、更に、画像サーバ３１は、その被写体の、受信した角度からの画像（例えば、後述する図１０の向き５０６からの画像）を送信し、その画像を受信したＣＰＵ２０１１は、表示部２０１４に出力する。その後、ＣＰＵ２０１１は、処理をステップＳ１０１に移す。

ステップＳ１０８において、ＣＰＵ２０１１は、現在の位置と基点とに基づいて向きを特定する。すなわち、ＣＰＵ２０１１は、向き算出処理が向きの継続のために記憶した基点と、現在の位置（緯度及び経度）と、に基づいて向きを算出する（例えば、後述する図９の位置５０１から向き５０５）。その後、ＣＰＵ２０１１は、処理をステップＳ１０５に移す。

図６は、本発明の一実施形態に係る画像構成出力装置１０の向き算出処理の処理内容を示すフローチャートである。

ステップＳ２０１において、ＣＰＵ２０１１は、過去の位置を取得する。より具体的には、ＣＰＵ２０１１は、算出位置テーブルに記憶した前回の位置データを取得する。その後、ＣＰＵ２０１１は、処理をステップＳ２０２に移す。

ステップＳ２０２において、ＣＰＵ２０１１は、所定の時間内か否かを判断する。すなわち、ＣＰＵ２０１１は、取得した前回の位置を特定した時刻と、現在時刻と、の時刻差を算出し、算出した時刻差が所定の時間（例えば、３秒）内か否かを判断する。この判断がＹＥＳの場合は、処理をステップＳ２０３に移し、ＮＯの場合は所定の時間内に特定した位置は存在しないので処理を終了し本処理に移る処理の次の処理へ戻る。

ステップＳ２０３において、ＣＰＵ２０１１は、所定の距離以上か否かを判断する。すなわち、ＣＰＵ２０１１は、取得した前回の位置と、現在の位置と、の距離差を算出し、算出した距離差が所定の距離（例えば、１５ｃｍ）以上であるか否かを判断する。この判断がＹＥＳの場合は、処理をステップＳ２０４に移し、ＮＯの場合は次の位置データを取得するために処理をステップＳ２０１に移す。

ステップＳ２０４において、ＣＰＵ２０１１は、現在の位置と取得した位置とに基づいて向きを特定する。より具体的には、ＣＰＵ２０１１は、現在の位置（緯度及び経度）と、取得した位置（緯度及び経度）から向きを算出し、算出した向きを記憶し、向きを特定したことを記憶する。その後、ＣＰＵ２０１１は、処理をステップＳ２０５に移す。

ステップＳ２０５において、ＣＰＵ２０１１は、向きの基点を継続するために特定した向きの基点を記憶する。その後、ＣＰＵ２０１１は、処理を終了し本処理に移る処理の次の処理へ戻る。なお、記憶した基点は、例えば、本プログラムを開始することにより初期化される。

図７は、本発明の一実施形態に係る画像構成出力装置１０の表示例を示す図である。図７の例は、画像構成出力装置１０が特定した位置及び算出した向きに基づいて対応する画像を画像サーバ３１から受信し、表示していることを示す例である。画像サーバ３１は、撮影機４０１〜４０６を用いて画像を作成している。

図７では、画像構成出力装置１０が第１の位置５０１を特定し、同様に特定した第２の位置５０２が、例えば、３秒内に、１５ｃｍ以上の差がある場合に、向き５０３を算出し、特定したことを示している。そして、図７は、第１の位置５０１を基点として、算出した向き５０３に対応する被写体９０１を撮影している撮影機の中で第１の位置５０１に最も近い撮影機４０１の向き４１１の画像データを画像サーバ３１から受信し、表示部２０１４に出力していることを示している。したがって、画像構成出力装置１０は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に提供することができる。

また、向きを算出するための第１の位置５０１及び第２の位置５０２の特定は、例えば、操作部２０１３の位置特定ボタンを押し、押した時の位置とすることにより特定するとしてもよい。操作部２０１３の位置特定ボタンを用いることにより、移動しながら第１の位置５０１及び第２の位置５０２を特定することができる。ＧＰＳ衛星に基づいて特定した位置の精度が得られなかった場合であっても、数ｍの移動で向きを算出することができる。

図８は、本発明の一実施形態に係る画像構成出力装置１０の別の表示例を示す図である。図８の例は、画像構成出力装置１０が特定した位置及び算出した向きに基づいて対応する画像を画像サーバ３１から受信し、表示していることを示す例である。画像サーバ３１は、撮影機４０１〜４０６から受信した画像に基づいて任意の位置及び任意の向きからの画像を合成するバーチャライズド・リアリティを実現している。

図８では、画像構成出力装置１０が第１の位置５０１を特定し、同様に特定した第２の位置５０２が、例えば、３秒内に、１５ｃｍ以上の差がある場合に、向き５０３を算出し、特定したことを示している。そして、図８は、第１の位置５０１を基点として、算出した向き５０３に対応する被写体９０１の画像を、撮影機４０１〜４０６の画像に基づいて任意の位置及び任意の向きからの画像を合成している画像サーバ３１から受信し、表示部２０１４に出力していることを示している。すなわち、画像構成出力装置１０は、第１の位置５０１を基点として、算出した向き５０３に対応する被写体９０１の画像を、あたかも画像構成出力装置１０に備わったカメラが撮像したかのように表示部２０１４に表示している。

図９は、本発明の一実施形態に係る画像構成出力装置１０の図８に続く表示例を示す図である。図９の例は、図８に続いて画像構成出力装置１０を動かした場合に、画像構成出力装置１０が特定した位置及び算出した向きに基づいて対応する画像を画像サーバ３１から受信し、表示していることを示す例である。

図９では、画像構成出力装置１０が第１の位置５０１を特定し、同様に特定した第２の位置５０２によって向き５０３を算出している。そして、最初の向きが算出できれば、ユーザは、画像構成出力装置１０を、例えば、被写体９０２の動きに合わせて動かすことにより、画像構成出力装置１０は、第１の位置５０１と動かしている現在の位置５０４との向き５０５を算出することができる。すなわち、画像構成出力装置１０は、第１の位置５０１及び現在の位置５０４から算出し続ける向き５０５に対応する画像を画像サーバ３１から受信し表示し続けることができ、ユーザは被写体９０２を見続けることができる。したがって、画像構成出力装置１０は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に提供することができる。

図１０は、本発明の一実施形態に係る画像構成出力装置１０の図８に続く別の表示例を示す図である。図１０の例は、画像構成出力装置１０が特定した位置及び算出した向きによって被写体を特定した後に、画像構成出力装置１０を回転５０８させた角度５０７に基づいて対応する画像を画像サーバ３１から受信し、表示していることを示す例である。

図１０では、画像構成出力装置１０が第１の位置５０１を特定し、同様に特定した第２の位置５０２が、例えば、３秒内に、１５ｃｍ以上の差がある場合に、向き５０３を算出し、特定したことを示している。更に、図１０は、第１の位置５０１及び向き５０３に対応する被写体９０１が特定された後に、ユーザが画像構成出力装置１０を回転５０８させて、回転５０８させた角度５０７の向き５０６からの被写体９０１の画像を要求していることを示している。そして、図１０は、画像構成出力装置１０が、特定した第１の位置５０１、算出した向き５０３及び検出した角度５０７に基づいて対応する画像の画像データを画像サーバ３１から受信し、表示部２０１４に出力していることを示している。すなわち、画像構成出力装置１０は、画像サーバ３１が送信した、画像構成出力装置１０の位置、向き及び角度に対応する合成した画像を、あたかも画像構成出力装置１０に備わったカメラが狙った被写体９０１を画像構成出力装置１０を角度５０７に傾けて振ることにより、競技場中の向き５０６から撮像したかのように表示する。したがって、画像構成出力装置１０は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に提供することができる。なお、図１０の例では、画像構成出力装置１０を回転させて角度を指定しているが、これに限らず、ユーザは、画像構成出力装置１０を、最初から見たいと思う角度に傾けておいて同様に操作してもよい。

図１１は、本発明の一実施形態に係る画像構成出力装置１０の更に別の表示例を示す図である。図１１の例は、画像構成出力装置１０がズーム指定を受け付け、受け付けたズーム指定の倍率に対応する画像を画像サーバ３１から受信し、表示していることを示す例である。

画像構成出力装置１０の表示部２０１４に表示している内容は、ズーム指定欄１０２にユーザが指定した倍率（例えば、２倍）を表示し、画像表示欄１０１に表示している内容は、画像構成出力装置１０が画像サーバ３１から受信した２倍の画像を表示していることを示している。したがって、本発明に係る画像構成出力装置１０は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体のズーム指定した画像を容易に提供することができる。

実施例によれば、本発明に係る画像構成出力装置１０は、ＧＰＳ衛星からＧＰＳ受信部２５００がデータを受信し、受信したデータに基づいて画像構成出力装置１０の位置を特定し、記憶する。そして、画像構成出力装置１０は、一定の時間間隔でＧＰＳ受信部２５００が算出した位置を連続的に監視し、記憶した位置と取得した現在の位置とから、所定時間内に異なる複数の位置を検出し、検出した位置に基づいて向きを算出する。そして、画像構成出力装置１０は、特定した位置及び算出した向きに基づいて対応する画像の送信要求を画像サーバ３１に送信し、要求した画像を画像サーバ３１から受信して表示部２０１４に表示する。

更に、本発明に係る画像構成出力装置１０は、画像サーバ３１が送信した、画像構成出力装置１０の位置及び向きに対応する合成した画像を、あたかも画像構成出力装置１０に備わったカメラが撮像したかのように表示する。そして、画像構成出力装置１０の位置及び向きに加えて、検出した角度に対応する合成した画像を、あたかも画像構成出力装置１０に備わったカメラが狙った被写体を画像構成出力装置１０を任意の角度に傾けて振ることにより、スタジアム中の任意の角度から撮像したかのように表示する。したがって、画像構成出力装置１０は、競技等が実際に行われている競技場等で、ユーザが実際に観覧している競技等について、ユーザが見たいと思う被写体の画像を容易に提供することができ、ズーム指定した画像をも容易に提供することができる。

［実施例２］
図１２は、本発明の一実施形態に係る画像構成出力装置１０と、画像サーバ３１との実施例２の機能を示す機能ブロック図である。実施例２における画像サーバ３１は、複数の撮影機から受信した画像を管理する。すなわち、画像サーバ３１は、固定された撮影機だけではなく、移動するカメラ（例えば、後述する図１７の撮影機４２１、４２２）や、カメラ付き携帯電話、携帯用ビデオ（例えば、後述する図１７の撮影機４２３）等の撮影機から受信した画像を、撮影した位置及び向きと共に記憶している。そして、画像構成出力装置１０は、指定した位置及び向きの画像を画像サーバ３１から受信し表示する。

画像構成出力装置１０は、実施例１の画像構成出力装置１０に加えて、基準点指定手段として基準点指定部２１と、近傍撮影機確認手段として近傍撮影機確認部２２と、近傍撮影機位置表示手段として近傍撮影機位置表示部２３と、向き検出手段として向き検出部２４と、ズーム指定受付手段としてズーム指定受付部２５とを備えている。

基準点指定部２１は、地理上の任意の基準点を指定する。例えば、基準点指定部２１は、位置情報の入力を受け付け、受け付けた位置情報に基づいて取得した地図上の位置（例えば、緯度及び経度）を基準点とする。位置情報は、地名や施設名等であってもよいし、特定のコード（例えば、地図に記載された二次元バーコード等）であってもよい。基準点指定部２１は、受け付けた位置情報に基づいて、例えば、位置情報を管理するサーバから、地図上の位置（例えば、緯度及び経度）を取得する。

近傍撮影機確認部２２は、基準点指定部２１によって指定された基準点の近傍で撮影している撮影機が存在するか否かの情報の送信要求を画像サーバ３１に送信し、送信要求した情報を画像サーバ３１から受信する。例えば、近傍撮影機確認部２２が、基準点を画像サーバ３１に送信すると、画像サーバ３１は、受信した基準点を中心として近傍である所定の範囲（例えば、被写体によって、半径数１０ｍ〜数ｋｍの範囲）内で撮影している撮影機を検出し、検出した撮影機の情報、例えば、撮影している撮影機が存在するか否かの情報を示す、撮影機の位置や撮影方向等、を画像構成出力装置１０に送信し、近傍撮影機確認部２２は、画像サーバ３１から撮影機の情報を受信する。基準点を中心とする所定の範囲は、ユーザによって設定され、基準点と共に画像サーバ３１に送信されるとしてよい。

近傍撮影機位置表示部２３は、近傍撮影機確認部２２が受信した撮影機の情報に基づいて、基準点の近傍で撮影している撮影機の位置を表示する。例えば、近傍撮影機位置表示部２３は、近傍撮影機確認部２２が画像サーバ３１から受信した撮影機の情報、例えば、撮影している撮影機の位置等、に基づいて、撮影機の位置を表示部２０１４に表示する。この表示を参照して、ユーザは、見たい画像を受信するための撮影機の向きを想定することができる。更に、近傍撮影機位置表示部２３は、画像サーバ３１から撮影機の位置だけでなく撮影方向や地図も受信し、撮影機の位置及び撮影方向と共に地図を表示部２０１４に表示するとしてもよい。この表示を参照して、ユーザは、見たい画像を受信するための撮影機の向きを、更に容易に想定することができる。

向き検出部２４は、近傍撮影機確認部２２が受信した、撮影機が存在するか否かの情報を確認したユーザによって方向付けられた画像構成出力装置１０の向きを検出する。近傍撮影機位置表示部２３によって基準点の近傍で撮影している撮影機が表示される場合は、向き検出部２４は、表示された撮影機の位置を参照したユーザによって方向付けられた画像構成出力装置１０の向きを検出する。画像構成出力装置１０の方向付けは、基準点からユーザが見たいと思う方向や、基準点の近傍の撮影機の位置等の表示を見て想定した方向に、画像構成出力装置１０を向けることによって行う。向きの検出は、実施例１の様に、画像構成出力装置１０が備えるＧＰＳ受信部２５００によって検出するとしてもよいし、方位測定部２７００（後述する図１３参照）によって検出するとしてもよい。検出した向きは、撮影機の撮影方向を示す向きである。

ズーム指定受付部２５は、画像サーバ３１に送信要求する画像のズーム率の指定を受け付ける。例えば、ズーム指定受付部２５は、画像構成出力装置１０をユーザの体から前後に動かした場合の加速度を加速度測定部２８００（後述する図１３参照）によって測定し、測定した加速度に応じた値を画像のズーム率として記憶する。画像送信要求部１３は、ズーム指定受付部２５が受け付けたズーム率を画像の送信要求に加えて送信する。

画像送信要求部１３は、向き検出部２４が検出した向きに対応する画像の送信要求を画像サーバ３１に送信し、画像出力部１４は、画像送信要求部１３が送信要求した画像を、画像サーバ３１から受信して出力する。

画像サーバ３１は、近傍撮影機検出手段として近傍撮影機検出部３５と、画像受信手段として画像受信部３６と、画像送信手段として画像送信部３７とを備える。

近傍撮影機検出部３５は、画像構成出力装置１０から受信した、撮影機が存在するか否かの情報の送信要求に応じて、基準点の近傍で撮影している撮影機の情報を検出し、画像構成出力装置１０に送信する。近傍撮影機検出部３５が検出した撮影機は、撮影機位置ＤＢ４１に記憶する（後述する図１５参照）。

画像受信部３６は、近傍撮影機検出部３５が検出した撮影機から画像を受信する。

画像送信部３７は、画像構成出力装置１０から受信した、向きに対応する画像の送信要求に応じて、画像受信部３６が受信した画像の中から、画像構成出力装置１０から受信した向きに対応する画像を画像構成出力装置１０に送信する。

例えば、撮影機４２１〜４２４（図１７参照）は、撮影した画像を、撮影位置及び撮影方向と共に画像サーバ３１にリアルタイムで送信する。ここで、撮影位置は、例えば、撮影機４２１〜４２４が備えるＧＰＳ受信機により検出し、撮影方向は、例えば、撮影機４２１〜４２４が備える方位計により検出する。画像サーバ３１は、撮影機４２１〜４２４から受信した撮影位置に撮影方向を対応付けて撮影機位置ＤＢ４１に記憶する。そして、画像サーバ３１は、画像構成出力装置１０から受信した基準点を中心として近傍の位置（例えば、基準点から所定の範囲内の位置）で撮影している撮影機４２１〜４２４の中から、画像構成出力装置１０から受信した向き（例えば、受信した向きから所定の範囲内の向き）を撮影方向とする撮影機が撮影した画像を画像構成出力装置１０に送信する。ここで、向きについての所定の範囲は、ユーザによって設定され、向きと共に画像サーバ３１に送信されるとしてよい。

更に、画像サーバ３１は、所定時間（例えば、１、２時間）内に記憶した画像の中から、画像構成出力装置１０によって送信された基準点を中心とした近傍の位置（例えば、基準点から所定の範囲内の位置）を撮影位置とし、送信された向き（例えば、送信された向きから所定の範囲内の向き）を撮影方向として撮影した画像を抽出して画像構成出力装置１０に送信するとしてもよい。

図１３は、本発明の一実施形態に係る実施例２の画像構成出力装置１０のハードウェア構成を示すブロック図である。

図１３に示すように、画像構成出力装置１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１１、メモリ２０１２、操作部２０１３、表示部２０１４、補助記憶部２０１５、ネットワーク通信Ｉ／Ｆ２０４０、方位測定部２７００、加速度測定部２８００、及び時計部２９００がバスラインＢＵＳにより接続されて構成されている。ここで、ＣＰＵ２０１１、メモリ２０１２、操作部２０１３、表示部２０１４、補助記憶部２０１５、ネットワーク通信Ｉ／Ｆ２０４０、及び時計部２９００は実施例１と同様である。

方位測定部２７００は、地磁気センサによって、画像構成出力装置１０が向いている方向の方位データを検出する。例えば、方位測定部２７００は、ヨー（左右回転）、ピッチ（前後の傾き）、ロール（左右の傾き）を検出する３軸の地磁気センサによって、方位データを検出し、出力する。

加速度測定部２８００は、加速度センサによって画像構成出力装置１０の動きにおける加速度データを検出する。例えば、加速度測定部２８００は、重力方向（Ｚ軸）に対する水平面（Ｘ軸、Ｙ軸）において前後方向（Ｘ軸方向）の動きの加速度を測定することができる３軸の加速度センサによって、前後方向の加速度を検出し、出力する。

図１４は、本発明の一実施形態に係る画像構成出力装置１０の実施例２の処理内容を示すフローチャートである。なお、本処理は、例えば、プログラム開始指令を受け付けて開始し、プログラム終了指令を受け付けて終了する。

ステップＳ３０１において、ＣＰＵ２０１１は、基準点の指定を受け付ける。より具体的には、ＣＰＵ２０１１は、地名や施設名等の入力を受け付け、受け付けた地名や施設名等に基づいて、位置情報を管理するサーバ（図示せず）から取得した緯度及び経度を基準点とする。その後、ＣＰＵ２０１１は、処理をステップＳ３０２に移す。

ステップＳ３０２において、ＣＰＵ２０１１は、基準点を送信する。より具体的には、ＣＰＵ２０１１は、ステップＳ３０１で受け付け、取得した基準点の位置データ（緯度及び経度）を画像サーバ３１に送信することによって、撮影機が存在するか否かの情報の送信要求をする。その後、ＣＰＵ２０１１は、処理をステップＳ３０３に移す。

ステップＳ３０３において、ＣＰＵ２０１１は、受信した、撮影機が存在するか否かの情報に基づいて、撮影機が存在するか否かを判断する。すなわち、ＣＰＵ２０１１は、画像サーバ３１から１台以上の撮影機が存在するか否かの情報を受信したか否かを判断する。この判断がＹＥＳの場合は、処理をステップＳ３０４に移し、ＮＯの場合は処理をステップＳ３０１に移す。

ステップＳ３０４において、ＣＰＵ２０１１は、受信した、撮影機の情報に基づいて表示する。より具体的には、ＣＰＵ２０１１は、画像サーバ３１が受信した基準点を中心として探索した結果、所定の範囲内で検出した撮影機の情報、例えば、撮影している撮影機の位置や撮影方向等、を画像サーバ３１から受信し、受信した撮影機の位置や撮影方向を表示部２０１４に表示する。その後、ＣＰＵ２０１１は、処理をステップＳ３０５に移す。

ステップＳ３０５において、ＣＰＵ２０１１は、ユーザが方向付けた向きを検出する。より具体的には、ＣＰＵ２０１１は、ユーザが画像構成出力装置１０を方向付けることによって指定した向きを、方位測定部２７００が測定することによって検出する。ＣＰＵ２０１１は、検出した向きを、撮影機の撮影方向を示す向きとして記憶する。その後、ＣＰＵ２０１１は、処理をステップＳ３０６に移す。

ステップＳ３０６において、ＣＰＵ２０１１は、ユーザが指定した、画像のズーム率を算出する。より具体的には、ＣＰＵ２０１１は、ユーザが画像構成出力装置１０を前後方向に動かすことによって指定したズーム率を、加速度測定部２８００が測定した加速度に基づいて、算出する。その後、ＣＰＵ２０１１は、処理をステップＳ３０７に移す。

ステップＳ３０７において、ＣＰＵ２０１１は、画像サーバ３１に画像の送信要求をする。より具体的には、ＣＰＵ２０１１は、基準点の位置データ及び検出した向きデータ（例えば、後述する図１７の向き６０３）と、ズーム率と、画像要求を示すデータとを、画像サーバ３１に送信する。その後、ＣＰＵ２０１１は、処理をステップＳ３０８に移す。

ステップＳ３０８において、ＣＰＵ２０１１は、画像サーバ３１から受信した画像を表示する。すなわち、ＣＰＵ２０１１は、画像サーバ３１が送信した画像を受信して、表示部２０１４に出力する。例えば、画像サーバ３１は、受信した基準点を中心として近傍の位置（例えば、基準点から所定の範囲内の位置）で撮影している撮影機４２１〜４２４の中から、受信した向き（例えば、受信した向きから所定の範囲内の向き）を撮影方向とする撮影機が撮影した画像を、ズーム率によって拡大縮小し、送信する。その画像を受信したＣＰＵ２０１１は、表示部２０１４に出力する。その後、ＣＰＵ２０１１は、処理をステップＳ３０５に移す。

図１５は、本発明の一実施形態に係る画像サーバ３１の撮影機位置ＤＢ４１の例を示す図である。撮影機位置ＤＢ４１は、撮影機が撮影する撮影位置と、撮影機の識別情報である撮影機ＩＤと、撮影機が撮影する方向である撮影方向と、撮影機が撮影する画像の種別である画像種別とを対応付けて記憶している。よって、画像サーバ３１は、動画や静止画をその画像種別に従って画像構成出力装置１０に送信することができる。画像サーバ３１は、受信した基準点を中心として所定の範囲を探索し、検出した撮影機の位置を撮影機位置ＤＢ４１に記憶する。画像サーバ３１は、撮影機位置ＤＢ４１に撮影機が撮影した画像を対応付けて記憶してもよい。

図１６は、本発明の一実施形態に係る画像構成出力装置１０の実施例２の表示例を示す図である。図１６の例は、画像構成出力装置１０が画像サーバ３１から受信した撮影機の位置を、表示部２０１４に表示している例である。図１６が示す表示は、表示部２０１４の位置表示欄２０１に、基準点６５２を表示し、基準点６５２を中心とした所定の範囲を破線６５１で表示し、画像サーバ３１から受信した撮影機４２１〜４２４の位置を表示している。画像構成出力装置１０は、画像サーバ３１から、撮影機４２１〜４２４の撮影方向や、基準点を中心とした地図も受信し、撮影位置及び撮影方向が分るような図形（例えば、矢印）や、文字、アイコン等と共に地図も表示するとしてもよい。

図１７は、本発明の一実施形態に係る画像構成出力装置１０の実施例２の別の表示例を示す図である。図１７（１）の例は、画像構成出力装置１０が指定した基準点の位置及び検出した向きに対応する画像を画像サーバ３１から受信し、表示していることを示す例である。図１７（２）の例は、撮影機４２１〜４２４が撮影し、画像サーバ３１に送信していることを示す例である。

図１７（１）では、画像構成出力装置１０が基準点として、例えば「富士山」を受け付け、向き６０３を検出したことを示している。そして、図１７（１）は、「富士山」の例えば、山頂の位置（北緯３５度２１．５分及び東経１３８度４５．１分）を基準点とし、所定の範囲内（例えば、半径３ｋｍ以内）で撮影している図１７（２）の撮影機４２１〜４２４の中で、検出した向き６０３である北方向と所定の範囲内で最も近い方向を撮影している撮影機４２３の画像データを画像サーバ３１から受信し、表示部２０１４に画像７０２を出力していることを示している。

更に、図１７（１）では、画像構成出力装置１０が向き６０３を検出後に、ユーザは、画像構成出力装置１０を、例えば、被写体の位置を想定して画像構成出力装置１０を方向付けることにより、画像構成出力装置１０は、向き６０５を検出する。そして、画像構成出力装置１０は、検出した向き６０５と所定の範囲内で最も近い方向を撮影している撮影機４２４の画像データを画像サーバ３１から受信し表示することができ、ユーザは画像７０１を見ることができる。したがって、画像構成出力装置１０は、実際にその場所に居なくても、ユーザが見たいと思う被写体の画像を容易に提供することができる。

実施例２によれば、画像構成出力装置１０は、複数の撮影機から受信した画像を管理する画像サーバ３１と通信可能に接続され、地理上の任意の基準点を指定し、指定された基準点の近傍で撮影している撮影機が存在するか否かの情報の送信要求を画像サーバ３１に送信し、送信要求した情報を画像サーバ３１から受信し、受信した情報を確認したユーザによって方向付けられた画像構成出力装置１０の向きを方位測定部２７００によって検出し、検出した向きに対応する画像の送信要求を画像サーバ３１に送信し、送信要求した画像を、画像サーバ３１から受信して出力する。

更に、画像構成出力装置１０は、送信要求した、撮影機が存在するか否かの情報を画像サーバ３１から受信し、基準点の近傍で撮影している撮影機の位置を表示する。よって基準点の近傍で撮影している撮影機の位置を参照したユーザによって方向付けられた画像構成出力装置１０の向きに対応する画像を、画像サーバ３１から受信して出力する。

更に、画像構成出力装置１０は、加速度測定部２８００によって測定した加速度に応じたズーム率を画像サーバ３１に送信し、ズーム率に応じた画像を、画像サーバから受信して出力する。したがって、本発明に係る画像構成出力装置１０は、実際にその場所に居なくても、ユーザが見たいと思う被写体の画像を容易に提供することができ、ユーザはその場所に居なくてもあたかもその方向に見ているかのように画像を見ることができる。

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施例に記載されたものに限定されるものではない。

１０ 画像構成出力装置
１１ ＧＰＳ位置特定部
１２ 向き情報算出部
１３ 画像送信要求部
１４ 画像出力部
１５ 角度検出部
２１ 基準点指定部
２２ 近傍撮影機確認部
２３ 近傍撮影機位置表示部
２４ 向き検出部
２５ ズーム指定受付部
３１ 画像サーバ
３２ 画像合成部
３５ 近傍撮影機検出部
３６ 画像受信部
３７ 画像送信部
４１ 撮影機位置ＤＢ

Claims (10)

1. 複数の位置に固定された複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続され、前記画像サーバから受信した画像を画像表示装置に出力する画像構成出力装置であって、
   ＧＰＳ（Global Positioning System）の衛星からの搬送波の位相を測定するＲＴＫ（Real Time Kinematic）−ＧＰＳによって位置を特定するＧＰＳ位置特定手段と、
   前記ＧＰＳ位置特定手段が所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出する向き情報算出手段と、
   前記特定した位置及び算出した向きに基づいて対応する画像の送信要求を前記画像サーバに送信する画像送信要求手段と、
   前記画像送信要求手段が要求した画像を、前記画像サーバから受信して出力する画像出力手段と、
   を備えることを特徴とする画像構成出力装置。
2. 前記画像サーバは、前記複数の撮影機から受信した画像に基づいて任意の位置及び任意の向きからの画像を合成する画像合成手段を更に備え、
   前記画像送信要求手段は、前記画像構成出力装置の位置及び向きに基づいて対応する画像の送信要求を前記画像サーバに送信することを特徴とする請求項１に記載の画像構成出力装置。
3. 前記画像構成出力装置は、前記向き情報算出手段が連続して特定した異なる複数の位置における前記画像構成出力装置の角度を検出する角度検出手段を更に備え、
   前記画像送信要求手段は、前記画像構成出力装置の位置、向き及び角度に基づいて対応する画像の送信要求を前記画像サーバに送信することを特徴とする請求項２に記載の画像構成出力装置。
4. 複数の位置に固定された複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続され、前記画像サーバから受信した画像を画像表示装置に出力する方法であって、
   ＧＰＳ（Global Positioning System）の衛星からの搬送波の位相を測定するＲＴＫ（Real Time Kinematic）−ＧＰＳによって位置を特定するステップと、
   所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出するステップと、
   前記特定した位置及び算出した向きに基づいて対応する画像の送信要求を前記画像サーバに送信するステップと、
   前記送信要求した画像を、前記画像サーバから受信して出力するステップと、
   を備えることを特徴とする方法。
5. 複数の位置に固定された複数の撮影機から受信した画像を管理する画像サーバと、前記画像サーバと通信可能に接続され、前記画像サーバから受信した画像を画像表示装置に出力する画像構成出力装置と、を備える画像構成出力システムであって、
   前記画像構成出力装置は、
   ＧＰＳ（Global Positioning System）の衛星からの搬送波の位相を測定するＲＴＫ（Real Time Kinematic）−ＧＰＳによって位置を特定するＧＰＳ位置特定手段と、
   前記ＧＰＳ位置特定手段が所定時間内に連続して特定した異なる複数の位置に基づいて向きを算出する向き情報算出手段と、
   前記特定した位置及び算出した向きに基づいて対応する画像の送信要求を前記画像サーバに送信する画像送信要求手段と、
   前記画像送信要求手段が要求した画像を、前記画像サーバから受信して出力する画像出力手段と、を備え、
   前記画像サーバは、
   前記画像構成出力装置から受信した前記特定した位置及び算出した向きに基づいて対応する画像を前記画像構成出力装置に送信する画像送信手段、を備える、
   ことを特徴とする画像構成出力システム。
6. 複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続され、前記画像サーバから受信した画像を出力する画像構成出力装置であって、
   地理上の任意の基準点を指定する基準点指定手段と、
   前記画像構成出力装置の向きを検出する向き検出手段と、
   前記撮影機によって画像が撮影された撮影位置および前記画像の撮影時に前記撮影機が向いている撮影方向と対応付けられた画像を持つ前記画像サーバから、前記基準点指定手段によって指定された基準点の近傍に含まれる撮影位置に対応付けられた画像であり、かつ前記向き検出手段によって検出された画像構成出力装置の向きと共通する撮影方向に対応付けられた画像を取得する画像取得手段と
   を備えることを特徴とする画像構成出力装置。
7. 前記向き検出手段による検出が実行される場合に、前記基準点指定手段によって指定された基準点の近傍に撮影位置が含まれる撮影機の位置を表示する近傍撮影機位置表示手段を更に備えることを特徴とする請求項６に記載の画像構成出力装置。
8. 前記画像構成出力装置の動きの加速度を検出する加速度検出手段を更に備え、
   前記画像取得手段は、前記画像サーバから、前記加速度検出手段によって前記画像構成出力装置の向きの延長線上に向けて検出された加速度の大きさに合ったズーム率の画像を取得することを特徴とする請求項６又は７に記載の画像構成出力装置。
9. 複数の撮影機から受信した画像を管理する画像サーバと通信可能に接続された画像構成出力装置が、前記画像サーバから受信した画像を出力する方法であって、
   地理上の任意の基準点を指定するステップと、
   前記画像構成出力装置の向きを検出するステップと、
   前記撮影機によって画像が撮影された撮影位置および前記画像の撮影時に前記撮影機が向いている撮影方向と対応付けられた画像を持つ前記画像サーバから、前記基準点の近傍に含まれる撮影位置に対応付けられた画像であり、かつ前記画像構成出力装置の向きと共通する撮影方向に対応付けられた画像を取得するステップと
   を備えることを特徴とする方法。
10. 複数の撮影機から受信した画像を管理する画像サーバと、前記画像サーバと通信可能に接続され、前記画像サーバから受信した画像を出力する画像構成出力装置と、を備える画像構成出力システムであって、
    前記画像構成出力装置は、
    地理上の任意の基準点を指定する基準点指定手段と、
    前記画像構成出力装置の向きを検出する向き検出手段と、
    前記基準点指定手段によって指定された基準点及び前記向き検出手段によって検出された画像構成出力装置の向きに対応する画像の送信を前記画像サーバに要求する画像送信要求手段とを備え、
    前記画像サーバは、
    前記撮影機によって画像が撮影された撮影位置および前記画像の撮影時に前記撮影機が向いている撮影方向と対応付けられた画像を記憶する画像記憶手段と、
    前記画像送信要求手段による画像の送信要求を受け付けた場合に、前記画像記憶手段に記憶された画像のうち前記基準点の近傍に含まれる撮影位置に対応付けられた画像であり、かつ前記画像構成出力装置の向きと共通する撮影方向に対応付けられた画像を前記画像構成出力装置へ送信する画像送信手段とを備える、
    ことを特徴とする画像構成出力システム。

Images