JP2022110177A - ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置 - Google Patents

Abstract

【課題】グリーン上のボールの転がりも視認可能なハイライトシーンを集めたゴルフラウンドのダイジェストを自動作成するゴルフダイジェスト作成システムを提供すること。【解決手段】 移動撮影ユニットはゴルフカートに設置した３６０度カメラと電動雲台上の電動式ズームレンズ付きカメラと集音マイクとＧＰＳ受信機とレンズの方向検出器とを有しており、現在位置とゴルフコース地図情報とから電動式ズームレンズ付きカメラの撮影対象エリアを決定し電動雲台を駆動して、ズーム撮影した映像データに時刻情報やエリア識別情報を付して記憶する。そして、ダイジェスト作成装置がその記憶された映像データに付されたエリア識別情報に基づいて画像解析やハイライトシーンの抽出の対象とする映像データを３６０度カメラからのものと電動式ズームレンズ付きカメラからのものとのいずれにするかを選択する。【選択図】図３

Description

本発明は、ゴルフラウンド中のプレーの撮影からハイライトシーンを集めたダイジェスト作成までを自動的に行うゴルフダイジェスト作成システムに関する。

従来より、ゴルフラウンド中のプレーを撮影し、プレー後に動画像をプレーヤーに提供するシステムとしては、特許文献１に記載されているようなものがあった。図２８は、特許文献１に記載された従来のゴルフダイジェスト作成システムを構成する移動撮影ユニットの図である。

図２８において、移動撮影ユニットは、ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、そのゴルフカートに設置した集音マイクと、３６０度カメラからの映像データと集音マイクからの音声データとを記憶するＡＶ記憶部と、映像データと音声データとに両者が同期するための時刻情報を付してＡＶ記憶部に記憶する制御部とを有していた。また、ダイジェスト作成装置は、移動撮影ユニットのＡＶ記憶部に記憶した映像データを画像解析および／または音声データを音声解析するデータ解析部と、当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部とを有していた。

また、プレー時の映像、音声やスコア、コース状況等をライブラリーとして簡易に蓄積できるシステムとしては、特許文献２に記載されているようなものがあった。図２９と図３０は、特許文献２に記載された従来のゴルフプレーライブラリーシステムでの表示画面の例である。

このゴルフプレーライブラリーシステムでは、プレーヤーがプレー中に撮像ボタンを押して撮影すると、その画像が画像・音声ファイルに格納され、プレー中のホールのたとえば、グリーンとをリンクさせるリンク情報が追加される。これにより、ラウンド終了後、図２９の収録画像を表示するモードの画面でユーザがグリーンをポイント指示すると、リンクが取れている画像があれば図３０のように表示される。

特開２０２０－８８８５５号公報 特開２００３－１１１８８３号公報

しかしながら、上記従来例の特許文献１に記載の移動撮影ユニットでは、ゴルフカートがゴルフプレーヤーから離れた位置で撮影せざるを得ない場合、ショット後のボールの行方やグリーン上のボールの転がりなどを明瞭に視認可能な程度に映像として記録することができないという課題があった。

また、ハイライトシーン（見どころのシーン）の映像のみでは、そのシーンの地点の詳細なアンジュレーションが分からないという課題があった。

また、特許文献２に記載のゴルフプレーライブラリーシステムでは、プレーヤーがプレー中に撮影しなければならずプレーに集中できない上に、映像からしかショットしたときのアンジュレーションが分からないという課題があった。

本発明は、上記従来の課題を解決するためになされ、その目的とするところは、プレーヤーが撮影を意識することなしに、ゴルフコース上のハイライトシーンでのゴルフボールの転がりなどの様子やショットした地点のアンジュレーションが分かるゴルフラウンドのダイジェストを自動作成するゴルフダイジェスト作成システムを提供することにある。

上記従来の課題を解決する本発明に係るゴルフダイジェスト自動作成システムは、移動撮影ユニットとダイジェスト作成装置とを備える。

その移動撮影ユニットは、ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、ゴルフカートに設置した電動雲台上に取り付けた電動式ズームレンズ付きカメラと、ゴルフカートに設置した集音マイクとＧＰＳ受信機と、電動式ズームレンズ付きカメラのレンズ方向を検出する方向検出器と、ゴルフコースの地図情報を記憶したコース情報記憶部と、前記３６０度カメラからの映像データと前記電動式ズームレンズ付きカメラからの映像データと集音マイクからの音声データとを記憶するＡＶ記憶部と、ＧＰＳ受信機の検出した位置情報と地図情報とから撮影対象エリアを決定し、方向検出器の検出するレンズ方向が当該撮影対象エリアになるように電動雲台を駆動して、電動式ズームレンズ付きカメラでズーム撮影した映像データと、３６０度カメラからの映像データと、音声データとに三者が同期するための時刻情報や撮影対象エリアを特定するエリア識別情報を付してＡＶ記憶部に記憶する制御部とを有する。

また、ダイジェスト作成装置は、移動撮影ユニットのＡＶ記憶部に記憶された映像データを画像解析および／または音声データを音声解析するデータ解析部と、当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部と、映像データに付されたエリア識別情報に基づいて画像解析や前記ハイライトシーンの抽出の対象とする映像データを前記３６０度カメラからの映像データと電動式ズームレンズ付きカメラからの映像データとのいずれにするかを選択する制御部とを有する。

これによって、３６０度カメラではボールなどを視認できるほどに映像を記録できない場合にも、電動式ズームレンズ付きカメラにより明瞭に視認可能なレベルの映像を記録できるので、ゴルフカートと離れた位置でのプレーでもボールなどの動きをダイジェストで確認することが可能になる。

また、本発明に係る移動撮影ユニットの制御部は、ＧＰＳ受信機の検出した位置情報が地図情報においてグリーン横である場合、当該グリーンを電動式ズームレンズ付きカメラの撮影対象エリアに決定する。

これによって、グリーン上のボールの転がりの様子をダイジェストの映像で確認することが可能になる。

また、本発明に係る移動撮影ユニットの制御部は、さらにＧＰＳ受信機の検出した位置情報が地図情報においてグリーン横でない場合、当該位置情報の示す位置からショットしたボールの次の落下エリアとして地図情報にあらかじめ定めたエリアを撮影対象エリアに決定する。

これによって、グリーン横以外でのプレーでは、ショット後のボールの落下予測エリアを電動式ズームレンズ付きカメラで撮影するので、ショット後のボールの行方をダイジェストの映像で確認することが可能になる。

また、本発明に係るダイジェスト作成装置の制御部は、映像データに付されているエリア識別情報がグリーンであることを示す場合、画像解析やハイライトシーンの抽出の対象とする映像データとして電動式ズームレンズ付きカメラからの映像データを選択する。

これによって、グリーン上のプレーは電動式ズームレンズ付きカメラで撮影した映像となるので、グリーン上のボールの転がりの様子をダイジェストの映像で確認することが可能になる。

また、本発明に係るダイジェスト作成装置の制御部はハイライトシーンの映像データに付されたエリア識別情報がグリーンでない場合、当該ハイライトシーンのショット後の映像データを、同時刻の電動式ズームレンズ付きカメラからの映像データに置換する。

これによって、ショット後の映像には次の落下予測エリアの映像が付くので、打球の方向やおよその飛距離などをダイジェストの映像で確認することが可能になる。

また、本発明に係るダイジェスト作成システムは、ＧＰＳ受信機を備えて所定時間の間隔で位置情報を記録することによりプレーヤーの移動軌跡情報を作成する携帯端末をさらに有する。また、移動撮影ユニットの３６０度カメラは方位センサを備えて出力する映像データに方位情報を付し、制御部は映像データにゴルフカートの位置情報を付してＡＶ記憶部に記憶するものである。そして、ダイジェスト作成装置はゴルフコースの３次元地図情報を記憶した地図情報記憶部をさらに有し、ダイジェスト作成部がハイライトシーンの発生時刻における、３６０度カメラからの映像データに付されている方位情報とゴルフカートの位置情報と携帯端末から取得した移動軌跡情報とからプレーヤーの位置を特定し、３次元地図情報から当該位置における地形情報を算出して当該ハイライトシーンの映像データに合成する。

これによって、ボールを打った地点のアンジュレーションをダイジェストの映像で確認することが可能になる。

また、本発明に係る移動撮影ユニットは、ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、ゴルフカートに設置した電動雲台上に取り付けた電動式ズームレンズ付きカメラと、ゴルフカートに設置した集音マイクとＧＰＳ受信機と、前記電動式ズームレンズ付きカメラのレンズ方向を検出する方向検出器と、ゴルフコースの地図情報を記憶したコース情報記憶部と、３６０度カメラからの映像データと電動式ズームレンズ付きカメラからの映像データと集音マイクからの音声データとを記憶するＡＶ記憶部と、ＧＰＳ受信機の検出した位置情報と地図情報とから電動式ズームレンズ付きカメラの撮影対象エリアを決定し、方向検出器の検出するレンズ方向が当該撮影対象エリアになるように電動雲台を駆動して、電動式ズームレンズ付きカメラでズーム撮影した映像データと、３６０度カメラからの映像データと、音声データとに三者が同期するための時刻情報や撮影対象エリアを特定するエリア識別情報を付してＡＶ記憶部に記憶する制御部とを有する。

これによって、３６０度カメラではボールなどを視認できるほどに映像を記録できない場合にも、電動式ズームカメラにより明瞭に視認可能なレベルの映像を記録できると共に、ゴルフコースのどのエリアの映像であるかを知ることができる。

また、本発明に係るダイジェスト作成装置は、ゴルフカートに設置した３６０度カメラからの映像データと電動雲台上に取り付けた電動式ズームレンズ付きカメラからの映像データとゴルフカートに設置した集音マイクからの音声データに、三者が同期するための時刻情報や撮影対象としたエリアを識別するエリア識別情報を付したものを記憶するダイジェスト作成用ＡＶ記憶部と、そのダイジェスト作成用ＡＶ記憶部に記憶した映像データを画像解析および／または音声データを音声解析するデータ解析部と、当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部と、映像データに付されたエリア識別情報に基づいて画像解析やハイライトシーンの抽出の対象とする映像データを３６０度カメラからの映像データと電動式ズームレンズ付きカメラからの映像データとのいずれにするかを選択する制御部とを有する。

これによって、ダイジェスト作成装置は、撮影対象エリアに応じて、３６０度カメラではボールなどを視認できるレベルで記録できていない映像を使用せず、電動式ズームカメラにより明瞭に視認可能なレベルの記録できている映像を使用してダイジェストを作成できるので、打球の行方やボールの転がりの様子をダイジェストで確認することが可能になる。

本発明により、ゴルフコース上のハイライトシーンでの打球の行方やグリーン上のボールの転がりなどの様子を明瞭に視認できると共に、ショット地点のアンジュレーションが分かるダイジェストを、プレーヤーが撮影を意識することなしに自動作成することが可能となる。

本発明の実施の形態１におけるゴルフダイジェスト作成システムの概要図 本発明の実施の形態１のゴルフダイジェスト作成システムの構成を説明する図 本発明の実施の形態１における移動撮影ユニットのハードウェア構成図 本発明の実施の形態１における携帯端末のハードウェア構成図 本発明の実施の形態１におけるダイジェスト作成装置のハードウェア構成図 本発明の実施の形態１における電動式ズームレンズを装着した電動雲台の外観図 （ａ）本発明の実施の形態１における映像データの１フレーム画像の例を示す図、（ｂ）本発明の実施の形態１における映像データから特定人物を中心に切り出したフレーム画像の例を示す図、（ｃ）本発明の実施の形態１におけるグリーン上の映像データから特定人物と旗竿を中心に切り出したフレーム画像の例を示す図 本発明の実施の形態１におけるゴルフコースの一つのホールを示した等高線図 本発明の実施の形態１におけるハイライトシーンの発生時に特定すべき人物がいた位置を正確に求める方法を説明する図 （ａ）本発明の実施の形態１におけるダイジェスト映像に合成するゴルフコースのホールの図、（ｂ）ダイジェスト映像に合成するアンジュレーションを示すソリッドモデルの図 本発明の実施の形態１における移動撮影ユニットの動作フロー図 本発明の実施の形態１における携帯端末の動作フロー図 本発明の実施の形態１におけるダイジェスト作成装置の動作フロー図 本発明の実施の形態１におけるダイジェスト作成装置のダイジェスト作成処理を説明する動作フロー図 本発明の実施の形態１におけるハイライトシーンの決定処理を説明する動作フロー図 本発明の実施の形態１における動作種別と音声種別に評価値を付与する処理を説明する図 本発明の実施の形態１におけるダイジェスト配信サーバの動作フロー図 本発明の実施の形態１におけるゴルフ場端末の動作フロー図 本発明の実施の形態２におけるゴルフダイジェスト作成システムの構成を説明する図 本発明の実施の形態２における移動撮影ユニットのハードウェア構成を示す図 本発明の実施の形態２における固定撮影ユニットのハードウェア構成を示す図 本発明の実施の形態２におけるゴルフ場端末のハードウェア構成を示す図 本発明の実施の形態２における移動撮影ユニットの動作フロー図 本発明の実施の形態２における移動撮影ユニットの行うカート移動中処理のフロー図 本発明の実施の形態２における固定撮影ユニットの動作フロー図 本発明の実施の形態２におけるゴルフ場端末の動作フロー図 本発明の実施の形態２におけるダイジェスト作成装置の行うダイジェスト作成処理のフロー図 従来のゴルフダイジェスト作成システムを構成する移動撮影ユニットのハードウェア構成を示す図 従来のゴルフプレーライブラリーの表示画面を示す図 従来のゴルフプレーライブラリーの表示画面を示す図

以下本発明の実施の形態について、図面を参照しながら説明する。
（実施の形態１）

図１は、本発明の実施の形態１におけるゴルフダイジェスト作成システムの概要を示す図である。

ゴルフは、プレーヤーが決められた順番に１８ホールのゴルフコースをすべてまわり、ティーイングエリア１１１からグリーン１１３上のカップまでのゴルフボールを打ったトータル打数を競うスポーツである。

図１において、ゴルフコース１１は１８ホールの一つを示しており、プレーヤー１３が乗車してコース上を移動するゴルフカート１２には、全方位の撮影を行える３６０度カメラ１０１と、電動雲台と、その電動雲台上に取り付けられた電動式ズームレンズ付きカメラ１０５と、無指向性の集音マイク１０２と、ＧＰＳ受信機１０３と、無線通信機能を有する移動記録装置１０４とが搭載されている。特に、３６０度カメラ１０１はゴルフカート１２のルーフ上方の３６０度視界が開けた位置に設置されている。

また、この３６０度カメラ１０１と電動式ズームレンズ付きカメラ１０５の解像度は、４Ｋ（３，８４０画素×２，１６０画素）または８Ｋ（７，６８０画素×４，３２０画素）である。なお、３６０度カメラと電動式ズームレンズ付きカメラ１０５からの映像データと集音マイク１０２からの音声データは移動記録装置１０４へ有線または無線で送られる。また、この３６０度カメラ１０１は複数台のカメラを用いて３６０度をカバーするように構成し各映像を合成するようにしたものでもよい。そして、電動式ズームレンズ付きカメラ１０５は光学レンズの焦点距離や画角を可変できる電動式光学ズームレンズを装着しており、電動雲台はチルトやパンやロール駆動が可能である。

これらゴルフカートに搭載されたものが移動撮影ユニットであり、この移動撮影ユニットはプレー中のゴルフカート周辺３６０度の映像と音声、そしてボールの次の落下地点と予測されるエリアあるいはグリーンのズームアップした映像を自動的に記録する。

プレーヤー１３が腰などに付ける携帯端末１０６は、ＧＰＳ受信機を備え、プレーヤーの移動軌跡を時刻情報とともに記録する。

クラブハウス１４にはゴルフ場端末１０７が設置されており、画面を操作して所望のダイジェスト動画の作成を指示したり、ＤＶＤなどへダイジェスト動画の書込みなどを行う。

インターネット１５上にはダイジェスト作成装置１０９とダイジェスト配信サーバ１１０が存在しており、ゴルフ場に存するゴルフ場端末１０７とは有線でデータ通信し、移動撮影ユニットとは無線基地局１０８を介してデータ通信する。このダイジェスト作成装置１０９はゴルフカートに搭載した移動記録装置１０４に記録された動画データ（以下、「映像データ」と「音声データ」との両方を指す。）を受信し、映像データと音声データを解析するなどしてプレーのハイライトシーンを集めたダイジェストを作成する。

図２は本実施の形態のゴルフダイジェスト作成システムの構成を説明する図である。

図２において、移動撮影ユニット２１は携帯端末２２との間で双方向の無線通信を行うが、さらにインターネット２７上に存在するダイジェスト作成装置２３との間で第５世代移動通信（５Ｇ）を行う。この第５世代移動通信（５Ｇ）システムは、ＵＥ（ユーザー装置）と５Ｇアクセス・ネットワーク（５Ｇ－ＡＮ）２９と５Ｇコア・ネットワーク（５ＧＣＮ）２８とで構成される。５Ｇアクセス・ネットワーク（５Ｇ－ＡＮ）２９は、ユーザ装置と直接電波をやり取りする第五世代の無線ネットワーク部分であって、５Ｇコア・ネットワーク２８は、全体として接続処理やユーザ・データのルーティング処理をする第５世代の無線ネットワーク部分である。この５Ｇアクセス・ネットワーク（５Ｇ－ＡＮ）２９と５Ｇコア・ネットワーク（５ＧＣＮ）２８については、たとえば文献「５Ｇ教科書（ＬＴＥ／ＩｏＴから５Ｇまで）」（発行所：株式会社インプレス）の２１８頁から２４１頁に記載されている通りである。

本実施の形態における移動撮影ユニット２１は、上記のＵＥに該当し、第５世代無線基地局との間で新無線インタフェース（以下、ＮＲと記す。）で双方向通信が可能な５Ｇ無線送受信部を備えている。上記のＮＲについては、前記の文献「５Ｇ教科書（ＬＴＥ／ＩｏＴから５Ｇまで）」の１０８頁から１１７頁に記載されている通りである。なお、このＮＲは下りリンク最大２０Ｇｂｐｓ、上りリンク最大１０Ｇｂｐｓのデータレートを実現する通信能力を有するものである。

ゴルフ場端末２４はＤＶＤ書込み機能とネットワークｉ／ｆを備える一般的なパーソナルコンピュータであって、ダイジェスト作成装置２３との間で有線での双方向通信を行うものである。

ダイジェスト配信サーバ２６は大規模な容量の記憶装置とネットワークｉ／ｆを備えるコンピュータであって、ダイジェスト作成装置２３からダイジェストデータを受信し、個別のＩＤあるいはＵＲＬを付与して記憶・蓄積する。また、外部からＩＤあるいはＵＲＬで指定されたダイジェストデータの送信要求を受付け、要求元の端末（スマートフォンやパーソナルコンピュータ）へファイルを転送したり、ストリーミング配信するものである。

図３はゴルフダイジェスト作成システムを構成する移動撮影ユニットのハードウェア構成を示す図である。

図３において、移動撮影ユニット２１は、第１撮像部２１１と第２撮像部２１２と集音部２１３と第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５とコース情報記憶部２１６と５Ｇ無線送受信部２１７と無線送受信部２１８とＧＰＳ受信部２１９と制御部２２０とからなる。

第１撮像部２１１は３６０度カメラを含み、当該３６０度カメラからの映像データを第1ＡＶ記憶部２１４へ送信するが、その際に３６０度カメラの広角レンズによる歪みを補正して出力する。この歪み補正は公知のアルゴリズムを組み込んだＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）によりリアルタイム処理を実現している。

さらに、３６０度カメラは方位センサを備え、撮影した映像データに方位情報を付して出力する。図７（ａ）はこの映像データの１フレーム画像の例を示している。図７（ａ）において、破線と共に付されたＮ、Ｅ、Ｓ、Ｗの文字はそれぞれ北、東、南、西の方位を示している。

第２撮像部２１２は、電動雲台とその上に取り付けられた電動式ズームレンズ付きカメラを含む。図６はこの電動雲台６０とそれに取り付けられた電動式ズームレンズ付きカメラの電動式ズームレンズ６１とを示す図である。この図において、電動式ズームレンズ６１は電気信号ケーブル６１ｂで図示されていないビデオカメラ本体とつながっており、電動雲台６０は電気ケーブル６０ａで図示されていない移動記録装置に接続している。

図６において、電動雲台６０はパン回転部６０１とチルト回転部６０２とロール回転部６０３とからなり、それぞれパン駆動用モータとチルト駆動用モータとロール駆動用モータを内蔵している。電動式ズームレンズ６１はロール回転部６０３の回転シリンダ６０３ａに固定されている。そして、パン回転部６０１には方位センサ６２が取り付けられ、チルト回転部６０２には仰角を検出する傾斜センサ６３が取り付けられ、ロール回転部６０３にはロール角度を検出する傾斜センサ６４が取り付けられている。なお、ロール回転部６０３は傾斜センサの検出した角度を打ち消す方向に回転シリンダ６０３ａを回転させて常にズームレンズ６１の水平を保っている。

また、電動式ズームレンズ６１はレンズ移動用モータを備え、ビデオカメラ本体からの電気信号によりズームレンズ６１ａを駆動して焦点距離や画角を変更することができる。

これらの構成により、第２撮像部２１２は光学ズームレンズをローリング補正して常に水平を保った状態で、方位センサと傾斜センサの検出値を基に指示された方向へレンズを向けると共に、指定された倍率でズーミングした映像データを第２ＡＶ記憶部２１５へ送信する。

集音部２１３は集音マイク１０２を含み、当該集音マイク１０２からの音声データを第1ＡＶ記憶部２１４および第２ＡＶ記憶部２１５へ送信する。

ＧＰＳ受信部２１９はＧＰＳ受信機を含み、衛星からの信号を受信して現在の位置情報と時刻情報とを出力する。

第１ＡＶ記憶部２１４は第１撮像部２１１からの映像データと集音部２１３からの音声データを記憶するものである。そして第２ＡＶ記憶部２１５は第２撮像部２１２からの映像データと集音部２１３からの音声データを記憶するものである。これら第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５は、共にハードディスクや半導体メモリカードを記録媒体とする不揮発性記憶装置であるが、耐衝撃性に優れる半導体メモリカードが好ましい。

コース情報記憶部２１６も不揮発性記憶装置であり、ゴルフ場の全コースの３次元地図情報が記憶されている。図８はゴルフコースの一つのホールを示した等高線図である。図８において、等高線は一部を省略して表記しているが、本実施の形態における３次元地図情報は、１センチメートルの高度間隔で作成された等高線図を５センチメートル四方でメッシュ状に細分化した各点の緯度と経度と高度とからなるものであって、ホールごとに記憶している。また、図８で示すように、各ホールは基準打数に応じてエリアを２から４に分けている。すなわち、基準打数が３のホールではエリア１とエリア２に分け、基準打数４のホールでは、エリア１からエリア３に分け、基準打数５のホールではエリア１からエリア４に分け、ホールの外郭と各エリアの境界線上の点をエリア情報として記憶している。

５Ｇ無線送受信部２１７は、前述した第５世代無線基地局と高速無線通信を行うものである。

無線送受信部２１８は中距離の無線通信（ＩＥＥＥ８０２．１１）を行うもので、数１００メートル間の通信が可能である。

制御部２２０は、移動撮影ユニット２１全体を制御するものであり、第１撮像部２１１からの映像データや集音部２１３からの音声データを第１ＡＶ記憶部２１４に書き込み、第２撮像部２１２からの映像データや集音部２１３からの音声データを第２ＡＶ記憶部２１５に書き込む。これらの映像データは、２０ｆｐｓから６０ｆｐｓのフレームレートで撮影され、各フレームには撮影開始からの経過時刻（タイムコード）を付して記録する。また、音声データにも上記各フレームに同期した時刻情報（タイムコード）を付して記録する。なお、制御部２２０は、第２撮像部２１２の電動雲台に対してパン方向の回転角度とチルト方向の回転角度を指示すると共に、電動式ズームレンズ付きカメラに対してズーム倍率を指示する。

さらに、制御部２２０はＧＰＳ受信部２１９から取得した位置情報と３次元地図情報とから現在ゴルフカートの停止しているホール番号を算出し、これらの映像データにゴルフカートの位置情報とホール番号と撮影対象としたエリアを識別するエリア識別情報とを記録する。

以上の移動撮影ユニット２１から３６０度カメラ１０１と電動雲台６０と電動式ズームレンズ付きカメラ１０５と集音マイク１０２とＧＰＳ受信機１０３とを除いたものが前述した移動記録装置１０４であり、無線通信機とコンピュータ装置により実現されている。このコンピュータ装置は、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、および無線通信インタフーェースを備えており、それらはバスで接続されている。特に、制御部２２０は、不揮発性記憶部に記憶してある制御用プログラムをメモリに展開して実行することにより機能を実現している。

なお、本発明に係る移動撮影ユニットのＡＶ記憶部は第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５とをさし、方向検出器は方位センサ６２と傾斜センサ６３とをさし、地図情報は３次元地図情報をさす。
次に、携帯端末２２のハードウェア構成を説明する。

図４は本実施形態における携帯端末２２のハードウェア構成を示す図である。

図４において、携帯端末２２は、ＧＰＳ受信部２２１と移動軌跡記録部２２２と無線送受信部２２３と制御部２２４とからなる。

ＧＰＳ受信部２２１はＧＰＳ受信機を含み、衛星からの信号を受信して現在の位置情報と時刻情報とを出力する。

移動軌跡記録部２２２は不揮発性メモリであり、この携帯端末２２を保有するプレーヤーがゴルフプレー中に移動した地点を所定時間ごとに記録した情報（以下、「移動軌跡情報」という。）を記憶している。

無線送受信部２２３は無線通信（ＩＥＥＥ８０２．１１）を行うもので、数１００メートル間の通信が可能である。
制御部２２４は携帯端末２２全体を制御するものである。

以上の携帯端末２２は、ＧＰＳ受信機と無線通信機とコンピュータ装置により実現されている。このコンピュータ装置は、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、および無線通信インターフェースを備えており、それらはバスで接続されている。特に、制御部２２４は、不揮発性記憶部に記憶してある制御用プログラムをメモリに展開して実行することにより機能を実現している。

次に、ダイジェスト作成装置２３のハードウェア構成を説明する。

図５は、本実施の形態におけるダイジェスト作成装置２３のハードウェア構成を示す図である。

図５において、ダイジェスト作成装置２３は、ＡＶＬ記憶部２３１と動画切出し部２３２と動作解析部２３３と音声解析部２３４と合成画像生成部２３５とダイジェスト作成部２３６とダイジェスト記憶部２３７とコース情報記憶部２３８とネットワークｉ／ｆ部２３９と制御部２４０とからなる。

ＡＶＬ記憶部２３１は、不揮発性記憶装置であり、移動撮影ユニット２１から第５世代移動通信システムを経由して受信した、３６０度カメラの撮影した映像データ（以下、「３６０度カメラ映像データ」という。）と電動式ズームレンズ付きカメラの撮影した映像データ（以下、「光学ズームカメラ映像データ」という。）と音声データと携帯端末２２が作成した移動軌跡データを記憶する記憶装置である。なお、移動軌跡データファイルにはプレーヤーあるいは携帯端末の識別情報が付されている。

動画切出し部２３２は、映像データから任意の領域を指定して映像を切り出すものであって、動体検出によって人物を検出し、その人物全員が含まれる周辺領域までを切り出す処理を行ったり、人物を特定して切り出す。なお、特定の人物を切り出す際には、人物追跡処理を行って、当該人物を中心にして切り出す。

さらに、動画切出し部２３２は、ＡＶＬ記憶部２３１から読み出した光学ズームカメラ映像データに付されたエリア識別情報がグリーンを示すものであった場合は、人物ばかりでなく、グリーン上の旗竿とボールを検出し、それらも含めた領域を切り出す処理を行う。

図７（ａ）は３６０度カメラによる映像データのフレームの画像例を示し、本フレームはゴルフカートの周り３６０度の画像である。動画切り出し部２３２は、このフレーム中の人物がすべて含まれるように破線で囲んだ領域を切り出す。

また、図７（ｂ）は人物を特定して切り出した画像例であって、人物が所定のサイズ以上になるように領域を切り出す。このとき、人物の特定はその人物の３６０度カメラから見た方角の情報、たとえば、北を０度とし時計方向をプラス、反時計方向をマイナスと規定し、マイナス１７０度といった方角情報と共に動画切り出し要求が出される。そして、切り出された画像にはこの方角情報が人物を特定する特定情報として付される。

また、図７（ｃ）はグリーン上の人物を特定して切り出した画像例であって、特定された人物と旗竿とを中心にした領域を切り出す。

これら人物等の検出や人物追跡や画像切出し（トリミング）の処理は、ＯｐｅｎＣＶ（Ｏｐｅｎ Ｓｏｕｒｃｅ Ｃｏｍｐｕｔｅｒ－Ｖｉｓｉｏｎ－Ｌｉｂｒａｒｙとはインテル社が開発・公開したオープンソースのコンピュータビジョンライブラリーをいう。）で公開されている公知の画像処理プログラムやモーション解析プログラムや物体追跡プログラムやパターン認識プログラムなどを利用したソフトウェア処理を行うことにより行う。

動作解析部２３３は、映像データを画像認識してプレーヤーがスイングする動作であるか、パッティングする動作であるか、あるいは飛び跳ねたり、手を上にあげる動作であるかを解析する。この解析技術としては、例えば、立体高次局所自己相関（Ｃｕｂｉｃ Ｈｉｇｈ ｏｒｄｅｒ Ｌｏｃａｌ Ａｕｔｏ Ｃｏｒｒｅｌａｔｉｏｎ）特徴量を用いて動作を判定する技術が知られている。そして、動作解析部２３３は判定された各動作種別とその判定時刻情報とからなるハイライトシーン候補リストを作成する。

なお、本実施の形態では超高解像度カメラを使用しており、４Ｋカメラの場合、録画した動画の画素が３，８４０画素×２，１６０画素であり、８Ｋカメラの場合、７，６８０画素×４，３２０画素でフレームは録画されている。このため、切り出し後であっても人物の画素数はＨＤ画質の録画の場合の切り出し後のものに比べ４倍、あるいは８倍となるので、高い精度で動作解析することが可能である。さらに、第２撮像部からの映像データは電動式ズームレンズによりグリーンのみが拡大された動画であるため、グリーン上のボールを明瞭に認識することが可能である。

音声解析部２３４は、音声データの周波数分析を行いスペクトログラムを求め、予め設定してあるモデルのスペクトログラムとの類否度を求める。さらに、音量の２乗平均値の大きさも加味して、音声情報をショット音、歓声、笑い声、話し声、その他の音声とに分類する。このようにして音声解析部２３４は、判定した音声種別と時刻情報とからなるハイライトシーン候補リストを作成する。

合成画像生成部２３５は、合成する画像を生成し、その画像と映像データとを合成する。合成する画像としては、予め保有するホールごとの平面図の画像にゴルフカート位置やハイライトシーンの発生した位置を印したものや、ある地点の起伏を３次元曲面のソリッドモデルで表現した画像である。このソリッドモデルは公知のソリッドモデリングカーネルを用いて作成する。

図１０（ａ）は、そのダイジェスト映像に合成するゴルフコースのホールの平面図の画像例であり、図１０（ｂ）はダイジェスト映像に合成するアンジュレーションを示すソリッドモデルの画像例である。

ダイジェスト作成部２３６は、時刻情報リストに基づいてＡＶＬ記憶部２３１内に記憶されている映像データおよび音声データの中からハイライトシーンを抽出し、それらを結合してダイジェストを作成する。また、動画切出し部２３２が切り出したフレームを公知のアップコンバート技術によりフルＨＤ画質に補正する。

ダイジェスト記憶部２３７は、ダイジェスト作成部２３６が作成したダイジェストを記憶するものである。

コース情報記憶部２３８は不揮発性記憶装置であり、ゴルフ場の全コースの３次元地図情報を記憶している。この３次元地図情報は、ゴルフコースの各ホールを１センチメートルの高度間隔で作成した等高線図を、５センチメートル四方でメッシュ状に細分化した各点の緯度と経度と高度とからなるものである。

制御部２４０は、ダイジェスト作成装置２３全体を制御するものであって、ネットワークｉ／ｆ２３９を介して得た要求を、ダイジェスト作成装置２３を構成する各処理部に指示して行うものである。

上記したダイジェスト作成装置２３は大容量記憶装置を有するコンピュータ装置であって、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、およびネットワークインタフェースを備えており、それらはバスで接続されている。特に、動画切出し部２３２や動作解析部２３３や音声解析部２３４や合成画像生成部２３５やダイジェスト作成部２３６や制御部２４０は、不揮発性記憶部に記憶してある各種プログラムをメモリに展開して実行することにより機能を実現している。

なお、本発明に係るダイジェスト作成装置のダイジェスト作成用ＡＶ記憶部は本実施の形態のＡＶＬ記憶部２３１の一部をさし、地図情報記憶部は本実施の形態のコース情報記憶部２３８をさし、データ解析部は本実施の形態の動画切出し部２３２と動作解析部２３３と音声解析部２３４とをさし、ダイジェスト作成部は本実施の形態の合成画像生成部２３５とダイジェスト作成部２３６とをさす。

その他にゴルフ場端末２４とダイジェスト配信サーバ２６を本実施の形態のゴルフダイジェスト作成システムは有するが、ゴルフ場端末２４はＤＶＤ書込み機能とネットワークｉ／ｆを備える一般的なパーソナルコンピュータであり、ダイジェスト提供サービスプログラムが内蔵記憶装置に記憶されている。このアプリケーションプログラムを内蔵記憶装置からメモリに展開してＣＰＵが実行することによりダイジェスト提供サービスが実施される。

ダイジェスト配信サーバ２６はＨＴＴＰ Ｌｉｖｅ Ｓｔｒｅａｍｉｎｇ（以下ＨＬＳと記載する。）で要求されたダイジェストのストリーミング配信を行う公知のストリーミングサーバやＨＴＴＰプロトコルで配信を行う公知のウェブサーバ、あるいはＦＴＰプロトコルでファイル転送を行う公知のファイルサーバである。

以上のように構成されたゴルフダイジェスト作成システムの装置毎の動作、作用について、以下に説明する。
図１１は、移動撮影ユニットの動作フロー図である。

図１１において、まず、移動撮影ユニット２１の制御部２２０は、現在位置がスタートホールのティーイングエリアの横であるか否か判定し（Ｓ６０１）、スタートホールのティーイングエリアの横であると判定した場合、制御部２２０は、位置情報が変化しなくなるまで待機する。

そして、スタートホールのティーイングエリアの横で停止したことを検出すると、制御部２２０は、撮影を開始し動画データの録画・録音を始める（Ｓ６０２）。このとき、記録する動画データを識別するためのゴルフカート番号と動画の録画・録音を開始した時刻も記録する。これ以降、移動撮影ユニット２１の制御部２２０は、録画開始からの経過時間（タイムコード）とゴルフカートの停止しているホール番号と位置情報（緯度・経度情報）とエリア識別情報とを映像データに付加して記録する。

次に、制御部２２０は、位置情報が変化しているか否かを判定し（Ｓ６０３）、変化するまで待機する。

位置情報が変化している場合は、ゴルフカートが移動中であるので動画の録画・録音を停止し、第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５に記録中の動画データファイルをクローズする。そして、５Ｇ無線送受信部２１７からインターネット上のダイジェスト作成装置２３へ当該動画データファイルをＦＴＰプロトコルで送信する（Ｓ６０４）。この動画データファイルには、ゴルフ場番号、プレー年月日、カート番号、３６０度カメラの撮影か電動式ズームレンズ付きカメラの撮影かを示す識別情報、そして、送信するたびにインクリメントされる連番からなる動画ＩＤがファイル名として付けられる。

その後、位置情報が変化していないと判定した場合、制御部２２０は現在位置がクラブハウスであるか否かチェックする（Ｓ６０５）。現在位置がクラブハウスではない場合、制御部２２０は、第１撮像部２１１による撮影と録画・録音を開始する（Ｓ６０６）。

次に、制御部２２０は、現在位置がグリーンの横であるかをチェックし（Ｓ６０７）、グリーンの横でない場合は、第２撮像部２１２を制御して次のボールの落下エリアと想定したエリアを撮影し、録画・録音する（Ｓ６０８）。

すなわち、制御部２２０は、図８において、現在位置がエリア１にあるときは次のエリア２の全体が画面に収まるようにコース情報記憶部２１６に記憶している３次元地図情報から画角と方角を決定する。そして、第２撮像部２１２の電動式ズームレンズ付きカメラのズーム倍率をレンズ移動用モータを駆動して変更すると共に、電動雲台の方位センサ６２と傾斜センサ６３の検出値が決定された方位と仰角となるようにパン駆動用モータとチルト駆動用モータを制御する。ここで、現在位置から次のエリアの全体が収まるとは、たとえば、ゴルフカートがティーイングエリア横のポイントＧ１（８０１）にあるときに画角をエリア２の全体を撮影できる最大画角８０４とすることであり、現在位置がポイントＧ３（８０５）にあるときに画角をエリア３の全体が撮影できる最大画角８０８とすることをいう。

一方、移動撮影ユニット２１の制御部２２０は、現在位置がグリーンの横である場合、第２撮像部２１２を制御して現在位置からグリーン全体を撮影し録画・録音する（Ｓ６０９）。

すなわち、制御部２２０は、図８において、現在位置がポイントＧ４（８０９）であるとき、グリーン８１１の全体が画面に収まるように第２撮像部２１２の電動式ズームレンズ付きカメラの画角を最大画角８１０に決定し、方角も同時に決定する。そして、第２撮像部２１２の電動式ズームレンズ付きカメラのズーム倍率をレンズ移動用モータを駆動して変更すると共に、電動雲台のパン駆動用モータとチルト駆動用モータを制御して撮影を開始する。

ステップＳ６０５において、現在位置がクラブハウスであると判定した場合、移動撮影ユニット２１の制御部２２０は、すでに１８ホールすべてのプレーを記録済みか否か判定し（ステップＳ６１０）、１８ホールすべての記録をしていない場合は、ステップＳ６０６の処理へ移行する。

他方、１８ホールすべてを記録していた場合、移動撮影ユニット２１の制御部２２０はラウンド終了と判断し、各携帯端末２２へ移動軌跡データの送信を要求する。その後、各携帯端末２２から移動軌跡データファイルを無線送受信部２１８を介して受信すると、それらの移動軌跡データファイルを５Ｇ無線送受信部２１７からインターネット上のダイジェスト作成装置２３へＦＴＰプロトコルで転送する（Ｓ６１１）。なお、移動軌跡データファイルにはプレーヤーあるいは携帯端末の識別情報が付けられている。

さらに、移動撮影ユニット２１の制御部２２０は、ダイジェスト作成装置２３へ動画データの送信が完了していた場合は、ダイジェスト作成装置２３へ最終ファイル送信完了通知を行い、完了していない場合は、未送信分の動画データを送信した後、最終ファイル送信完了通知を行う。

以上が移動撮影ユニット２１の動作フローである。この様に、動画データの収録開始と終了が移動撮影ユニット２１が現在位置を検出して自動で行われるので、収録忘れや漏れを防ぐことができる。
次に、携帯端末２２の動作・作用を図面を用いて説明する。
図１２は携帯端末２２の動作フロー図である。

図１２において、携帯端末２２の制御部２２４はＧＰＳ受信部２２１から位置情報を取得し（Ｓ７０１）、前回の位置情報の記録から所定時間経過したか否かを判定する（Ｓ７０２）。なお、本実施の形態では所定時間は１秒としている。

所定時間経過していた場合は、時刻情報と共に取得した位置情報を移動軌跡記録部２２２へ追加書き込みを行うが（Ｓ７０３）、所定時間経過していない場合は位置情報の書き込みを行わない。

次に、制御部２２４は、移動軌跡データの送信要求を受信したか否か判定する（Ｓ７０４）。そして、送信要求を受信していた場合は、要求元へ移動軌跡記録部２２２に書き込まれている移動軌跡データにプレーヤーあるいは携帯端末の識別情報を付して無線送受信部２２３を介して送信した（Ｓ７０５）後、ステップＳ７０１へ戻る。

一方、送信要求を受信していなかった場合は、そのままステップＳ７０１へ戻る。
以上が携帯端末２２の動作・作用である。

次に、ダイジェスト作成装置２３の動作・作用を図面を用いて説明する。

図１３は、ダイジェスト作成装置２３の動作フロー図である。

図１３において、まず、ダイジェスト作成装置２３の制御部２４０は、移動撮影ユニット２１から動画データの受信要求があるか否かを判定し（Ｓ８０１）、受信要求がある場合は送信を許可し、動画ＩＤの付された映像データファイルと音声データファイルをＦＴＰプロトコルで受信する（Ｓ８０２）。そして、それぞれＡＶＬ記憶部２３１へ書き込み、それまでに受信していた同一動画ＩＤのそれぞれのファイルと結合する（Ｓ８０３）。なお、この映像データファイル等の受信とそれぞれのファイル結合は移動撮影ユニット２１からの最終ファイル送信完了通知を受けるまで行う。

次に、ダイジェスト作成装置２３の制御部２４０は、ゴルフ場端末２４からダイジェスト作成指示を受信すると（Ｓ８０４）、ダイジェスト作成処理を行う（Ｓ８０５）。

図１４はダイジェスト作成処理を説明する動作フローである。

図１４において、ダイジェスト作成装置２３の制御部２４０は、ダイジェスト作成の指示に際して付されていたゴルフ場番号、プレー年月日、ゴルフカート番号に基づいて、動画ＩＤを参照して当該ゴルフカート番号の付された３６０度カメラ映像データファイルをＡＶＬ記憶部２３１から読み出す（Ｓ９０１）。そして、制御部２４０はこの映像データの内、エリア識別情報がグリーンでない映像データについて動画切り出し部２３２に動画切り出し処理を要求する。また、制御部２４０は、動画ＩＤを参照して当該ゴルフカート番号の付された光学ズームカメラ映像データファイルを読み出し、エリア識別情報がグリーンである映像データについても、動画切り出し処理を要求する。

そして、動画切り出し部２３２は、これらの要求を受けて、人物検知処理を行い人物と認識した部分を含む領域を切り出したり、エリア識別情報がグリーンである映像データからは人物として認識した部分と旗竿として認識した部分を含む領域を切り出す（Ｓ９０２）。

次に、ダイジェスト作成装置２３の制御部２４０は、動作解析部２３３に切り出された動画について動作解析処理を要求する。動作解析部２３３はこれを受けて動作解析処理を行い（Ｓ９０３）、動作種別とその発生時刻情報とのハイライトシーン候補リスト１を作成する（Ｓ９０４）。なお、高解像度の映像データであっても動作解析は一部を切り出した映像データを用いて行うので、解析時間を短くおさえることができる。

次に、制御部２４０が、音声解析部２３４にＡＶＬ記憶部２３１から読み出した音声データについて音声解析処理を要求する。音声解析処理部２３４は音声解析処理を行い（Ｓ９０５）、音声種別とその判定時刻情報とのハイライトシーン候補リスト２を作成する（Ｓ９０６）。

次に、ダイジェスト作成装置２３の制御部２４０は、動作解析部２３３と音声解析部２３４が作成したリストからハイライトシーンとして抽出すべきシーンを決定する（Ｓ９０７）。

図１５は、ハイライトシーンの決定処理を説明する動作フロー図である。

図１５において、まず、ハイライトシーン候補リスト１とハイライトシーン候補リスト２とを時系列順に統合した候補リストを作成し（Ｓ１００１）、各動作種別と音声種別に評価値を付与する（Ｓ１００２）。

図１６は動作種別と音声種別に評価値を付与する処理を説明する図である。

評価値の付与基準としては、たとえば、動作種別がスイングやパッティングである場合は評価値６、飛び跳ね動作や手をあげる動作の場合には評価値４を付与する。また、音声種別がショット音である場合には評価値６、歓声である場合には評価値４、笑い声である場合には評価値３とする。特に、音声が話し声と判定された際は、公知の音声認識処理により認識した音声が「ナイスショット」や「グッドショット」である場合は、ハイライトシーンの有力候補であるので評価値６とし、その他の音声種別の場合には評価値０とする。

制御部２４０は、まず、図１６（ａ）に示すように各動作種別と音声種別にこれらの付与基準に従い評価値を付与する。

次に、ゴルフカートの位置との関係で評価値を加算する。たとえば、スイング動作とショット音がティーグラウンドにいるときのものである場合には、それぞれ評価値４を加点する。また、図１６（ｂ）に示すように、グリーン上にいる場合のパッティング動作には評価点４を加点する。これにより、ティーショットとカップインするパッティングの動作をハイライトシーンから漏れることを防止できる。

また、この評価値付与の段階で、動作種別の判定対象とされた映像中の人物を後の再動画切り出し処理において特定できるように当該人物の映像中の特定情報、本実施の形態ではゴルフカートからの方角情報を記録する。

次に、制御部２４０は、図１６に示すように一つの動作種別や音声種別の前後の所定時間を１区間として設定し、区間毎の評価値の合計を区間評価値として求める（Ｓ１００４）。たとえば、スイングやパッティングの動作種別は前後各５秒を１区間とし、歓声や飛び跳ね動作や手の上げ動作は前５秒、後１秒を１区間とする。また、区間がオーバーラップする場合は、区間を延長し、一つの区間として扱う。たとえば、図１６（ａ）は、動作種別スイングから動作種別飛び跳ねまでを１区間とする。また、図１６（ｂ）は、動作種別パッティングの前５秒から動作種別手の上げの後１秒までを１区間とする。

これにより、１ブロック内に動作解析と音声解析の両方でイベントを検出している場合はブロック評価値が高くなり、ハイライトシーンとして抽出する確率が高くなるので、ハイライトシーン選定の妥当性が高まる。

次に、制御部２４０は、区間評価値が所定の点数以上のものをハイライトシーンとして選出区間を決定する（Ｓ１００５）。
以上が、ハイライトシーンの決定処理（Ｓ９０７）である。

次に、ダイジェスト作成装置２３の制御部２４０は、ＡＶＬ記憶部２３１に記憶されている、動画切り出し処理をする前の動画データから、選出された区間の動画データを抽出し（Ｓ９０８）、動画切出し部２３２に再度動画切り出し処理を要求する。動画切り出し部２３４は、この要求を受けて、ハイライトシーンとして選出された区間の映像データから切り出しを行うが、このとき動画切出し部２３２は、選出された区間に特定すべき人物の特定情報、本実施の形態ではゴルフカートからの方角情報であるが、この特定情報が記録されている場合は図７（ｂ）で示すようにこの特定した人物を中心とした切り出し処理や図７（ｃ）で示すように特定した人物と旗竿とを中心とした切り出し処理を行う。また、選出された区間の時間内に当該人物が移動している場合は、動画切出し部２３２は当該人物を追尾してフレームから外れることがないように切り出し処理を行う（Ｓ９０９）。

次に、制御部２４０は、切り出した動画データ中にショット音がある場合、そのショット音の発生時刻、あるいは発生から１秒経過した後に所定時間分、光学ズームカメラ映像データから同時刻の動画データを抽出し、３６０度カメラ映像データと置換する。あるいは、ショット音の発生後、同一区間内に動作を検出していた場合は、その動作までの時間分の光学ズームカメラ映像データを３６０度カメラ映像データと置換する（Ｓ９１０）。

これにより、ハイライトシーンであるショット後の打球の行方をダイジェスト映像で視認することが可能になる。

次に、ダイジェスト作成装置２３の制御部２４０は、合成画像生成部２３５に切り出された動画に合成する画像を生成し、それらを合成した映像データの作成を要求する（Ｓ９１１）。以下に合成画像生成部２３５の行う処理を詳細に説明する。

まず、合成画像生成部２３５は、ハイライトシーンの映像データに特定すべき人物の特定情報（本実施の形態では、ゴルフカートからの方角情報をさす。）が付されているか否かを判定し、特定情報が付されている場合は、ハイライトシーンの発生時の時刻情報とゴルフカートの位置情報と方角情報と移動軌跡データとから特定すべき人物の位置情報を求め、平面図画像に印しを付けて映像データと合成する。

図１０（ａ）は、ダイジェスト映像に合成するゴルフコースのホールの平面図であり、印１００１がハイライトシーンの発生した位置を示し、方位マーク１００２が方位を示すものである。

ここで、図９を用いてハイライトシーンの発生時に特定すべき人物がいた位置を正確に求める方法を説明する。

図９において、Ａ１からＡ４はプレーヤーＡのプレーした位置を示すものであり、同様にＢ１からＢ３はプレーヤーＢのプレーした位置を示し、Ｃ１からＣ３はプレーヤーＣのプレーした位置を示し、Ｄ１からＤ４はプレーヤーＤのプレーした位置を示している。また、Ｇ１からＧ４はゴルフカートの停止した位置を示している。

そして、Ｇ１－Ａ１－Ｇ１－Ｇ２－Ａ２－Ｇ２－Ｇ３－Ｇ４－Ａ３－Ａ４を繋いだ線はプレーヤーＡの移動軌跡を示している。同様に、Ｇ１－Ｂ１－Ｇ１－Ｇ２－Ｇ３－Ｂ２－Ｇ３－Ｇ４－Ｂ３を繋いだ線はプレーヤーＢの移動軌跡を示し、Ｇ１－Ｃ１－Ｇ１－Ｇ２－Ｇ３－Ｃ２－Ｇ３－Ｇ４－Ｃ３を繋いだ線はプレーヤーＣの移動軌跡を示し、Ｇ１－Ｄ１－Ｇ１－Ｇ２－Ｇ３－Ｄ２－Ｇ３－Ｇ４－Ｄ３－Ｄ４を繋いだ線はプレーヤーＤの移動軌跡を示している。

いま、プレーヤーＢとプレーヤーＣのそれぞれの位置Ｂ２と位置Ｃ２でのプレーがハイライトシーンであったとき、ハイライトシーン発生時のゴルフカートからのプレーヤーＢの方角情報９０１（特定情報）とプレーヤーＣの方角情報９０２（特定情報）が映像データに付与されているので、これらの特定情報と、移動軌跡データから求めた当該発生時刻のプレーヤーＢの位置情報Ｂ２とプレーヤーＣの位置情報Ｃ２とゴルフカートの位置情報Ｇ３とから算出する方角とを比較する。そして、最も特定情報に近い方角のプレーヤーの位置情報をハイライトシーンの特定する人物の位置情報であるとみなす。これにより、特定人物の位置情報を正確に決定することができる。

次に、合成画像生成部２３５は、特定した人物の位置情報とコース情報記憶部２３８に記憶してある３次元地図情報とからハイライトシーンの発生した地点を中心に半径１メートルの範囲の緯度、経度、高度のデータを抽出する。そして、これらのデータから方位情報（Ｎ、Ｓ、Ｅ、Ｗ）も付した３次元曲面のソリッドモデルの画像を作成する（Ｓ９１０）。

図１０（ｂ）は、ダイジェスト映像に合成するアンジュレーションを示すソリッドモデルの図であり、ハイライトシーンの発生した位置１００３を中心に半径１メートルの範囲で作成している。図中のＮ、Ｅ、Ｓ、Ｗは方位を示し、数字は中心の高度とそれぞれの位置との高度差をセンチメートル単位で示している。このソリッドモデルの図形が本発明に係るダイジェスト作成装置の生成する地形情報に該当する。

そして、合成画像生成部２３５は、これらソリッドモデルの画像と印の入った地図画像とを映像データに合成する。

これにより、ダイジェスト映像にはハイライトシーンの発生した位置とその場所の起伏形状も表示されるので、プレー後にどのようなアンジュレーションのボールを打ったのかを知ることができる。すなわち、図１０（ａ）においては、ショットした位置１００１からグリーン方向は北西にあるので、図１０（ｂ）から対象プレーヤーは右利きの場合、左足上がりのスタンスで前下がりのボールを打ったことが分かる。

一方、ハイライトシーンの映像データに特定すべき人物の特定情報が付されていない場合は、ゴルフカートの位置情報を基に、前述したホールの平面図画像にゴルフカートの位置の印（たとえば白丸）を付ける。その後、映像データにこの平面図画像を映像データと合成する。

以上が合成画像生成部２３５の行う合成画像生成処理（Ｓ９１１）である。

次に、ダイジェスト作成装置２３の制御部２４０は、ダイジェスト作成部２３６にダイジェストの作成を要求する。ダイジェスト作成部２３６はこれを受けて、地図画像や起伏の分かるソリッドモデルの画像が合成された動画データをアップコンバート技術によりフルＨＤ画質に補正しながら時系列順に結合してダイジェスト記憶部２３７に順次書き込む。

そして、最後に、制御部２４０は、映像データに時刻情報とともに記録されているホール番号を参照して、ティーショットの動画の前に予め用意しているホール番号を示す画像を挿入する（Ｓ９１２）。

以上がダイジェスト作成装置２３の行うダイジェスト作成処理（Ｓ８０５）であり、その後、作成されたダイジェストにダイジェストＩＤを付してダイジェスト配信サーバ２６（ウェブサーバ）に送信する（Ｓ８０６）。このダイジェストＩＤはゴルフ場番号とプレー年月日とカート番号とからなる。

次に、ダイジェスト作成装置２３の制御部２４０は、ダイジェスト配信サーバ２６からダイジェストファイルの格納完了通知とその格納場所のＵＲＬを受信すると（Ｓ８０７）、当該格納場所のＵＲＬとダイジェストＩＤとを関連付けてゴルフ場端末２４へ通知する（Ｓ８０８）。

その後、ダイジェスト作成装置２３の制御部はステップＳ８０１の処理へ戻る。

以上が本実施の形態におけるダイジェスト作成装置２３の動作フローである。

次に、ダイジェスト配信サーバ２６の動作フローについて説明する。

図１７は、ダイジェスト配信サーバ２６の動作フロー図である。

前述の通りダイジェスト配信サーバ２６はインターネット上で自己の管理するダイジェスト（動画ファイル）のファイル転送やストリーミング配信を行うウェブサーバである。

まず、ダイジェスト配信サーバ２６はダイジェスト作成装置２３からの格納要求を受けると（Ｓ１１０１）、ダイジェストＩＤをファイル名とするダイジェストファイルを受信し、記憶装置に格納する（Ｓ１１０２）。そして、ダイジェスト作成装置２３にダイジェストファイルの格納場所のＵＲＬを返信する（Ｓ１１０３）。このときダイジェスト配信サーバ２６は受信したファイルのファイル名であるダイジェストＩＤと格納場所のＵＲＬとを関連付けて管理する。

次に、ダイジェスト配信サーバ２６はプレーヤー等の携帯端末やゴルフ場端末２４からＵＲＬにより指定されたダイジェストファイルの転送要求あるいはストリーミング配信要求を受信すると（Ｓ１１０４）、指定されたダイジェストファイルを記憶装置から読み出し、要求元の端末にＦＴＰプロトコルによるファイル転送あるいはＨＬＳプロトコルによるストリーミング配信を行う（Ｓ１１０５）。

次に、ダイジェスト配信サーバ２６は、プレーヤー等の携帯端末やゴルフ場端末２４からＵＲＬにより指定されたダイジェストファイルの消去指示を受信すると（Ｓ１１０６）、記憶装置から指定されたダイジェストファイルを消去するとともに、送信元のプレーヤー端末やゴルフ場端末２４へダイジェストファイルの消去完了を通知する（Ｓ１１０７）。
以上がダイジェスト配信サーバの動作フローである。

次に、ゴルフ場端末２４の動作について説明する。
図１８は、ゴルフ場端末２４の動作フロー図である。
前述の通りゴルフ場端末２４はインターネット接続可能な一般的なパーソナルコンピュータであるが、ダイジェスト提供サービスプログラムが実行される。すなわち、まず、ディスプレイ上にダイジェスト作成要求とＤＶＤ作成要求とダイジェスト消去要求のメニューを表示する。

そして、ゴルフ場端末２４はキーボードなどからゴルフカート番号が入力された後にダイジェスト作成要求を受け付けると（Ｓ１２０１）、ゴルフ場番号とプレーの年月日とカート番号とを付してダイジェスト作成装置２３へ該当する映像データ等のファイルからダイジェストを作成するように要求する（Ｓ１２０２）。この要求はゴルフ場端末が備えるネットワークｉ／ｆを介してインターネット上のダイジェスト作成装置２３へ送信される。

その後、ゴルフ場端末２４は、ダイジェスト作成装置２３からダイジェストＩＤとそのダイジェストの格納場所であるＵＲＬを受信したかを判定し（Ｓ１２０３）、受信するまでチェックを繰り返す。

その後、ダイジェスト作成装置２３からのダイジェストＩＤとＵＲＬを受信すると、ゴルフ場端末２４はこのＵＲＬとダイジェストＩＤとを関連付けて記憶するとともに、当該ダイジェストＩＤが示すカート番号でプレーしたプレーヤーへメールなどでそのＵＲＬを通知する（Ｓ１２０４）。

このメールを受信したプレーヤーは自己の端末から当該ＵＲＬへアクセスし、ダイジェストの転送要求を行うと、ダイジェスト配信サーバ２６が要求元の端末へダイジェストを転送したり、あるいはストリーミング配信をすることで、プレーヤーは当該ダイジェストを視聴することが可能になる。

また、ゴルフ場端末２４がプレーヤーからＤＶＤ作成の要求を受けると（Ｓ１２０５）、ゴルフ場端末２４はプレー年月日とゴルフ場ＩＤと指定されたカート番号とからダイジェストＩＤを求め、ダイジェスト作成装置２３から受信済みのＵＲＬとダイジェストＩＤとの関連情報からＵＲＬを抽出する。そして、該当ＵＲＬへアクセスし、ダイジェスト配信サーバ２６からダイジェストファイルをダウンロードし（Ｓ１２０６）、ＤＶＤに書き込む（Ｓ１２０７）。このとき、ゴルフ場端末２４は当該ダイジェストのＤＶＤをフルＨＤ（１９２０画素×１０８０画素）画質で作成する。

次に、ゴルフ場端末２４が表示メニューからカート番号とダイジェスト消去指示を受けると（Ｓ１２０８）、ゴルフ場端末２４は同様に該当するＵＲＬを抽出し、ダイジェスト配信サーバ２６へダイジェストファイルの削除要求を送信する（Ｓ１２０９）。

ダイジェスト配信サーバ２６はこれを受けて、指定されたＵＲＬをアドレスとするダイジェストファイルを削除する。

以上のように、本実施の形態においては、ゴルフダイジェスト自動作成システムは、ゴルフカート上部の３６０度視界が開けた位置に設置した超高解像度の３６０度カメラの他に、電動式ズームレンズ付きカメラを備えているので、ゴルフカートから離れた場所でのプレーもズーム撮影することができるので、ダイジェスト映像にグリーン上のボールの転がりやショット後のボールの落下の様子を明瞭に視認可能なレベルで記録することができる。

また、本実施の形態においては、各プレーヤーが移動軌跡情報を記録する携帯端末を所持してラウンドするので、ハイライトシーンの人物の位置を正確に求めることができる。その結果、そのプレーヤーがどのようなアンジュレーションでボールを打ったのかを知ることも可能になる。

また、本実施の形態では、プレーヤーが携帯端末２２や移動撮影ユニット２１に対して一切の入力を行う必要がないので、プレーヤーはビデオ撮影をまったく意識することなしにゴルフを楽しむことができる。

なお、本実施の形態では、移動撮影ユニット２１に第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５を設けて第１撮像部２１１や第２撮像部２１２からの動画データを書き込んだが、これに限らず、動画データを５Ｇ無線送受信部２１７から出力し、ダイジェスト作成装置２３へリアルタイムで送信することも可能である。

この場合には、第１撮像部２１１や第２撮像部２１２からの動画データを映像圧縮方式Ｈ．２６５／ＨＥＶＣなどで圧縮するリアルタイムエンコーダを設けて、エンコードされた動画データを送信することが好ましい。また、リアルタイム送信する場合であっても、移動通信システムでの通信トラブル等に対応するため、第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５によりある程度の動画データを記憶する構成であることが好ましい。

また、本実施の形態では、携帯端末２２が移動軌跡データを移動軌跡記録部２２２にラウンド開始から終了まで記録し、ラウンド終了後に移動撮影ユニット２１へ送信したが、これに限らず、携帯端末２２が移動軌跡データを所定時間、本実施の形態では１秒ごとに移動撮影ユニット２１へ送信し、移動撮影ユニット２１内に移動軌跡記録部を設ける構成にしてもよい。これにより、携帯端末２２は移動軌跡データを記録する必要がなくなり、ＧＰＳ受信機を備えた簡易なハードウェア構成の機器にすることができる。

さらに、携帯端末１０６に集音マイクを備え、音声データを無線通信部２２４を介してリアルタイムで移動撮影ユニット２１へ送信し、移動撮影ユニット２１の制御部２２０が集音部２１３で集音した音声データとは別の音声データとしてイベントの検出を行うことも可能である。

また、本実施の形態では、ハイビジョンのダイジェストを作成することを前提に動画切り出しのサイズを決定したが、これに限らず、ＳＤ画質（７２０画素×４８０画素）でＤＶＤを作成することを前提にして動画切り出しのサイズを決定してもよい。

また、本実施の形態では、ダイジェスト作成装置２３とダイジェスト配信サーバ２６とを別の装置としたが、これに限らず、ダイジェスト配信機能をダイジェスト作成装置に含ませてひとつの装置とすることも可能である。

なお、本実施の形態では、図１６に示したように動作種別と音声種別の両方でハイライトシーン区間の判定を行ったが、これに限らず、動作種別のみ、あるいは音声種別のみを用いてハイライトシーン区間の判定を行うことも可能である。上記のように、動作種別と音声種別の両種別を用いることはハイライトシーン判定の信頼度を増すことができ好ましいが、音声種別のみ用いることは映像データを用いた動作解析処理を行わない分、ダイジェスト作成装置の負荷が軽くなりダイジェスト作成の時間を短縮することが可能になる。

また、本実施の形態では、動画のダイジェストのみを作成したが、これに限らず、さらに動画の中からプレーヤーが任意に画像を選択して静止画をＤＶＤに記録したスナップ写真集を作成することも可能である。これは、ライブラリソフトウェアＯｐｅｎＣＶを用いた公知の技術により実現することができる。
（実施の形態２）

図１９は、本発明の実施の形態２におけるゴルフダイジェスト自動作成システムの構成を説明する図であり、固定撮影ユニット２５がある点と、この固定撮影ユニット２５と移動撮影ユニット２１とがゴルフ場端末２４を介して動画データと移動軌跡データをダイジェスト作成装置２３に転送する点と、第５世代移動通信システムを利用していない点が実施の形態１の構成と異なる。

この固定撮影ユニット２５はゴルフカートが入れない区域あるいはゴルフカート上のカメラからでは撮影不可能な場所にゴルフカートを停める必要がある場合に設置されており、移動撮影ユニット２１の撮影のみではプレーの様子をカバーしきれない場所に設けられるものである。
以下、実施の形態１と異なる点を詳細に説明する。

まず、移動撮影ユニット２１のハードウェア構成を説明する。

図２０は本実施の形態における移動撮影ユニット２１の構成を示す図である。

この移動撮影ユニット２１は実施の形態１のものと異なり、５Ｇ無線送受信部２１７を有しておらず、中距離の無線通信が可能な無線送受信部２１８のみで携帯端末２２や固定撮影ユニット２５やゴルフ場端末２４と送受信する。

また、コース情報記憶部２１６に記憶してある３次元地図情報には、さらに固定撮影ユニット設置区域であることを示す情報とその区域での第２撮像部２１２の撮影可あるいは不可を示す情報が追加されている。その他は実施の形態１と同じである。

次に、固定撮影ユニット２５のハードウェア構成を説明する。

図２１は、本発明の実施の形態２における固定撮影ユニット２５のハードウェア構成を示す図である。

図２１において、本実施の形態の固定撮影ユニット２５は、カメラを含む撮像部２５１と音声マイクを含む集音部２５２と動画データを記録するＡＶ記憶部２５３と無線送信部２５４と制御部２５５とからなる。なお、カメラは撮影対象範囲が限定されているので、フルＨＤ画質（１９２０画素×１０８０画素）で、３０ｆｐｓレートで撮影する。また、その際にカメラの広角レンズによる歪みを補正して出力する。

この固定撮影ユニット２５は、カメラと集音マイクと無線通信機とコンピュータ装置により実現されている。このコンピュータ装置は、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、および無線通信インターフェースを備えており、それらはバスで接続されている。特に、制御部２５５は、不揮発性記憶部に記憶してある制御用プログラムをメモリに展開して実行することにより機能を実現している。
次に、ゴルフ場端末２４のハードウェア構成を説明する。

図２２は、本実施の形態におけるゴルフ場端末２４のハードウェア構成を示す図である。

図２２において、ゴルフ場端末２４は、データ転送用記憶部２４６とダイジェスト記憶部２４５とＤＶＤ書込み部２４４とキー入力部２４２と表示部２４１とネットワークｉ／ｆ２４８と無線送受信部２４７と制御部２４３とからなる。

データ転送用記憶部２４６は、移動撮影ユニット２１から無線通信により受信した３６０度カメラ映像データファイルと光学ズームカメラ映像データファイルと音声データファイルと移動軌跡データファイルを一時的に記憶する記憶装置である。

ダイジェスト記憶部２４５はダイジェスト配信サーバ２６から受信したダイジェストファイルを記憶するものである。

ＤＶＤ書き込み部２４４は、ダイジェスト記憶部２４５に記憶されているダイジェストファイルを読みだしてＤＶＤにフルＨＤ画質で書き込むものである。

制御部２４３は、ゴルフ場端末２４全体を制御して、ダイジェスト提供サービスを実行するものであって、表示部２４１にメニュー表示を行い、キー入力部２４２により選択された処理をゴルフ場端末２４を構成する各処理部に指示して行う。

上記したゴルフ場端末２４は、ディスプレイとキーボードとマウスとＤＶＤレコーダーとネットワーク・インターフェース・カードと無線通信機とコンピュータ装置により実現されている。このコンピュータ装置は、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、および無線通信インターフェースを備えており、それらはバスで接続されている。特に、制御部２４０は、不揮発性記憶部に記憶してある各種プログラムをメモリに展開して実行することにより機能を実現している。なお、ゴルフ場端末２４は実施の形態１と同じく、これらのハードウェア資源を備えるパーソナルコンピュータにより実現することが可能である。

次に、移動撮影ユニット２１と固定撮影ユニット２５とゴルフ場端末２４とダイジェスト作成装置２３の動作・作用について図面を用いて説明する。

図２３は、本実施の形態２における移動撮影ユニットの動作フロー図である。以下に実施の形態１と異なる点のみを説明する。

第１の相違点は、カートが移動中に行うカート移動中処理（Ｓ１３０４）である。

図２４は、移動撮影ユニット２１の行うカート移動中処理を説明する図である。

図２４において、移動撮影ユニット２１の制御部２２０は、それまで第１撮像部と第２撮像部が行っていた撮影の停止と録画・録音を停止する（Ｓ１４０１）。

次に、ＧＰＳ受信部２１９が検出する現在位置が３次元地図情報にある固定撮影ユニット２５の設置区域にあるか否かをチェックし（Ｓ１４０２）、所定区域に入った時点で当該区域の固定撮影ユニット２５へ撮影の開始要求をゴルフカート番号と共に無線送受信部２１８から送信する（Ｓ１４０４）。その後、ゴルフカートが停止するまで待機する。

一方、現在位置が固定撮影ユニット２５の設置区域ではない場合、制御部２２０は固定撮影エリアからエリア外へ移動したかをチェックし（Ｓ１４０３）、移動したのであれば固定撮影ユニットへ撮影の停止要求を送信する（Ｓ１４０５）。
以上が移動撮影ユニット２１が行うカート移動中処理である。

第２の相違点は、クラブハウス以外でカートが停止しているときの処理である。

すなわち、図２３において、移動撮影ユニット２１は、現在位置が固定撮影ユニットの設置区域内であるか否かをチェックする（ステップＳ１３０７）。そして、区域内であれば第２撮影部が撮影可能か否かを判定し（Ｓ１３０８）、撮影が可能であれば第２撮像部の撮影を開始する（Ｓ１３０９）。

以降の動作は、実施の形態１の移動撮影ユニット２１の動作フロー図（図１１）のステップＳ６０６からステップＳ６０９と同じである。

第３の相違点は、移動撮影ユニット２１がラウンド終了後に行う処理である。

すなわち、移動撮影ユニット２１はラウンド終了後、携帯端末２２から移動軌跡データを受信するが、この移動軌跡データと共に、撮影した動画データをゴルフ場端末２４を経由してダイジェスト作成装置２３へ送信する（Ｓ１３１５）。

これは、本実施の形態においては、移動撮影ユニット２１は第５世代移動通信を行わないためであり、ラウンド終了後にクラブハウスにゴルフカートが戻ったときに、第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５に記録しているこのランドで撮影したすべての動画データと移動軌跡データをゴルフ場端末２４へ送信する。

次に、固定撮影ユニット２５の動作・作用を図面を用いて説明する。
図２５は、固定撮影ユニット２５の動作フロー図である。

図２５において、まず、固定撮影ユニット２５の制御部２５５は、移動撮影ユニット２１からの撮影開始要求を待ち（Ｓ１５０１）、要求があった場合、制御部２５５は、撮像部２５１と集音部２５２からの動画データのＡＶ記憶部２５３への録画・録音を開始する（Ｓ１５０２）。このとき、制御部２５５は、記録する動画データを識別するために撮影開始指示と共に通知されたゴルフカート番号と動画の録画・録音を開始した時刻を記録する。

次に、制御部２５４は移動撮影ユニット２１からの撮影終了要求を待ち（Ｓ１５０３）、要求があった場合、ＡＶ記憶部２５３への録画・録音を終了する（Ｓ１５０４）。

次に、固定撮影ユニット２５の制御部２５５は、収録した映像データファイル、音声データファイル、およびゴルフカート番号と撮影開始時刻情報とホール番号とエリア識別情報とが記載された属性情報ファイルをダイジェスト作成装置２３へ無線送信する（Ｓ１５０５）。

そして、固定撮影ユニット２５の制御部２５５は、次のプレー組のためにステップＳ１５０１の処理へ戻る。

次に、ゴルフ場端末２４の動作・作用を図面を用いて説明する。
図２６は、ゴルフ場端末２４の動作フロー図である。

図２６において、ゴルフ場端末２４の制御部２４３は、まず、移動撮影ユニット２１から動画データの転送要求があるか否かをチェックし（Ｓ１７０１）、受信要求がある場合は送信を許可し、映像データファイルと音声データファイルと移動軌跡データファイルの受信を開始する。

そして、データ転送用記憶部２４６にすべてのファイルの受信が完了すると、制御部２４３は、ダイジェスト作成装置２３へこれらファイルの受信を要求する。

ダイジェスト作成装置２３が受信要求を許可した場合、ゴルフ場端末２４は先に受信したすべてのファイル、すなわち、動画ＩＤの付された映像データファイルと音声データファイルと移動軌跡データファイルをダイジェスト作成装置２３へＦＴＰプロトコルで送信する（Ｓ１７０２）。

次に、ゴルフ場端末２４の制御部２４３は、表示部２４１のディスプレイに表示されている選択肢のチェックを行う。

これ以降のステップＳ１７０３からステップＳ１７１１までの処理は、実施の形態１のゴルフ場端末２４の動作フロー図（図１８）のステップＳ１２０１からステップＳ１２０９までの処理と同一である。

次に、本実施の形態におけるダイジェスト作成装置２３の動作、作用を説明する。

図２７はダイジェスト作成装置２３の行うダイジェスト作成処理の動作フロー図である。

図２７において、まず、ダイジェスト作成装置２３の制御部２４０は、ダイジェスト作成の指示を受けると、通知されたゴルフカート番号の付与された動画ファイルをＡＶＬ記憶部２３１から読み出し（Ｓ１６０１）、移動撮影ユニット２１の撮影した動画ファイルに対しては、実施の形態１と同じように、動画切出し処理（Ｓ１６０２）からハイライトシーンシーン候補リスト２の作成（Ｓ１６０６）までを行う。

次に、制御部２４０は、固定撮影ユニット２５で撮影した動画ファイルに対しては、映像データの読出し後（Ｓ１６０７）、動画の切り出し処理を行うことなしに実施の形態１と同じ動作解析処理（Ｓ１６０８）からハイライトシーン候補リスト２の作成（Ｓ１６１１）までを行う。これは、固定カメラによる撮影は限られた空間のみを撮影したものだからである。

次に、制御部２４０は、すべてのハイライトシーン候補リストを時系列順に結合し（Ｓ１６１２）、実施の形態１と同様にハイライトシーンの決定処理（Ｓ１６１３）からダイジェスト作成（Ｓ１６１７）までを行う。このダイジェストは、移動撮影ユニット２１で撮影した動画も固定撮影ユニット２５で撮影した動画もアップコンバート技術によりすべてフルＨＤ画質であるので、高画質なものである。

なお、携帯端末２２とダイジェスト配信サーバ２６の動作は、実施の形態１と同じである。

以上のように、本実施の形態においては、ゴルフカートが入れない区域に固定撮影ユニットを設置しているので、移動撮影ユニット２１の撮影のみではカバーしきれない区域のハイライトシーンも逃すことなく集めたダイジェストを作成することができる。

また、本実施の形態のゴルフダイジェスト作成システムは、第５世代移動通信システムを用いずに、中距離用無線通信機によりゴルフ場端末２４と通信できればよいので、山間部や海岸沿いなど第５世代無線通信システムのサービスが及ばない地域においても実施可能である。

本発明は、ゴルフプレーのダイジェストの作成に有用であり、撮影を意識することなしに明瞭に視認可能なハイライトシーンを集めたダイジェストにするのに適している。

１１ ゴルフコース
１２ ゴルフカート
１３ プレーヤー
１４ クラブハウス
１５ インターネット
２１ 移動撮影ユニット
２２ 携帯端末
２３ ダイジェスト作成装置
２４ ゴルフ場端末
２５ 固定撮影ユニット
２６ ダイジェスト配信サーバ
６０ 電動雲台
６１ 電動式ズームレンズ
６２ 方位センサ
６３、６４ 傾斜センサ
１０１ ３６０度カメラ
１０２ 無指向性マイク
１０３ ＧＰＳ受信機
１０４ 移動記録装置
１０５ 携帯端末
１０６ ダイジェスト作成装置
１１１ ティーイングエリア
１１２ フェアウェイ
１１３ グリーン
２１１ 第１撮像部
２１２ 第２撮像部
２１３、２５２ 集音部
２１４ 第１ＡＶ記憶部
２１５ 第２ＡＶ記憶部
２１６、２３８ コース情報記憶部
２１７ ５Ｇ無線送受信部
２１８、２２３、２４７、２５４ 無線送受信部
２１９、２２１ ＧＰＳ受信部
２２０、２４０、２４３ 制御部
２２２ 移動軌跡記録部
２３１ ＡＶＬ記憶部
２３２ 動画切出し部
２３３ 動作解析部
２３４ 音声解析部
２３５ 合成画像生成部
２３６ ダイジェスト作成部
２３７、２４５ ダイジェスト記憶部
２３９、２４８ ネットワークｉ／ｆ
２４１ 表示部
２４２ キー入力部
２４４ ＤＶＤ書込み部
２４６ データ転送用記憶部

Claims (8)

1. ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、前記ゴルフカートに設置した電動雲台上に取り付けた電動式ズームレンズ付きカメラと、前記ゴルフカートに設置した集音マイクとＧＰＳ受信機と、前記電動式ズームレンズ付きカメラのレンズ方向を検出する方向検出器と、ゴルフコースの地図情報を記憶したコース情報記憶部と、前記３６０度カメラからの映像データと前記電動式ズームレンズ付きカメラからの映像データと前記集音マイクからの音声データとを記憶するＡＶ記憶部と、前記ＧＰＳ受信機の検出した位置情報と前記地図情報とから撮影対象エリアを決定し、前記方向検出器の検出する前記レンズ方向が当該撮影対象エリアになるように前記電動雲台を駆動して、前記電動式ズームレンズ付きカメラでズーム撮影した前記映像データと、３６０度カメラからの前記映像データと、前記音声データとに三者が同期するための時刻情報や前記撮影対象エリアを特定するエリア識別情報を付して前記ＡＶ記憶部に記憶する制御部と、を有する移動撮影ユニットと、
   前記ＡＶ記憶部に記憶した前記映像データを画像解析および／または前記音声データを音声解析するデータ解析部と、当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部と、前記映像データに付された前記エリア識別情報に基づいて前記画像解析や前記ハイライトシーンの抽出の対象とする映像データを前記３６０度カメラからの前記映像データと電動式ズームレンズ付きカメラからの前記映像データとのいずれにするかを選択する制御部とを有するダイジェスト作成装置と
   を備えるゴルフダイジェスト作成システム。
2. 前記移動撮影ユニットの前記制御部は、前記ＧＰＳ受信機の検出した位置情報が前記地図情報においてグリーン横である場合、当該グリーンを前記電動式ズームレンズ付きカメラの撮影対象エリアに決定する
   ことを特徴とする請求項１に記載のゴルフダイジェスト作成システム。
3. 前記移動撮影ユニットの前記制御部は、さらに前記ＧＰＳ受信機の検出した位置情報が前記地図情報においてグリーン横でない場合、当該位置情報の示す位置からショットしたボールの次の落下エリアとして前記地図情報にあらかじめ定めたエリアを前記撮影対象エリアに決定する
   ことを特徴とする請求項２に記載のゴルフダイジェスト作成システム。
4. 前記ダイジェスト作成装置の前記制御部は、前記映像データに付されている前記エリア識別情報がグリーンであることを示す場合、前記画像解析や前記ハイライトシーンの抽出の対象とする映像データとして前記電動式ズームレンズ付きカメラからの前記映像データを選択する
   ことを特徴とする請求項２に記載のゴルフダイジェスト作成システム。
5. 前記ダイジェスト作成装置の前記制御部は前記ハイライトシーンの映像データに付された前記エリア識別情報がグリーンでない場合、当該ハイライトシーンのショット後の前記映像データを、同時刻の前記電動式ズームレンズ付きカメラからの映像データに置換する
   ことを特徴とする請求項３に記載のゴルフダイジェスト作成システム。
6. ＧＰＳ受信機を備えて、所定時間の間隔で位置情報を記録することによりプレーヤーの移動軌跡情報を作成する携帯端末をさらに有し、
   前記移動撮影ユニットの前記３６０度カメラは方位センサを備え、出力する前記映像データに方位情報を付し、同じく前記移動撮影ユニットの制御部は前記映像データにゴルフカートの前記位置情報を付して前記ＡＶ記憶部に記憶するものであって、
   前記ダイジェスト作成装置はゴルフコースの３次元地図情報を記憶した地図情報記憶部をさらに有し、前記ダイジェスト作成部が前記ハイライトシーンの発生時刻における、前記３６０度カメラからの前記映像データに付されている前記方位情報とゴルフカートの前記位置情報と前記携帯端末から取得した前記移動軌跡情報とから前記プレーヤーの位置を特定し、前記３次元地図情報から当該位置における地形情報を算出して当該ハイライトシーンの映像データに合成する
   ことを特徴とする請求項１に記載のゴルフダイジェスト作成システム。
7. ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、
   前記ゴルフカートに設置した電動雲台上に取り付けた電動式ズームレンズ付きカメラと、
   前記ゴルフカートに設置した集音マイクとＧＰＳ受信機と、
   前記電動式ズームレンズ付きカメラのレンズ方向を検出する方向検出器と、
   ゴルフコースの地図情報を記憶したコース情報記憶部と、
   前記３６０度カメラからの映像データと前記電動式ズームレンズ付きカメラからの映像データと前記集音マイクからの音声データとを記憶するＡＶ記憶部と、
   前記ＧＰＳ受信機の検出した位置情報と前記地図情報とから撮影対象エリアを決定し、前記方向検出器の検出する前記レンズ方向が当該撮影対象エリアになるように前記電動雲台を駆動して、前記電動式ズームレンズ付きカメラでズーム撮影した前記映像データと、３６０度カメラからの前記映像データと、前記音声データとに三者が同期するための時刻情報や前記撮影対象エリアを特定するエリア識別情報を付して前記ＡＶ記憶部に記憶する制御部と、
   を有する移動撮影ユニット。
8. ゴルフカートに設置した３６０度カメラからの映像データと電動雲台上に取り付けた電動式ズームレンズ付きカメラからの映像データと前記ゴルフカートに設置した集音マイクからの音声データに、三者が同期するための時刻情報や撮影対象としたエリアを識別するエリア識別情報が付されたものを記憶するダイジェスト作成用ＡＶ記憶部と、
   前記ダイジェスト作成用ＡＶ記憶部に記憶した映像データを画像解析および／または音声データを音声解析するデータ解析部と、
   当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部と、
   前記映像データに付された前記エリア識別情報に基づいて前記画像解析や前記ハイライトシーンの抽出の対象とする映像データを前記３６０度カメラからの前記映像データと電動式ズームレンズ付きカメラからの前記映像データとのいずれにするかを選択する制御部と
   を有するダイジェスト作成装置。

Images