[第1実施形態]
以下、本発明の一実施形態である第1実施形態について図面に基づき詳細に説明する。
図1は、本実施形態に係るユーザ端末10の構成の一例を示す図である。
本実施形態に係るユーザ端末10は、携帯電話機(スマートフォンを含む)、携帯情報端末(タブレット型コンピュータを含む)などのコンピュータである。図1に示すように、本実施形態に係るユーザ端末10は、プロセッサ20、記憶部22、通信部24、タッチパネル26、カメラ部28、センサ部30を含む。
プロセッサ20は、例えば、ユーザ端末10にインストールされるプログラムに従って動作するマイクロプロセッサ等のプログラム制御デバイスである。記憶部22は、例えばROMやRAM等の記憶素子や、ソリッドステートドライブ(SSD)などである。記憶部22には、プロセッサ20によって実行されるプログラムなどが記憶される。通信部24は、例えば、有線通信又は無線通信用の通信インタフェースであり、インターネット等のコンピュータネットワークを介して、サーバ等のコンピュータとの間でデータを授受する。
タッチパネル26は、例えば、プロセッサ20から入力される指示に従って情報を表示出力したり、ユーザが行った操作の内容をプロセッサ20に出力したりする。
カメラ部28は、例えば、動画像の撮影が可能なデジタルビデオカメラなどの撮影デバイスである。
センサ部30は、例えば、GPSモジュール、加速度センサ、モーションセンサ、方位センサなどのセンシングデバイスである。なお、本実施形態では、センサ部30がユーザ端末10に含まれる場合を説明するが、センサ部30は、ユーザ端末10の外部にあってもよい。
本実施形態では例えば、ユーザ端末10を操作するユーザ(以下、操作ユーザと呼ぶ。)が、ゴルフ場やゴルフ練習場で、ユーザ端末10のカメラ部28を用いて、ゴルフのスイングをしているプレイヤを撮影する。そして、当該スイングをしているプレイヤが写る動画像が生成される。
なお、本実施形態では、スイングの撮影に先立って、カメラ部28の位置に対するプレイヤの位置が所定の許容範囲内の位置となり、撮影方向に対するプレイヤの向きが所定の許容範囲内の向きとなるよう、ユーザ端末10の位置及び傾きの調整が行われる。そして、本実施形態では、ユーザ端末10の調整が行われた後で、操作ユーザが所定の操作を行うと、カメラ部28によるプレイヤの撮影が行われ、当該スイングをしているプレイヤが写る動画像が生成される。本実施形態では、所定のフレームレート(例えば60fps)の動画像が生成されることとする。
そして、本実施形態では、このようにして生成された動画像に対して、手ブレ補正処理を実行することで、すべてのフレーム画像においてプレイヤが概ね同じ位置に写るように各フレーム画像が補正される。以下、当該手ブレ補正処理が実行された動画像を、撮影動画像と呼ぶこととする。本実施形態では、生成される撮影動画像に含まれるフレーム画像の縦横画素数はすべて同じであることとする。
以下、フレーム番号がn(n=1,2,3,・・・)であるフレーム画像を、フレーム画像(n)と表現することとする。また、フレーム画像(n)に対応するフレームを第nフレームと表現することとする。
そして、本実施形態では、撮影動画像に対してスイング解析処理が行われる。そして、当該スイング解析処理の結果を示す画像が撮影動画像に対して重畳された解析動画像が生成される。そして生成された解析動画像がユーザ端末10の記憶部22に記憶される。
そして、例えば上述のプレイヤや操作ユーザなどといったユーザ端末10のユーザは、適宜、所定の操作を行うことで、記憶部22に記憶された解析動画像を再生させることができるようになっている。
図2は、再生される解析動画像に含まれる、フィニッシュ時のフレーム画像の一例を示す図である。図2に示すフレーム画像には、プレイヤ40を撮影した撮影動画像に含まれるフレーム画像に、クラブヘッドの軌道を表すクラブヘッド軌道エフェクト画像42、及び、ボールの軌道を表すボール軌道エフェクト画像44が重畳されている。
また、図2に示すフレーム画像の右上には、解析結果情報46が配置されている。図2の例では、解析結果情報46として、ボールスピード、飛距離、及び、アウトサイドイン、インサイドイン、インサイドアウトなどといったスイング軌道の種類を示す文字列が配置されている。
また、図2に示すフレーム画像の左下には、クラブヘッドの軌道、インパクトの際のクラブのフェースの向き、及び、ボールの曲がり方向が表現された、インパクト画像48が配置されている。
図2に示すインパクト画像48には、ヘッド移動方向画像50、フェース向き画像52、及び、ボール方向画像54が含まれている。ヘッド移動方向画像50は、例えば、インパクトの際のクラブヘッドの移動方向を示す画像であり、図2の例では、矢印が並ぶ方向がインパクトの際のクラブヘッドの移動方向に相当する。フェース向き画像52は、例えば、インパクトの際のクラブのフェースの向きを示す画像であり、図2の例では、フェース向き画像52は、線上の画像であり、フェース向き画像52の延伸方向がインパクトの際のクラブのフェースの向きに相当する。ボール方向画像54は、例えば、ボールの飛び出し方向及び曲がり方向を示す画像である。本実施形態に係るボール方向画像54では、線上のフェース向き画像52の延伸方向に対して垂直な方向がボールの飛び出し方向として示されている。
また、図2に示すフレーム画像には、ダウンスイングの際にクラブヘッドの軌道が通ることが望ましいとされているVゾーンを示すVゾーン画像56が含まれている。
以上のようにして、本実施形態によれば、ユーザ端末10のユーザは、プレイヤが行ったゴルフスイングの解析結果を確認できることとなる。
以下、上述のスイング解析処理を中心に、本実施形態に係るユーザ端末10の機能、及び、本実施形態に係るユーザ端末10で実行される処理についてさらに説明する。
図3は、本実施形態に係るユーザ端末10で実装される機能の一例を示す機能ブロック図である。なお、本実施形態に係るユーザ端末10で、図3に示す機能のすべてが実装される必要はなく、また、図3に示す機能以外の機能が実装されていても構わない。
本実施形態に係るユーザ端末10は、ゴルフのスイングを解析するスイング解析システムとしての機能を有する。そして、図3に示すように、本実施形態に係るユーザ端末10には、機能的には例えば、撮影動画像取得部70、プレイヤ領域特定部72、比較結果画像生成部74、起点領域特定部76、ボール弾道特定部78、飛距離算出部80、クラブヘッド軌道特定部82、打ち出し方向特定部84、スイング軌道種類特定部86、曲がり方向判定部88、解析動画像生成部90、解析動画像記憶部92、表示制御部94、が含まれる。
撮影動画像取得部70、プレイヤ領域特定部72、比較結果画像生成部74、起点領域特定部76、ボール弾道特定部78、飛距離算出部80、クラブヘッド軌道特定部82、打ち出し方向特定部84、スイング軌道種類特定部86、曲がり方向判定部88、解析動画像生成部90は、プロセッサ20を主として実装される。解析動画像記憶部92は、記憶部22を主として実装される。表示制御部94は、プロセッサ20及びタッチパネル26を主として実装される。
以上の機能は、コンピュータであるユーザ端末10にインストールされた、以上の機能に対応する指令を含むプログラムをユーザ端末10で実行することにより実装されてもよい。また、このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介してユーザ端末10に供給されてもよい。
撮影動画像取得部70は、本実施形態では例えば、ゴルフのスイングをしているプレイヤ40が写る撮影動画像を取得する。ここで上述のように、手振れ補正処理が実行された後の撮影動画像が取得されてもよい。
また、図2に示すように、撮影動画像は、プレイヤ40を一方向から撮影した動画像であってもよい。また、撮影動画像は、プレイヤ40をボールの目標方向後方から見た様子が写る動画像であってもよい。
上述のように、本実施形態では、所定のフレームレート(例えば、60fps)で撮影された撮影動画像が取得されることとする。
プレイヤ領域特定部72は、本実施形態では例えば、撮影動画像に含まれるフレーム画像内において、プレイヤ40が写る領域である、図4に例示されているプレイヤ領域96を特定する。
ここで例えば、本実施形態に係るユーザ端末10に、OpenPose等の学習済の機械学習モデルがインストールされていてもよい。そして、プレイヤ領域特定部72は、当該学習済の機械学習モデルを用いることで、フレーム画像内における、プレイヤ40の骨格(ボーン)を表すスケルトンモデル98のノードやリンクの位置を特定してもよい。図4に示されているスケルトンモデル98に含まれる複数のノードの位置は、それぞれ、例えば、肩や腰などといったプレイヤ40の体の部位の位置に対応付けられる。
プレイヤ領域特定部72は、スケルトンモデル98に基づいて位置、形状、及び、大きさが特定される矩形領域をプレイヤ領域96として特定してもよい。例えば、スケルトンモデル98に外接する矩形領域を、中心の位置を変えずに所定の倍率で拡大した領域が、プレイヤ領域96として特定されてもよい。
ここで、代表となる1つのフレーム画像に基づいてプレイヤ領域96が特定されてもよい。また、複数のフレーム画像に基づいてプレイヤ領域96が特定されてもよい。この場合、複数のフレーム画像について特定される矩形領域の共通領域や平均的な領域などといった、複数のフレーム画像について特定される矩形領域を代表する領域が、プレイヤ領域96として特定されてもよい。
また、プレイヤ以外の人物が撮影動画像に写りこんでいる場合などにおいて、プレイヤ領域96の候補が複数特定されることがある。この場合は、領域のサイズ、フレーム画像の中心からの距離、領域の高さと幅の比率、等の、所与の条件に基づいて、いずれか1つの候補がプレイヤ領域96として特定されてもよい。
比較結果画像生成部74は、本実施形態では例えば、撮影動画像に基づいて、画像差分法などを用いることで、図5に例示されている比較結果画像を生成する。
本実施形態では、撮影動画像に含まれる複数のフレーム画像のそれぞれについて、当該フレーム画像に対応付けられる比較結果画像が生成される。例えば、フレーム画像(n)については、対応する比較結果画像として比較結果画像(n)が生成される。
比較結果画像生成部74は、例えば、連続する所定数のフレーム画像(例えば、20フレーム)のフレーム画像を平滑化することで、比較画像を生成してもよい。例えば、撮影動画像に含まれるフレーム画像(n-20)からフレーム画像(n-1)までの20のフレーム画像を平滑化することで、比較画像(n)が生成されてもよい。例えば、各画素について、フレーム画像(n-20)からフレーム画像(n-1)までのフレーム画像における当該画素に対応する画素の画素値の平均値が、当該画素の画素値に設定された、比較画像(n)が生成されてもよい。
そして、比較結果画像生成部74は、互いに対応付けられる各画素について、上述の所定数のフレーム画像の次のフレーム画像であるフレーム画像(n)での画素値と上述の比較対象画像(n)での画素値との差を算出する。そして、比較結果画像生成部74は、各画素についてフレーム画像(n)と比較対象画像(n)の画素値の差が所定値以上であるか否かを示す、比較結果画像(n)を生成する。図5に示す比較結果画像では、画素値の差が所定値以上である画素は白で表現され、所定値未満である画素は黒で表現されている。以下、画素値の差が所定値以上である画素、すなわち、図5に示す比較結果画像において白で表現されている画素を、変化画素と呼ぶこととする。
なお、本実施形態では、上述のように20個のフレーム画像に基づいて比較画像が生成される場合は、フレーム画像(21)以降のフレーム画像について、当該フレーム画像に対応付けられる比較結果画像が生成される。
起点領域特定部76は、本実施形態では例えば、図6に例示されている、後述するボール弾道特定部78によるボールの弾道の特定で用いられる起点領域100を特定する。
本実施形態に係る起点領域100は、例えば、プレイヤ領域96に基づいて一意に特定される矩形領域である。ここで例えば、起点領域100の左辺の位置はフレーム画像の左辺の位置と同じ位置であり、起点領域100の右辺の位置はフレーム画像の右辺の位置と同じ位置であってもよい。また、起点領域100の上辺の位置は、プレイヤ領域96の上辺からプレイヤ領域96の上下方向の長さの30%だけ下にある位置であってもよい。また、起点領域100の下辺の位置は、プレイヤ領域96の下辺の位置と同じ位置あるいはプレイヤ40の足元を通る位置であってもよい。なお、この方法は起点領域100の特定方法の一例にすぎず、他の方法により起点領域100が特定されてもよい。
ボール弾道特定部78は、本実施形態では例えば、撮影動画像に基づいて、当該撮影動画像に写るボールの弾道を特定する。
本実施形態では、ボールの弾道は、撮影動画像に含まれる複数のフレーム画像についての、当該フレーム画像内においてボールが写る位置を互いに関連付けたリストとして特定される。以下、当該リストを弾道リストと呼ぶこととする。
以下、ボール弾道特定部78によるボールの弾道の特定処理の一例について、図7~図12を参照しながら説明する。
上述のように、フレーム画像(21)以降のフレーム画像について、当該フレーム画像に対応付けられる比較結果画像が生成されるとする。この場合、比較結果画像(21)以降の比較結果画像について、所定の画素数の範囲であり、所定の領域内にある、変化画素の画素塊が少なくとも1つ特定される。そして、これらの画素塊について、代表点(例えば中心)の位置が候補ボール位置として特定される。
ここでは例えば、比較結果画像(n-1)までについては、候補ボール位置が特定されず、比較結果画像(n)において、図7に示す3つの候補ボール位置(P(n,a)、P
(n,b)、及び、P(n,c))が特定されたとする。
すると、弾道リストの候補(以下、弾道リスト候補と呼ぶ。)の最初の要素となる候補ボール位置の絞り込みが行われる。例えば、起点領域100の外である候補ボール位置は、候補ボール位置から除外される。このようにして、P(n,a)は最初の要素となる候補ボール位置から除外され、P(n,b)、及び、P(n,c)が最初の要素となる候補ボール位置として絞り込まれる。
この場合、図8に示すように、それぞれ要素が1つである、P(n,b)、及び、P(n,c)が弾道リスト候補として特定される。
そして、比較結果画像(n+1)において、図9に示す3つの候補ボール位置(P(n+1,a)、P(n+1,b)、及び、P(n+1,c))が特定されたとする。
なお、図9には、これらの候補ボール位置の他に、候補ボール位置から除外されていないP(n,b)、及び、P(n,c)が示されている。
この場合、起点領域100の外であるP(n+1,a)が、最初の要素となる候補ボール位置から除外される。一方で、P(n+1,b)、及び、P(n+1,c)が最初の要素となる候補ボール位置として絞り込まれる。
また、弾道リスト候補が既に存在する状況では、既に存在する弾道リスト候補に関連付けられる候補ボール位置の特定も行われる。
例えば、P(n+1,a)、P(n+1,b)、及び、P(n+1,c)のうちから、P(n,b)に関連付けられる候補ボール位置が特定される。例えば、P(n,b)からの長さが所定長よりも長い、P(n,b)からの長さが所定長よりも短い、P(n,b)よりも位置が下である、などの所定の条件を満足するものについては、P(n,b)に関連付けられる候補ボール位置から除外される。例えば、P(n+1,c)は、P(n,b)よりも位置が下であるため、候補ボール位置から除外される。そして、P(n+1,a)、及び、P(n+1,b)がP(n,b)に関連付けられる候補ボール位置として絞り込まれる。
同様にして、P(n+1,a)、P(n+1,b)、及び、P(n+1,c)のうちから、P(n,c)に関連付けられる候補ボール位置が特定される。ここでは例えば、P(n+1,c)は、P(n,c)よりも位置が下であるため、候補ボール位置から除外される。そして、P(n+1,a)、及び、P(n+1,b)がP(n,c)に関連付けられる候補ボール位置として絞り込まれる。
そして、図10に示すように、弾道リスト候補が追加される。上述の例では、P(n+1,b)、P(n+1,c)、P(n,b)-P(n+1,a)、P(n,b)-P(n+1,b)、P(n,c)-P(n+1,a)、P(n,c)-P(n+1,b)が弾道リスト候補に追加される。図10には、互いに関連付けられた複数の候補ボール位置を含む弾道候補リストも示されている。例えば、要素P(n,b)、及び、要素P(n+1,a)を含む弾道リスト候補が、P(n,b)-P(n+1,a)として、図10に示されている。なお、図8に示されているP(n,b)、及び、P(n,c)についても上書きされずに弾道リスト候補に残される。
そして、比較結果画像(n+2)において、図11に示す2つの候補ボール位置(P(n+2,a)、及び、P(n+2,b))が特定されたとする。
なお、図11には、これらの候補ボール位置の他に、除外されていない候補ボール位置も示されている。このうちから、起点領域100の外であるP(n+2,a)は最初の要素となる候補ボール位置から除外される。一方で、P(n+2,b)が起点の候補ボール位置として絞り込まれる。
また、上述のようにして、要素が1つである弾道リスト候補に関連付けられる候補ボール位置の特定が行われる。例えば、P(n+2,b)は、P(n,c)からの長さが所定長よりも短いため、P(n,c)に関連付けられる候補ボール位置から除外される。また、P(n+2,a)は、P(n+1,c)からの長さが所定長よりも長いため、P(n+1,c)に関連付けられる候補ボール位置から除外される。
また、ここからは要素が複数である弾道リスト候補に関連付けられる候補ボール位置の特定も行われる。この場合、弾道リスト候補の最後の要素である候補ボール位置からの長さが所定長よりも長い、弾道リスト候補の最後の要素である候補ボール位置からの長さが所定長よりも短い、弾道リスト候補の最後の要素である候補ボール位置よりも位置が下である、などの所定の条件を満足するものについては、弾道リスト候補に関連付けられる候補ボール位置から除外されてもよい。
また、これらの条件に加え、例えば、弾道の角度が急変する(所定の角度以上に曲がる)、弾道の速度が急変する(所定の長さ以上短く、あるいは、長くなる)、弾道の方向が変わる(右に向かう弾道が左に向かう、あるいは、左に向かう弾道が右に向かう)などといった、複数の要素を含む弾道リスト候補に関する所定の条件を満足するものについても、弾道リスト候補に関連付けられる候補ボール位置から除外されてもよい。
図11の例では、P(n+2,a)は、P(n,b)とP(n+1,b)とを結ぶ弾道に対して、弾道の角度が急変しているため、P(n,b)-P(n+1,b)に関連付けられる候補ボール位置から除外される。また、P(n+2,a)は、P(n,c)とP(n+1,a)とを結ぶ弾道に対して、弾道の速度が急に遅くなっているため、P(n,c)-P(n+1,a)に関連付けられる候補ボール位置から除外される。
例えばこのようにして、図12に示すように、5つの弾道リスト候補が追加される。ここで、P(n,b)-P(n+2,a)、P(n,c)-P(n+2,a)のように、弾道リスト候補に含まれる、互いに関連付けられた2つの要素のそれぞれに対応するフレームが連続していなくてもよい。ただし、例えば、弾道リスト候補の最後の要素に対応するフレームから所定フレーム数(例えば、4フレーム)以上離れている候補ボール位置については、当該弾道リスト候補に関連付けられる候補ボール位置から除外されるようにしてもよい。
以上のようにして、本実施形態では、弾道リスト候補が複数特定されることとなる。そして、これらの弾道リスト候補のうちから、弾道リスト候補に含まれる要素(候補ボール位置)の数が最も多いものが弾道リストとして特定される。以下、特定された弾道リストに含まれる要素である候補ボール位置を、弾道ボール位置と呼ぶこととする。
ここで、例えば、他の基準に従って弾道リストが特定されてもよい。例えば、最も直線に近い弾道を表す弾道リスト候補が弾道リストとして特定されてもよい。
なお、以上のようにして、通常、インパクト直後の概ね50フレーム程度について弾道ボール位置が特定されるが、着弾点までのすべてのフレームについての弾道ボール位置は特定されない。
そして、ボール弾道特定部78は、以上のようにして特定された各フレームにおける弾道ボール位置に基づいて、例えば直線推定を行うことで、撮影動画像の画像二次元座標系で表現された、ボールの弾道の軌跡を特定する。
そして、特定された軌跡を下方向に延伸して外挿することで、フレーム画像内における上下方向の位置が所定の位置にあるタイミングに相当するフレーム番号を、インパクトのタイミングに相当するフレーム番号として特定する。本実施形態では、例えば、103.195のように、整数よりも細かい単位でフレーム番号が特定される。以下、このようにして特定されるフレーム番号に対応するフレームをインパクトフレームと呼ぶこととする。
そして、ボール弾道特定部78は、ショットされる前におけるボールの位置(以下、初期位置と呼ぶ。)を特定する。例えば、ボール弾道特定部78は、インパクトフレームの直前及び直後のフレームにおけるフレーム画像を特定する。例えば、インパクトフレームのフレーム番号が103.195である場合は、フレーム番号が103であるフレームがインパクトフレームの直前のフレームに相当し、フレーム番号が104であるフレームがインパクトフレームの直後のフレームに相当する。そしてこの場合、フレーム画像(103)がインパクトフレームの直前のフレームにおけるフレーム画像として特定される。また、フレーム画像(104)がインパクトフレームの直後のフレームにおけるフレーム画像として特定される。
そして、ボール弾道特定部78は、これら2つのフレーム画像を比較することで、インパクト直前のフレーム画像に存在してインパクト直後のフレーム画像に存在しない物体を検出する。そして、ボール弾道特定部78は、検出された物体の位置を、初期位置として特定する。
なお、このようにして初期位置の特定ができなかった場合は、ボール弾道特定部78は、アドレス時のフレーム(例えば、第5フレーム)のフレーム画像からシャフトを検出してもよい。そして、ボール弾道特定部78は、検出されたシャフトを延伸した線と、プレイヤ領域96の下辺からプレイヤ領域96の上下方向の長さの10%だけ上の位置にある左右方向に延伸する線との交点の位置を、初期位置として特定してもよい。
比較結果画像に基づいて弾道ボール位置を特定する場合は、置かれた状態で動いていないボールの位置である初期位置は、変化画素とならないため、検出ができない。また、ショット前においてはボールがクラブヘッドで隠れている可能性が高い。このような状況でも、本実施形態では、以上のようにして、初期位置が特定できるようになっている。
飛距離算出部80は、本実施形態では例えば、プレイヤ40が行ったショットのヘッドスピードや、ボールスピードや、飛距離を算出する。
飛距離算出部80は、例えば、まず、撮影動画像に含まれるフレーム画像のうちから、クラブヘッドが最も左に写るトップ位置フレーム画像と、クラブヘッドが最も右に写るインパクトフレーム画像と、を抽出する。図13は、トップ位置フレーム画像の一例を示す図である。図14は、インパクトフレーム画像の一例を示す図である。
そして、飛距離算出部80は、フレーム画像の二次元画像座標系で表現された、トップ位置フレーム画像におけるクラブヘッドの座標値(x,y)と、インパクトフレーム画像におけるヘッドの座標値(x’,y’)と、を特定する。そして、飛距離算出部80は、座標値(x,y)と座標値(x’,y’)とに基づいて、画像内ヘッド移動距離D1を算出する。ここでD1は、例えば、(x’-x)の二乗と(y’-y)の二乗との和の平方根である。なお、フレーム画像においては、右方向がx軸正方向であり、下方向がy軸正方向であることとする。
そして、飛距離算出部80は、上述のインパクトフレームのフレーム番号とトップ位置フレーム画像のフレーム番号との差に撮影時間間隔(例えば、1/60秒)を乗じた値を、ヘッド移動時間T1(秒)として算出する。
そして、飛距離算出部80は、値D1を値T1で割った値を、ヘッドスピードS(メートル毎秒)として算出する。
そして、飛距離算出部80は、ヘッドスピードSに所定の仮ミート率1.25を乗じた値を、仮ボール初速度V(メートル毎秒)として算出する。
そして、飛距離算出部80は、仮ボール初速度Vに所定の係数4×0.8×1.0936を乗じた値を、仮総飛距離D2(ヤード)として算出する。
そして、飛距離算出部80は、各フレーム画像について、フレーム画像の二次元画像座標系で表現された、当該フレーム画像内における弾道ボール位置の座標値に基づいて、当該フレームにおけるカメラ座標系における上下角度、及び、左右角度を特定する。ここで、フレーム画像(n)についての弾道ボール位置の座標値を(x1(n),y1(n))と表現し、フレーム画像(n)に対応するフレームにおけるカメラ座標系における上下角度をa1(n)と表現し、左右角度をa2(n)と表現することとする。ここでカメラ座標系における上下角度とは、所定の方向を基準とした、カメラ部28からボールを見た際の上下方向の角度を指し、左右角度とは、所定の方向を基準とした、カメラ部28からボールを見た際の左右方向の角度を指す。
本実施形態では上述のように、ユーザ端末10の位置や傾きの調整が行われているので、ボール位置の二次元座標値と、上下角度及び左右角度とは、1対1で対応付け可能となっている。そのため、本実施形態では例えば、飛距離算出部80が予め保持している変換式や変換テーブルを示すデータを参照することで、ボール位置の二次元座標値に基づいて、上下角度及び左右角度が一意に特定可能となっている。
また、飛距離算出部80は、同様にして、ボールの初期位置の座標値(x0,y0)に基づいて、カメラ部28から初期位置にあるボールを見た際の上下角度a1’及び左右角度a2’を特定する。
そして、飛距離算出部80は、算出された仮総飛距離D2に基づいて、当該仮総飛距離D2に対応付けられる、三次元空間内におけるボールの弾道の軌跡を表す放物線を特定する。なお、本実施形態では、仮総飛距離D2と放物線との形状とは予め対応付けられていることとする。そして、飛距離算出部80は、上下角度、及び、左右角度に対応する、当該放物線に沿った三次元空間内におけるボールの位置の三次元座標値を算出する。ここで、例えば、フレーム画像(n)に対応するフレームについては、上述の放物線、上下角度a1(n)、左右角度a2(n)に基づいて、三次元座標値(x2(n),y2(n),z2(n))が算出されることとする。
本実施形態では例えば、各フレームについて、ボールの初期位置についての上下角度a1’、左右角度a2’に対応する三次元座標値を原点とした、ボールの位置の三次元座標値が算出される。
ここでも、ユーザ端末10の位置や傾きの調整が行われていることから、放物線、上下角度、左右角度の組合せと、ボールの位置の三次元座標値とは、1対1で対応付け可能となっている。そのため、本実施形態では例えば、飛距離算出部80が予め保持している変換式や変換テーブルを示すデータを参照することで、放物線、上下角度、及び、左右角度に基づいて、ボールの位置の三次元座標値が一意に特定可能となっている。
そして、飛距離算出部80は、上述のようにして算出されたボールの位置の三次元座標値のうちの2つを入力として左右角度と仰角とを未知数とする二元方程式を解くことで、当該入力に対応する左右角度と仰角を算出する。
飛距離算出部80は、入力される一対の三次元座標値を様々なパターンで選択して、それぞれのパターンについて、左右角度の値と仰角の値の組合せを算出する。そして、飛距離算出部80は、様々なパターンについて算出された仰角の値の平均値を、ボールの飛行軌跡全体についての仰角a3として決定する。
そして、飛距離算出部80は、各フレームについて、ボールの位置の三次元座標値に基づいて、算出された仰角a3を固定値とした際における、左右角度を算出する。
そして、飛距離算出部80は、図15に示すように、回帰分析によって、左右角度の初期値と最終値(ボールが着弾した際の左右角度)を算出する。ここでは例えば、インパクトにおける左右角度が、左右角度の初期値として算出される。そして、上述の放物線に基づいて特定される着弾点の位置における左右角度が、左右角度の最終値として算出される。
そして、飛距離算出部80は、1.33.×(1-0.01×仰角偏差)×cos(左右角度絶対値+曲がり角度絶対値)との数式によって、ミート率を算出する。
ここで、仰角偏差とは、算出された仰角a3と値14との差の絶対値を指す。また、左右角度絶対値とは、左右角度の初期値として算出された値の絶対値を指す。また、曲がり角度絶対値とは、左右角度の最終値として算出された値から左右角度の初期値として算出された値を引いた値の絶対値を指す。
そして、飛距離算出部80は、このようにして算出されたミート率に算出されたヘッドスピードSを乗じることで、ボール初速度を算出する。
そして、算出されたボール初速度に4×0.8×1.0936を乗じることで、飛距離(ヤード)を算出する。
なお、飛距離等の算出方法は上述の方法には限定されない。
クラブヘッド軌道特定部82は、本実施形態では例えば、撮影動画像に基づいて、当該撮影動画像に写るクラブヘッドの軌道を特定する。
クラブヘッド軌道特定部82は、例えば、まず、図16に示すヘッド検出領域102を特定する。ここで、ヘッド検出領域102の位置、形状、大きさは、例えば、予め定められた規則に従って、プレイヤ領域96の位置、形状、大きさに基づいて一意に特定される。図16の例では、プレイヤ領域96と中心の位置が同じで、左右方向の長さが3倍で、上下方向の長さが2倍である領域が、ヘッド検出領域102として示されている。
そして、クラブヘッド軌道特定部82は、撮影動画像に含まれる複数のフレーム画像についての当該フレーム画像のヘッド検出領域102内においてクラブヘッドが写る位置を特定する。ここで例えば、インパクトフレームまでのフレーム画像について、フレーム画像内においてクラブヘッドが写る領域を特定してもよい。ここでクラブヘッドが写る領域の特定において、上述の比較結果画像が用いられてもよい。例えば、ヘッド検出領域102内の、所定の画素数の範囲である変化画素の画素塊に対応する領域が、クラブヘッドが写る領域として特定されてもよい。そして、クラブヘッド軌道特定部82は、特定された各領域について、当該領域内の代表点(例えば中心)の位置をクラブヘッドが写る位置(以下、クラブヘッド位置と呼ぶ。)として特定してもよい。
そして、クラブヘッド軌道特定部82は、特定された複数のクラブヘッド位置に基づいて、クラブヘッドの軌道を特定してもよい。例えば、クラブヘッド軌道特定部82は、3次ベジェ曲線計算を利用して、各フレームについて特定されたクラブヘッド位置を補間することで、図17に例示されている、フレーム間が補間された滑らかな線状のクラブヘッドの移動軌跡L1を、クラブヘッドの軌道として特定してもよい。
また、クラブヘッド軌道特定部82は、撮影動画像に基づいて、インパクトの際のクラブヘッドの移動方向を特定してもよい。例えば、クラブヘッド軌道特定部82は、上述のようにして特定されたクラブヘッドの移動軌跡L1上の、インパクトフレームの直前のフレームにおけるクラブヘッドの位置を特定してもよい。また、クラブヘッド軌道特定部82は、上述のようにして特定されたクラブヘッドの移動軌跡L1上の、インパクトフレームの直後のフレームにおけるクラブヘッドの位置を特定してもよい。
そして、クラブヘッド軌道特定部82は、図17に例示されている、インパクトフレームの直前のフレームにおけるクラブヘッドの位置とインパクトフレームの直後のフレームにおけるクラブヘッドの位置とを結ぶ線L2を特定してもよい。
そして、クラブヘッド軌道特定部82は、撮影動画像の二次元画像座標系で表現された、所定の基準方向に対する、インパクトの際のクラブヘッドの移動方向の角度を特定してもよい。クラブヘッド軌道特定部82は、例えば、図17に示すように、フレーム画像において上下方向に延伸する線L3とクラブヘッドの移動方向に沿った上述の線L2とのなす角度をインパクトの際のクラブヘッドの移動方向の角度a4として特定してもよい。以下、このようにして特定されるインパクトの際のクラブヘッドの移動方向の角度を、クラブパス角度と呼ぶこととする。なお、本実施形態では、クラブパス角度は、反時計回り方向を正方向とする。すなわち、図17に示されているクラブパス角度a4の値は負となる。
打ち出し方向特定部84は、本実施形態では例えば、撮影動画像に基づいて、当該撮影動画像に写るボールの打ち出し方向を特定する。
打ち出し方向特定部84は、例えば、撮影動画像に含まれる複数のフレーム画像についての当該フレーム画像内においてボールが写る位置に基づいて、打ち出し方向を特定する。ここで例えば、打ち出し方向特定部84は、ボール弾道特定部78によって特定されるボールの弾道に基づいて、打ち出し方向を特定してもよい。例えば、ボール弾道特定部78によって特定された、インパクトフレーム直後の所定数フレーム(例えば5フレーム)における、フレーム画像内における弾道ボール位置に基づいて打ち出し方向が特定されてもよい。例えば、図18に例示されている、インパクトフレーム直後の所定数フレームにおけるフレーム画像内における弾道ボール位置に沿った近似直線L4の方向が打ち出し方向として特定されてもよい。
また、打ち出し方向特定部84は、撮影動画像の二次元画像座標系で表現された、所定の基準方向に対する、打ち出し方向の角度を特定してもよい。例えば、図18に示すように、フレーム画像において上下方向に延伸する線L3と打ち出し方向に沿った線L4とのなす角度を打ち出し角度a5として特定してもよい。なお、本実施形態では、打ち出し角度は、反時計回り方向を正方向とする。すなわち、図18に示されている打ち出し角度a5の値は正となる。
そして、打ち出し方向特定部84は、特定された打ち出し方向に基づいて、インパクトの際のクラブのフェースの向きを特定する。
例えば、打ち出し角度a5の絶対値が所定値未満である場合は、フェースの向きはスクエアであると特定されてもよい。また、打ち出し角度a5の絶対値が所定値以上であり、打ち出し角度a5の値が正である場合は、フェースの向きは閉じている(クローズドである)と特定されてもよい。また、打ち出し角度a5の絶対値が所定値以上であり、打ち出し角度a5の値が負である場合は、フェースの向きは開いている(オープンである)と特定されてもよい。
スイング軌道種類特定部86は、本実施形態では例えば、プレイヤ40が行ったスイング軌道の種類を特定する。ここでは例えば、スイング軌道種類特定部86は、プレイヤ40が行ったスイングにおけるスイング軌道が、インサイドアウト、インサイドイン、又は、アウトサイドイン、のいずれであるかを特定する。
スイング軌道種類特定部86は、例えば、上述のクラブパス角度a4に基づいて、スイング軌道の種類を特定してもよい。
例えば、クラブパス角度a4の絶対値が所定値未満である場合は、スイング軌道の種類がインサイドインと特定されてもよい。また、クラブパス角度a4の絶対値が所定値以上であり、クラブパス角度a4の値が正である場合は、スイング軌道の種類がアウトサイドインと特定されてもよい。また、クラブパス角度a4の絶対値が所定値以上であり、クラブパス角度a4の値が負である場合は、スイング軌道の種類がインサイドアウトと特定されてもよい。
スイング軌道種類特定部86によるスイング軌道の種類の特定方法は、上述の方法に限定されない。
例えば、スイング軌道種類特定部86が、撮影動画像に基づいて、アドレス時のフレーム画像に写るプレイヤ40の所定の体の部位の位置を特定してもよい。ここで例えば、スイング軌道種類特定部86が、所定のフレーム番号のフレーム画像(例えば、フレーム画像(5))に写るプレイヤ40の所定の体の部位の位置を特定してもよい。ここで例えば、プレイヤ領域特定部72によって特定されたスケルトンモデル98に示されているプレイヤ40の肩の位置が特定されてもよい。
そして、スイング軌道種類特定部86が、図19に示すように、特定される肩の位置Q1とボール弾道特定部78によって特定される初期位置Q2とを結ぶ線L5を特定してもよい。
また、スイング軌道種類特定部86が、図19に示すように、フレーム画像に写るシャフトに沿った線L6を特定してもよい。
ここで、スイング軌道種類特定部86が、図19に示されているアドレス時シャフト検知領域104、及び、振り上げ時シャフト検知領域106を特定してもよい。ここで例えば、アドレス時シャフト検知領域104は、例えば、プレイヤ領域96に基づいて位置及び大きさが一意に特定される、プレイヤ領域96の右下に位置する領域であってもよい。また、振り上げ時シャフト検知領域106は、例えば、プレイヤ領域96に基づいて位置及び大きさが一意に特定される、プレイヤ領域96の左上に位置する領域であってもよい。
そして、スイング軌道種類特定部86が、振り上げ時シャフト検知領域106内においてシャフトが検出されるフレーム画像を振り上げ時のフレーム画像として特定してもよい。そして、スイング軌道種類特定部86が、アドレス時シャフト検知領域104内の、互いに対応付けられる各画素について、アドレス時のフレーム画像における画素値と振り上げ時のフレーム画像における画素値との差を表すシャフト検知画像を生成してもよい。なおここで、上述のようにして特定される振り上げ時のフレーム画像の代わりに、上述のトップ位置フレーム画像が用いられてもよい。
そして、スイング軌道種類特定部86が、生成されたシャフト検知画像に対して、ハフ変換等の直線検出手法を適用することで、シャフトに沿った線L6を特定してもよい。
そして、スイング軌道種類特定部86が、撮影動画像に基づいて特定される、アドレス時におけるプレイヤ40の所定の体の部位の位置又はアドレス時におけるシャフトの位置の少なくとも一方に基づいて、少なくとも1つの基準角度を特定してもよい。
ここで、スイング軌道種類特定部86は、例えば、所定の体の部位の位置に基づいて、第1の基準角度を特定してもよい。また、スイング軌道種類特定部86は、所定の体の部位の位置とスイングされる前のボールの位置とに基づいて、第1の基準角度を特定してもよい。
例えば、スイング軌道種類特定部86は、図19に示すように、フレーム画像において左右方向に延伸する線L7と、肩の位置Q1と初期位置Q2とを結ぶ線L5と、のなす角度を第1の基準角度a6として特定してもよい。
また、スイング軌道種類特定部86は、例えば、アドレス時におけるシャフトの位置に基づいて、第2の基準角度を特定してもよい。
例えば、スイング軌道種類特定部86は、図19に示すように、フレーム画像において左右方向に延伸する線L7と、シャフトに沿った線L6と、のなす角度を第2の基準角度a7として特定してもよい。
このように、撮影動画像の二次元画像座標系で表現された基準角度が特定されてもよい。
また、スイング軌道種類特定部86は、撮影動画像に基づいて、撮影動画像に写るクラブヘッドの振り下ろし角度を特定してもよい。例えば、スイング軌道種類特定部86は、例えば、インパクト前の所定数のフレームのフレーム画像に基づいて、振り下ろし角度を特定してもよい。
ここで例えば、インパクトフレームの直後のフレームのフレーム番号をmとする。ここで、第(m-5)フレームから第(m-2)フレームまでの4個のフレームについての、上述のようにして特定されたクラブヘッドの移動軌跡L1上のクラブヘッドの位置が特定されてもよい。そして、第(m-5)フレームから第(m-4)フレームにおけるクラブヘッドの移動方向、第(m-4)フレームから第(m-3)フレームにおけるクラブヘッドの移動方向、及び、第(m-3)フレームから第(m-2)フレームにおけるクラブヘッドの移動方向、を平均した移動方向を表す線が、図20に例示されている振り下ろし方向に沿った線L8として特定されてもよい。
あるいは、第(m-5)フレームから第(m-2)フレームまでの4個のフレームについてのクラブヘッドの位置に沿った近似直線が、図20に例示されている振り下ろし方向に沿った線L8として特定されてもよい。なお、線L8の特定に用いられるフレームは、第(m-5)フレームから第(m-2)フレームまでの4個のフレームには限定されない。
そして、スイング軌道種類特定部86は、図20に示すように、フレーム画像において左右方向に延伸する線L7と上述の振り下ろし方向に沿った線L8とのなす角度を振り下ろし角度a8として特定してもよい。
このように、撮影動画像の二次元画像座標系で表現された振り下ろし角度が特定されてもよい。
そして、スイング軌道種類特定部86は、上述の基準角度と、上述の振り下ろし角度と、を比較してもよい。そして、スイング軌道種類特定部86は、上述の基準角度と、上述の振り下ろし角度と、の比較結果に基づいて、スイングにおけるスイング軌道の種類を特定してもよい。例えば、スイング軌道種類特定部86は、第1の基準角度と、第2の基準角度と、振り下ろし角度と、に基づいて、スイングにおけるスイング軌道がインサイドアウト、インサイドイン、又は、アウトサイドインのいずれであるかを特定してもよい。
例えば、振り下ろし角度a8の値が第1の基準角度a6の値よりも大きい場合は、スイング軌道の種類がアウトサイドインと特定されてもよい。この場合は、いわゆるVゾーンの外側(上側)からクラブが振り下ろされた状況に相当する。
また、振り下ろし角度a8の値が第2の基準角度a7の値以上第1の基準角度a6の値以下である場合は、スイング軌道の種類がインサイドインと特定されてもよい。この場合は、いわゆるスイング軌道がVゾーンの範囲内におさまっている状況に相当する。
また、振り下ろし角度a8の値が第2の基準角度a7の値よりも小さい場合は、スイング軌道の種類がインサイドアウトと特定されてもよい。この場合は、いわゆるVゾーンの内側(下側)からクラブが振り下ろされた状況に相当する。
曲がり方向判定部88は、本実施形態では例えば、上述のようにして特定されるクラブヘッドの軌道と、上述のようにして特定される打ち出し方向と、に基づいて、打ち出されたボールの曲がり方向を判定する。曲がり方向判定部88は、クラブヘッドの移動方向と、打ち出し方向と、に基づいて、曲がり方向を判定してもよい。
曲がり方向判定部88は、例えば、符号付きのクラブパス角度a4と符号付きの打ち出し角度a5との差に基づいて、ボールの曲がり方向を判定する。例えば、符号付きのクラブパス角度a4の値と符号付きの打ち出し角度a5の値との差が所定値未満である場合は、ボールは曲がっていない(まっすぐ飛んだ)と判定される。また、例えば、符号付きのクラブパス角度a4の値と符号付きの打ち出し角度a5の値との差が所定値以上であり、符号付きのクラブパス角度a4の値よりも符号付きの打ち出し角度a5の値の方が大きい場合は、ボールは左に曲がると判定される。また、符号付きのクラブパス角度a4の値と符号付きの打ち出し角度a5の値との差が所定値以上であり、符号付きのクラブパス角度a4の値よりも符号付きの打ち出し角度a5の値の方が小さい場合は、ボールは右に曲がると判定される。
また、曲がり方向判定部88は、クラブヘッドの軌道と、打ち出し方向と、に基づいて、打ち出されたボールの曲がり方向及び曲がりの大きさを判定してもよい。例えば、符号付きのクラブパス角度a4の値と符号付きの打ち出し角度a5の値との差の絶対値が、曲がりの大きさを示す曲がり値として特定されてもよい。また、例えば、符号付きのクラブパス角度a4の値と符号付きの打ち出し角度a5の値との差の絶対値の大きさに基づいて、例えば、「大」、「中」、「小」などといった、曲がりの大きさを数段階(例えば、3段階)で評価する曲がり評価値が決定されてもよい。
解析動画像生成部90は、本実施形態では例えば、スイング解析処理の結果を示す画像が撮影動画像に対して重畳された解析動画像を生成する。
解析動画像生成部90は、クラブヘッドの軌道、打ち出し方向に基づいて特定されるインパクトの際のクラブのフェースの向き、及び、ボールの曲がり方向が表現された画像が、撮影動画像に重畳された解析動画像を生成してもよい。例えば、図2に示すインパクト画像48が撮影動画像に含まれるフレーム画像に重畳された解析動画像が生成されてもよい。ここで、スイング軌道種類特定部86によって特定されるスイング軌道の種類が、クラブヘッドの軌道としてインパクト画像48に表現されてもよい。
図21は、インパクト画像48のバリエーションの一例を示す図である。図21には、スイング軌道の種類とフェースの向きの種類との組合せに応じた、9種類のインパクト画像48が示されている。
なお、図21に示すインパクト画像48には、スイング軌道やフェースの向きやボールの曲がり方向の種類が反映されている。なお、インパクト画像48には、スイング軌道やフェースの向きやボールの曲がり方向の種類だけでなく大きさも反映されていてもよい。
例えば、ヘッド移動方向画像50が示すヘッドの移動方向(矢印が並ぶ方向)と上下方向とのなす角度の大きさが、上述のクラブパス角度a4の大きさに応じたものとなっていてもよい。ここで、ヘッド移動方向画像50が示すヘッドの移動方向と上下方向とのなす角度の大きさは、上述のクラブパス角度a4の大きさと同じである必要はない。例えば、ヘッド移動方向画像50が示すヘッドの移動方向と上下方向とのなす角度が、予め定められた変換規則に従ってクラブパス角度a4に基づいて決定される角度であってもよい。
また、例えば、ヘッド移動方向画像50が示すヘッドの移動方向と上下方向とのなす角度が、数段階の角度の大きさのうちから、上述のクラブパス角度a4の大きさに基づいて決定される大きさであってもよい。
また、例えば、図2に示されている、線状のフェース向き画像52の延伸方向と左右方向とのなす角度の大きさが、上述の打ち出し角度a5に応じたものとなっていてもよい。ここで、フェース向き画像52の延伸方向と左右方向とのなす角度は、上述の打ち出し角度a5の大きさと同じである必要はない。例えば、フェース向き画像52の延伸方向と左右方向とのなす角度が、予め定められた変換規則に従って打ち出し角度a5に基づいて決定される角度であってもよい。
また、例えば、線状のフェース向き画像52の延伸方向と左右方向とのなす角度が、数段階の角度の大きさのうちから、上述の打ち出し角度a5の大きさに基づいて決定される大きさであってもよい。
また、ボール方向画像54の曲がりの大きさが、クラブパス角度a4の値と打ち出し角度a5の値との差の絶対値の大きさに応じたものとなっていてもよい。例えば、クラブパス角度a4の値と打ち出し角度a5の値との差の絶対値が大きいほど、ボール方向画像54の曲がりが大きく表現されてもよい。また、例えば、ボール方向画像54の曲がりの大きさが、上述の曲がり評価値に応じたものとなっていてもよい。
また、解析動画像生成部90は、上述の基準角度を表す線が撮影動画像に重畳された解析動画像を生成してもよい。例えば、解析動画像生成部90は、上述の第1の基準角度を表す線と上述の第2の基準角度を表す線とが撮影動画像に重畳された解析動画像を生成してもよい。例えば、図2に示すVゾーン画像56が撮影動画像に含まれるフレーム画像に重畳された解析動画像が生成されてもよい。図2に示すように、Vゾーン画像56は、三角形の画像であり、上辺が図19に示されている線L5に相当し、下辺が図19に示されている線L6に相当する。ここで例えば、Vゾーン画像56の上辺及び下辺が上述の初期位置を通るよう、Vゾーン画像56がフレーム画像内に配置されてもよい。
また、図2に示すように、解析動画像には、上述のようにして特定されるクラブヘッドの軌道に応じた帯状のクラブヘッド軌道エフェクト画像42が重畳されていてもよい。また、解析動画像には、上述のようにして特定されるボールの軌道に応じた帯状のボール軌道エフェクト画像44が重畳されていてもよい。
また、図2に示すように、解析動画像には、上述のスイング解析処理による解析結果を示す解析結果情報46が配置されてもよい。例えば、解析結果情報46には、飛距離算出部80により算出される値(ボール初速度や飛距離等)を示す情報や、スイング軌道種類特定部86によって特定されるスイング軌道の種類を示す情報が含まれていてもよい。
そして、解析動画像生成部90は、本実施形態では例えば、生成される解析動画像を解析動画像記憶部92に記憶させる。
解析動画像記憶部92は、本実施形態では例えば、解析動画像生成部90が生成する解析動画像を記憶する。
表示制御部94は、本実施形態では例えば、ユーザ端末10のユーザからの要求に応じて、解析動画像記憶部92に記憶されている解析動画像をタッチパネル26に表示させる。このように、表示制御部94が、上述の基準角度と、上述の振り下ろし角度と、の比較結果をユーザに通知してもよい。例えば、表示制御部94が、上述の基準角度と上述の振り下ろし角度との比較結果に基づいて特定されるスイング軌道の種類をユーザに通知してもよい。
ここで、本実施形態に係るユーザ端末10で行われる処理の流れの一例を、図22に例示するフロー図を参照しながら説明する。
まず、撮影動画像取得部70が、撮影動画像を取得する(S101)。
そして、プレイヤ領域特定部72が、プレイヤ領域96を特定する(S102)。
そして、比較結果画像生成部74が、S101に示す処理で取得された撮影動画像に基づいて、複数の比較結果画像を生成する(S103)。
そして、起点領域特定部76が、S102に示す処理で特定されたプレイヤ領域96に基づいて、起点領域100を特定する(S104)。
そして、ボール弾道特定部78が、S103に示す処理で生成された比較結果画像に基づいて、ボールの弾道を特定する(S105)。
そして、飛距離算出部80が、S101に示す処理で取得された撮影動画像に写るスイングでのショットの飛距離等を算出する(S106)。
そして、クラブヘッド軌道特定部82が、S101に示す処理で取得された撮影動画像に基づいて、クラブヘッドの軌道を特定する(S107)。
そして、打ち出し方向特定部84が、S105に示す処理で特定されたボールの弾道に基づいて、ボールの打ち出し方向を特定する(S108)。
そして、スイング軌道種類特定部86が、S107に示す処理で特定されたクラブヘッドの軌道と、S108に示す処理で特定されたボールの打ち出し方向と、に基づいて、S101に示す処理で取得された撮影動画像に写るスイングにおけるスイング軌道の種類を特定する(S109)。
そして、曲がり方向判定部88が、S107に示す処理で特定されたクラブヘッドの軌道と、S108に示す処理で特定されたボールの打ち出し方向と、に基づいて、当該ショットでのボールの曲がり方向を判定する(S110)。
そして、解析動画像生成部90が、S101に示す処理で取得された撮影動画像と、S105~S110に示す処理の結果と、に基づいて、解析動画像を生成する(S111)。
そして、解析動画像生成部90が、S111に示す処理で生成された解析動画像を解析動画像記憶部92に記憶させて(S112)、本処理例に示す処理は終了される。
なお、上述のように、S109に示す処理で、スイング軌道種類特定部86が、振り下ろし角度及び基準角度を特定してもよい。そして、スイング軌道種類特定部86が、特定された振り下ろし角度及び基準角度に基づいて、S101に示す処理で取得された撮影動画像に写るスイングにおけるスイング軌道の種類を特定してもよい。
本実施形態では、ゴルフのスイングをしているプレイヤを撮影するだけで、フェースの向きを直接計測することなく、ボールの曲がり方向を的確に判定することができる。このようにして、本実施形態によれば、一般的なプレイヤがゴルフ場やゴルフ練習場などでスマートフォン等を用いて手軽にゴルフスイングの解析を行うことができることとなる。
また、本実施形態では、ゴルフのスイングをしているプレイヤを撮影するだけで、上述の基準角度と上述の振り下ろし角度との比較が行われる。そのため、本実施形態によれば、適正なスイングプレーン角度の範囲などといったゴルフに関する知識を持たない一般的なプレイヤであっても、基準角度と振り下ろし角度との比較結果を知ることで、正しくスイングできたのか否かを容易に把握できることとなる。
また、本実施形態では、上述のように、上述の基準角度と、上述の振り下ろし角度と、に基づいて、当該スイングにおけるスイング軌道の種類が的確に特定される。そのため、本実施形態によれば、一般的なプレイヤであっても、自らのスイング軌道の種類を知ることで、正しいスイング軌道でスイングできたのか否かを容易に把握できることとなる。
なお、本実施形態において、上述の第1の基準角度が、肩の位置に基づいて特定される必要はなく、例えば、プレイヤ40の首筋の位置に基づいて特定されてもよい。
また例えば、上述の第1の基準角度が、ボールの初期位置に基づいて特定される必要はなく、例えば、ユーザによって指定される位置やアドレス時のクラブヘッドの位置に基づいて特定されてもよい。
また例えば、上述の第2の基準角度が、シャフトの位置に基づいて特定される必要はなく、例えば、プレイヤ40の腰の位置に基づいて特定されてもよい。例えば、上述の第2の基準角度が、プレイヤ40の腰の位置とボールの初期位置とを結ぶ線や、プレイヤ40の腰の位置とアドレス時のクラブヘッドの位置とを結ぶ線に基づいて特定されてもよい。
また、基準角度は2つ特定される必要なく、1つの基準角度に基づいて、スイング軌道の種類は特定されてもよい。例えば、1つの基準角度に基づいて、アウトサイドインであるか否かが特定されてもよい。また、例えば、1つの基準角度に基づいて、インサイドアウトであるか否かが特定されてもよい。
また、図3に示されている処理の全部又は一部が、ユーザ端末10と通信可能なサーバで実装されていてもよい。
[第2実施形態]
以下、本発明の一実施形態である第2実施形態について図面に基づき詳細に説明する。
図23は、本実施形態に係るボール位置共有システム200の構成の一例を示す図である。ボール位置共有システム200には、地図データ提供サーバ202と、複数のユーザ端末10と、が含まれる。
図23に示すように、ボール位置共有システム200に、ゴルフ場におけるゴルフプレイにおいて、一緒にラウンドする4人のプレイヤのそれぞれが所持している4つのユーザ端末10(10a、10b、10c、及び、10d)が含まれていてもよい。以下、ユーザ端末10a、10b、10c、10dを所持しているプレイヤを、それぞれ、プレイヤA、プレイヤB、プレイヤC、プレイヤDと呼ぶこととする。
本実施形態に係るユーザ端末10の構成は、第1実施形態で説明したユーザ端末10と同様であるので説明を省略する。
地図データ提供サーバ202は、本実施形態では例えば、各画素に地理的位置(例えば、緯度及び経度)が関連付けられた航空画像、衛星画像、地図画像などの画像を含む地図データを提供するサーバである。
ユーザ端末10、地図データ提供サーバ202は、インターネット等のコンピュータネットワーク204に接続されている。そのため、コンピュータネットワーク204を介して、ユーザ端末10と地図データ提供サーバ202とは互いに通信可能となっており、ユーザ端末10同士も互いに通信可能となっている。なお、ユーザ端末10同士が、例えば、Bluetooth(登録商標)等の近距離無線通信によって、コンピュータネットワーク204を介さずに直接通信できるようになっていてもよい。
本実施形態では例えば、ゴルフ場でのゴルフプレイにおいて、第1実施形態と同様にして、ユーザ端末10に含まれるカメラ部28によって、プレイヤがゴルフボールをショットしている様子が撮影される。そして、プレイヤがゴルフボールをショットしている様子が写る撮影動画像が生成される。
本実施形態では、カメラ部28の位置に対するプレイヤの位置が所定の位置となり、撮影方向に対するプレイヤの向きが所定の向きとなるよう、ユーザ端末10の位置及び傾きの調整が行われることとする。なお、本実施形態では、撮影方向は水平面に沿った方向であることとする。
そして、本実施形態では例えば、撮影動画像に基づいて、図24に例示されているホール画像206が生成される。そして、生成されるホール画像206が、当該ユーザ端末10に含まれるタッチパネル26に表示される。
図24に示すように、ホール画像206には、例えば、ボール位置画像208と、ナビゲーション情報210と、端末位置画像212と、が含まれる。ボール位置画像208は、例えば、ショットされたボールの地理的位置を示す画像である。図24に示すように、ボール位置画像208のそばに、ショットを行ったプレイヤの名前等のプレイヤの識別情報を表す文字列が配置されていてもよい。
ナビゲーション情報210には、例えば、残り距離や、次のショットでの使用を推奨する番手、などといった、プレイヤに提示される情報を表す文字列が含まれる。
端末位置画像212は、例えば、撮影動画像の撮影時におけるユーザ端末10の地理的位置を示す画像である。
図25は、本実施形態に係るホール画像206の別の一例を示す図である。図25に示すように、ホール画像206に、ボール位置画像208に示されているボールの地理的位置の精度に応じた画像である予測範囲画像214が含まれていてもよい。図25の例における予測範囲画像214は、円形の画像であり、精度が高いほど半径が小さくなる。
また、図25に示すように、ナビゲーション情報210には、残り距離の範囲が示されていてもよい。また、図25に示すように、ナビゲーション情報210には、次のショットでの使用を推奨する番手が複数示されていてもよい。
以上のようにして、本実施形態によれば、ユーザ端末10のユーザは、ショットされたボールの地理的位置などを確認できることとなる。
なお、図24や図25に示すホール画像206にナビゲーション情報210が含まれていなくてもよい。
また、本実施形態において、例えば、図26に示すように、複数のボール位置画像208、複数の予測範囲画像214、及び、ナビゲーション情報210が含まれているホール画像206が生成されてもよい。ここで、ボール位置画像208と予測範囲画像214との組合せは、当該ホールでショットを行ったプレイヤに対応付けられている。また、図26に示すナビゲーション情報210には、例えば、各プレイヤの残り距離、各プレイヤについて次のショットでの使用を推奨する番手、残り距離が長い順序(一般的には、次のショットでの打順に対応付けられる)、などを表す文字列が含まれる。
図26に示すホール画像206に、予測範囲画像214が含まれていなくてもよい。また、図26に示すホール画像206に、ナビゲーション情報210が含まれていなくてもよい。また、図26に示すナビゲーション情報210において、残り距離の範囲の代わりに、図24に示すような残り距離が示されていてもよい。また、図26に示すように、ナビゲーション情報210において、次のショットでの使用を推奨する番手が1つだけ示されてもよいし、複数示されてもよい。また、図26に示すホール画像206に、端末位置画像212が含まれていてもよい。
以下、上述のホール画像206の生成や表示に係る処理を中心に、本実施形態に係るユーザ端末10の機能、及び、本実施形態に係るユーザ端末10で実行される処理についてさらに説明する。
図27は、本実施形態に係るユーザ端末10で実装される機能の一例を示す機能ブロック図である。なお、本実施形態に係るユーザ端末10で、図27に示す機能のすべてが実装される必要はなく、また、図27に示す機能以外の機能が実装されていても構わない。
本実施形態に係るユーザ端末10は、ショットされたボールの地理的位置を特定するボール位置特定システムとしての機能を有する。そして、図27に示すように、本実施形態に係るユーザ端末10には、機能的には例えば、撮影動画像取得部70、プレイヤ領域特定部72、比較結果画像生成部74、起点領域特定部76、ボール弾道特定部78、表示制御部94、ショット特定部220、端末位置方位特定部222、ボール位置特定部224、精度特定部226、残り距離特定部228、ショット番手情報取得部230、推奨番手特定部232、プレイヤ情報取得部234、ボールデータ生成部236、ボールデータ送信部238、ボールデータ受信部240、地図データ取得部242、ホール画像生成部244、が含まれる。
撮影動画像取得部70、プレイヤ領域特定部72、比較結果画像生成部74、起点領域特定部76、ボール弾道特定部78、ショット特定部220、ボール位置特定部224、精度特定部226、残り距離特定部228、推奨番手特定部232、ボールデータ生成部236、ホール画像生成部244は、プロセッサ20を主として実装される。表示制御部94、ショット番手情報取得部230、プレイヤ情報取得部234は、プロセッサ20及びタッチパネル26を主として実装される。端末位置方位特定部222は、プロセッサ20及びセンサ部30を主として実装される。ボールデータ送信部238、ボールデータ受信部240、地図データ取得部242は、通信部24を主として実装される。
以上の機能は、コンピュータであるユーザ端末10にインストールされた、以上の機能に対応する指令を含むプログラムをユーザ端末10で実行することにより実装されてもよい。また、このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介してユーザ端末10に供給されてもよい。
撮影動画像取得部70、プレイヤ領域特定部72、比較結果画像生成部74、起点領域特定部76、ボール弾道特定部78の機能は、それぞれ、第1実施形態において説明した撮影動画像取得部70、プレイヤ領域特定部72、比較結果画像生成部74、起点領域特定部76、ボール弾道特定部78の機能と同様であるため、説明を省略する。
ショット特定部220は、本実施形態では例えば、ショットされたゴルフボールを測定したユーザ端末10から取得される、当該ゴルフボールに係る測定値に基づいて、当該ゴルフボールの飛距離及び当該測定の際にユーザ端末10が向いている方向に対する角度を特定する。ショット特定部220は、例えば、ゴルフボールの飛距離及び当該測定の際にユーザ端末10が向いている方向に対する水平角度を特定する。ここで水平角度とは、水平面に沿った角度を言うこととする。
ショット特定部220に、第1実施形態における飛距離算出部80の機能と同様の機能が実装されていてもよい。この場合に例えば、図15に最終左右角度と示されている、左右角度の最終値として算出された符号付きの値が、ユーザ端末10が向いている方向に対する角度を示す値として特定されてもよい。
ここで例えば、第1実施形態で説明したようにして、ボール弾道特定部78が、プレイヤがゴルフボールをショットしている様子が写る撮影動画像に含まれる少なくとも1つのフレーム画像について、当該フレーム画像内に写るゴルフボールの位置である画像内位置を特定してもよい。例えば、第1実施形態で説明した弾道ボール位置が、特定される画像内位置に相当する。そして、ショット特定部220が、特定される画像内位置に基づいて、ゴルフボールの飛距離及び測定の際にユーザ端末10が向いている方向に対する角度を特定してもよい。
なお、ショット特定部220は、撮影動画像に基づいて、上述の飛距離や上述の角度を特定する必要はない。例えば、センサ部30がレーザセンサを備えている場合に、当該レーザセンサによる測定値に基づいて、上述の飛距離や上述の角度が特定されてもよい。
端末位置方位特定部222は、本実施形態では例えば、上述の測定の際のユーザ端末10の地理的位置である端末位置及び当該測定の際にユーザ端末10が向いている方位である端末方位を特定する。ここでユーザ端末10の地理的位置として、例えば、ユーザ端末10の緯度、及び、経度が特定されてもよい。なお、特定される地理的位置は、緯度や経度には限定されない。
ボール位置特定部224は、本実施形態では例えば、上述の端末位置、上述の端末方位、ショット特定部220により特定される飛距離、及び、ショット特定部220により特定される角度、に基づいて、ショットされたゴルフボールの地理的位置であるボール位置を特定する。ここでショットされたゴルフボールの地理的位置として、例えば、当該ゴルフボールの緯度、及び、経度が特定されてもよい。なお、特定される地理的位置は、緯度や経度には限定されない。
精度特定部226は、本実施形態では例えば、ショット特定部220により特定される飛距離又は角度のうちの少なくとも一方の精度を特定する。ここで、精度特定部226は、上述の画像内位置が特定されるフレーム画像の数に基づいて、当該精度を特定してもよい。例えば、画像内位置が特定されるフレーム画像の数が多いほど、精度を示す値として大きな値が特定されてもよい。なお、フレーム画像の数と精度との関連付けを示すデータが精度特定部226に記憶されていてもよい。この関連付けは、数式形式であってもよいし、テーブル形式であってもよい。そして、このデータに基づいて、精度を示す値が特定されてもよい。なお、飛距離又は角度のうちの少なくとも一方の精度は、画像内位置が特定されるフレーム画像の数に基づいて特定される必要はない。
一般的に、ショット特定部220により特定される飛距離が長いほど、精度特定部226によって特定される精度を示す値は小さくなる可能性が高い。
残り距離特定部228は、本実施形態では例えば、ボール位置特定部224により特定されるボール位置に基づいて、ゴルフプレイがされているホールにおける残り距離を特定する。ここで、残り距離特定部228に、例えば、ゴルフプレイがされているホールのグリーンのセンターの地理的位置、又は、ピンの地理的位置を示すグリーン位置データが記憶されていてもよい。そして、残り距離特定部228が、グリーン位置データと、ボール位置特定部224により特定されるボール位置と、に基づいて、残り距離を特定してもよい。
また、残り距離特定部228が、ボール位置特定部224によって特定されるボール位置と、精度特定部226によって特定される上述の精度と、に基づいて、残り距離の範囲を特定してもよい。残り距離特定部228は、例えば、精度特定部226によって特定される精度を示す値が大きいほど、範囲の大きさが小さくなるよう、残り距離の範囲が特定されてもよい。
例えば、ボール位置に基づいて、残り距離が140ヤードと特定されたとする。この場合、精度を示す値が80%以上である場合は、範囲の大きさが0ヤードと特定されてもよい。この場合は、140ヤードが残り距離の範囲として特定される。また、精度を示す値が60%以上80%未満である場合は、範囲の大きさが10ヤードと特定されてもよい。この場合は、135ヤード~145ヤードが残り距離の範囲として特定される。また、精度を示す値が40%以上60%未満である場合は、範囲の大きさが20ヤードと特定されてもよい。この場合は、130ヤード~150ヤードが残り距離の範囲として特定される。
ショット番手情報取得部230は、本実施形態では例えば、撮影動画像に写るショットで使用される番手を示すショット番手情報を取得する。例えば、撮影動画像の撮影前、又は、撮影動画像の撮影後に、撮影動画像に写るショットで使用されるクラブの番手を指定する入力操作がユーザによって行われるようにしてもよい。そして、ショット番手情報取得部230が、当該入力操作によって指定される番手を示すショット番手情報を取得してもよい。また、ショット番手情報取得部230は、例えば、撮影動画像に対して画像認識処理を実行することによって、当該撮影動画像に写るショットで使用されたクラブの番手を特定してもよい。そして、ショット番手情報取得部230は、当該番手を示すショット番手情報を取得してもよい。
推奨番手特定部232は、本実施形態では例えば、ショット特定部220により特定される飛距離と、残り距離特定部228により特定される残り距離と、に基づいて、次のショットでの使用を推奨する番手を特定する。以下、このようにして特定される番手を推奨番手と呼ぶこととする。
推奨番手特定部232は、例えば、ショット特定部220により特定される飛距離と、ショット番手情報取得部230により取得されるショット番手情報が示す番手と、に基づいて、図28や図29に示すような、番手と飛距離とが対応付けられた番手飛距離対応データを生成してもよい。図28には、ドライバーショットがされた際において特定される飛距離が240ヤードである場合に生成される番手飛距離対応データが示されている。図29には、ドライバーショットがされた際において特定される飛距離が160ヤードである場合に生成される番手飛距離対応データが示されている。
ここで例えば、推奨番手特定部232が予め保持している計算式を示すデータや対応テーブルに基づいて、番手飛距離対応データが生成されてもよい。
そして、推奨番手特定部232は、番手飛距離対応データと、残り距離特定部228により特定される残り距離と、に基づいて、推奨番手を特定してもよい。例えば、番手飛距離対応データにおいて、残り距離と一致する飛距離、又は、残り距離に最も近い飛距離に対応付けられている番手が、推奨番手として特定されてもよい。例えば、残り距離が140ヤードであって、生成される番手飛距離対応データが図28に示すものである場合には、8番アイアンが推奨番手として特定されてもよい。一方、残り距離が140ヤードであって、生成される番手飛距離対応データが図29に示すものである際には、3番ウッドが推奨番手として特定されてもよい。
ここで、推奨番手特定部232が、残り距離の範囲に応じた数の推奨番手を特定してもよい。また、推奨番手特定部232が、特定される飛距離及び残り距離の範囲に応じた数の推奨番手を特定してもよい。例えば、番手飛距離対応データにおいて、残り距離の範囲に含まれる飛距離に対応付けられている1又は複数の番手が、推奨番手として特定されてもよい。あるいは、番手飛距離対応データにおいて、残り距離の範囲に最も近い飛距離に対応付けられている番手が推奨番手として特定されてもよい。例えば、残り距離の範囲が130ヤード~150ヤードであって、生成される番手飛距離対応データが図28に示すものである際には、7番アイアン、8番アイアン、及び、9番アイアンが推奨番手として特定されてもよい。
また例えば、残り距離の範囲が125ヤード~135ヤードであって、生成される番手飛距離対応データが図29に示すものである際には、5番ウッドが推奨番手として特定されてもよい。
なおドライバーは推奨番手として特定されないようにしてもよい。例えば、残り距離の範囲が170ヤード~180ヤードであって、生成される番手飛距離対応データが図29に示すものである場合に、ドライバーではなく3番ウッドが推奨番手として特定されるようにしてもよい。
また、ショット特定部220により特定される飛距離と、精度特定部226により特定される精度と、ショット番手情報取得部230により取得されるショット番手情報が示す番手と、に基づいて、番手と飛距離の範囲が対応付けられた番手飛距離対応データが生成されてもよい。番手飛距離対応データにおいて、飛距離の範囲の一部又は全部が残り距離の範囲と重複する飛距離の範囲に対応付けられている番手が推奨番手として特定されてもよい。
プレイヤ情報取得部234は、本実施形態では例えば、撮影動画像に写るプレイヤの名前等のプレイヤの識別情報を示すプレイヤ情報を取得する。プレイヤ情報取得部234は、撮影動画像の撮影前、又は、撮影動画像の撮影後におけるユーザの操作によって入力される、プレイヤの名前等のプレイヤの識別情報を示すプレイヤ情報を取得してもよい。
ボールデータ生成部236は、本実施形態では例えば、ボール位置特定部224によって特定されるボール位置を示すボール位置データを含むボールデータを生成する。ここで、ボールデータ生成部236は、残り距離特定部228によって特定される残り距離あるいは残り距離の範囲を示す残り距離データを含むボールデータを生成してもよい。また、ボールデータ生成部236は、精度特定部226によって特定される精度を示す精度データを含むボールデータを生成してもよい。また、ボールデータ生成部236は、推奨番手特定部232によって特定されるクラブの番手を示す推奨番手データを含むボールデータを生成してもよい。また、ボールデータ生成部236は、プレイヤ情報取得部234が取得するプレイヤ情報を含むボールデータを生成してもよい。
ボールデータ送信部238は、本実施形態では例えば、上述のボール位置を示すボール位置データを送信する。例えば、ボールデータ送信部238は、ボールデータ生成部236によって生成されるボールデータを他のユーザ端末10に送信する。
ボールデータ受信部240は、本実施形態では例えば、上述のボール位置を示すボール位置データを受信する。例えば、ボールデータ受信部240は、他のユーザ端末10から送信されるボールデータを受信する。ボール位置特定部224は、ボールデータ受信部240が受信するボール位置データに基づいて、当該ボール位置データに対応付けられるボール位置を特定してもよい。
例えば、プレイヤAが、ユーザ端末10aで、プレイヤBが写る撮影動画像を撮影したとする。そして、ユーザ端末10aにおいて、当該撮影動画像に基づいて、ボールデータが生成されたとする。この場合、プレイヤAがユーザ端末10aに対して所定の送信操作を行い、プレイヤBがユーザ端末10bに対して所定の受信操作を行うことで、生成されたボールデータが、ユーザ端末10aからユーザ端末10bに送信されるようにしてもよい。このようにして、本実施形態では、プレイヤAのユーザ端末10aでプレイヤBのショットが写る撮影動画像の撮影が行われても、プレイヤBは、この撮影動画像に基づくボールデータをユーザ端末10bで取り扱うことができることとなる。
また、ボール位置特定部224は、互いに異なるプレイヤによりショットされた複数のゴルフボールについてのボール位置を特定してもよい。例えば、ユーザ端末10aのボールデータ生成部236が、プレイヤAについてのボールデータを生成してもよい。そして、ユーザ端末10aのボールデータ受信部240が、ユーザ端末10bからプレイヤBについてのボールデータを受信してもよい。そして、ユーザ端末10aのボールデータ受信部240が、ユーザ端末10cからプレイヤCについてのボールデータを受信してもよい。そして、ユーザ端末10aのボールデータ受信部240が、ユーザ端末10dからプレイヤDについてのボールデータを受信してもよい。
そして、ボール位置特定部224は、ボールデータ生成部236によって生成されるプレイヤAのボールデータと、ボールデータ受信部240が受信するプレイヤB、プレイヤC、及び、プレイヤDのボールデータと、に基づいて、プレイヤA、プレイヤB、プレイヤC、及び、プレイヤDにそれぞれ対応付けられる複数のボール位置を特定してもよい。
地図データ取得部242は、本実施形態では例えば、各画素に地理的位置(例えば、緯度及び経度)が関連付けられた、ゴルフプレイが行われているゴルフ場の航空画像、衛星画像、地図画像などの画像を含む、地図データを取得する。地図データ取得部242は、例えば、ユーザの入力操作によって指定されたゴルフ場の地図データを、地図データ提供サーバ202から受信してもよい。また、ユーザ端末10の記憶部22に地図データが記憶されており、地図データ取得部242が、記憶部22に記憶されている地図データを取得してもよい。
ホール画像生成部244は、本実施形態では例えば、図24~図26に例示されているホール画像206を生成する。ここで、例えば、ホール画像生成部244は、ボール位置特定部224により特定されるゴルフボールの地理的位置に対応付けられる、地図データ取得部242が取得する地図データに含まれる画像内の位置にボール位置画像208が重畳配置されたホール画像206を生成してもよい。
また、ホール画像生成部244は、ボール位置画像208の位置を中心とした、精度特定部226により特定される精度に対応付けられる半径の円形の画像である予測範囲画像214が重畳配置されたホール画像206を生成してもよい。例えば、精度と半径の関連付けを示すデータがホール画像生成部244に記憶されていてもよい。この関連付けは、数式形式であってもよいし、テーブル形式であってもよい。そして、このデータに基づいて、予測範囲画像214の半径が決定されてもよい。ここで例えば、特定される精度を示す値が大きいほど、決定される半径は小さくなるようにしてもよい。また、特定される残り距離の範囲に相当する予測範囲画像214が配置された重畳配置されたホール画像206が生成されるようにしてもよい。
また、ホール画像生成部244は、端末位置方位特定部222により特定される端末位置に対応付けられる、地図データ取得部242が取得する地図データに含まれる画像内の位置に端末位置画像212が重畳配置されたホール画像206を生成してもよい。
また、ホール画像生成部244は、残り距離特定部228により特定される残り距離や、推奨番手特定部232により特定される推奨番手を表す文字列を含むナビゲーション情報210が重畳配置されたホール画像206を生成してもよい。
また、ホール画像生成部244は、複数のプレイヤのそれぞれについて、当該プレイヤのプレイヤ情報を表す文字列に関連付けられた、当該プレイヤのショットにおけるボール位置を示すボール位置画像208が重畳配置されたホール画像206を生成してもよい。また、ホール画像生成部244は、複数のプレイヤのそれぞれについて、当該プレイヤに対応付けられるボール位置画像208の位置を中心とした、当該プレイヤについての上述の精度に対応付けられる半径の円形の画像である予測範囲画像214が重畳配置されたホール画像206を生成してもよい。また、複数のプレイヤのそれぞれについて、当該プレイヤについての残り距離や推奨番手を表す文字列を含むナビゲーション情報210が重畳配置されたホール画像206を生成してもよい。
また、ホール画像生成部244は、ボールデータ受信部240が受信するボールデータに基づいて、ホール画像206を生成してもよい。ここで例えば、ユーザ端末10aのホール画像生成部244が、ユーザ端末10aから取得される測定値に基づいて特定されるボール位置と、ユーザ端末10b、ユーザ端末10c、及び、ユーザ端末10dのそれぞれから受信するボール位置データと、に基づいて特定される複数のボール位置が示されたホール画像206を生成してもよい。
また、ホール画像生成部244は、ボールデータに含まれる残り距離データに基づいて、複数のプレイヤについての残り距離が長い順序を特定してもよい。そして、ホール画像生成部244は、図26に示すように、残り距離が長い順序を表す文字列を含むナビゲーション情報210が重畳配置されたホール画像206を生成してもよい。あるいは、ホール画像生成部244は、最も残り距離が長いプレイヤが識別表示された(例えば、最も残り距離が長いプレイヤのプレイヤ情報が配置された)ホール画像206を生成してもよい。一般的に、最も残り距離が長いプレイヤが、次にショットすべきプレイヤであるため、このようにすると、次に誰がショットすべきかを的確に把握することができることとなる。
また、ホール画像生成部244は、最も残り距離が長いプレイヤについての、残り距離あるいは残り距離の範囲や、推奨番手を表す文字列を含むナビゲーション情報210が重畳配置されたホール画像206を生成してもよい。
表示制御部94は、本実施形態では例えば、図24~図26に例示されているホール画像206をタッチパネル26に表示させる。図26に示すように、表示制御部94は、複数のボール位置を、ユーザ端末10が備えるタッチパネル26に表示させてもよい。ここで例えば、所定の表示操作に応じて、ホール画像206が表示されるようにしてもよい。
また、ユーザ端末10の表示制御部94が、当該ユーザ端末10から取得される測定値に基づいて特定されるボール位置と、受信するボール位置データに基づいて特定されるボール位置とを、タッチパネル26に表示させてもよい。
また、表示制御部94が、図26に示すように、複数のプレイヤについての残り距離の順序に関する情報が示されたホール画像206を表示させてもよい。この場合、表示制御部94は、複数のボール位置に基づいて生成される、複数のプレイヤについての残り距離の順序に関する情報を通知する通知部としての役割を担うこととなる。
なお、複数のプレイヤについての残り距離の順序に関する情報の通知は、図26に示す態様には限定されない。例えば、残り距離が最も長いプレイヤが使用しているユーザ端末10の表示制御部94が、次の打順であることを表す情報をタッチパネル26に表示させることで、当該通知が行われるようにしてもよい。また、表示制御部94が通知部としての役割を担う必要はない。例えば、残り距離が最も長いプレイヤが使用しているユーザ端末10から所定の音声出力がされるようにすることで、当該通知が行われるようにしてもよい。
ここで、本実施形態に係るユーザ端末10で行われる処理の流れの一例を、図30に例示するフロー図を参照しながら説明する。
まず、地図データ取得部242が、地図データを取得する(S201)。
そして、プレイヤ情報取得部234が、ショットを行うプレイヤのプレイヤ情報を取得する(S202)。
そして、ショット番手情報取得部230が、当該ショットにおいて使用される番手を示すショット番手情報を取得する(S203)。
そして、撮影動画像の撮影が開始され、S204~S208に示す処理が実行される。S204~S208に示す処理は、S101~S105に示す処理と同様の処理であるので、その説明を省略する。
S208に示す処理でボールの弾道が特定されると、ショット特定部220が、S204に示す処理で取得された撮影動画像に写るショットにおけるゴルフボールの飛距離及び測定の際にユーザ端末10が向いている方向に対する角度を特定する(S209)。
そして、端末位置方位特定部222が、撮影動画像の撮影の際のユーザ端末10の端末位置及び端末方位を特定する(S210)。
そして、ボール位置特定部224が、S210に示す処理で特定された端末位置及び端末方位、並びに、S209に示す処理で特定された飛距離及び角度、に基づいて、ボール位置を特定する(S211)。
そして、精度特定部226が、S204に示す処理で取得された撮影動画像に含まれるフレーム画像のうち、弾道ボール位置が特定されたフレーム画像の数に基づいて、S209に示す処理での飛距離及び角度の特定の精度を特定する(S212)。
そして、残り距離特定部228が、S211に示す処理で特定されたボール位置と、S212に示す処理で特定された精度と、に基づいて、残り距離の範囲を特定する(S213)。
そして、推奨番手特定部232が、S203に示す処理で取得されたショット番手情報が示す番手、S209に示す処理で特定された飛距離、及び、S213に示す処理で特定された残り距離の範囲に基づいて、少なくとも1つの推奨番手を特定する(S214)。
そして、ボールデータ生成部236が、S211に示す処理で特定されたボール位置を示すボール位置データ、S212に示す処理で特定された精度を示す精度データ、S213に示す処理で特定された残り距離の範囲を示す残り距離データ、S214に示す処理で特定された推奨番手を示す推奨番手データ、及び、S202に示す処理で取得されたプレイヤ情報、を含む、ボールデータを生成する(S215)。
そして、ホール画像生成部244が、S215に示す処理で生成されたボールデータに基づいて、ホール画像206を生成する(S216)。
そして、表示制御部94が、S216に示す処理で生成されたホール画像206をタッチパネル26に表示させて(S217)、本処理例に示す処理は終了される。
なお、S215に示す処理で生成されたボールデータは、ユーザの操作に応じて他のユーザ端末10に送信されるようにしてもよい。
また、S216に示す処理の前に他のユーザ端末10から受信したボールデータがある場合は、S216に示す処理で、S215に示す処理で生成されたボールデータ、及び、これらの受信したボールデータに基づいて、ホール画像206が生成されてもよい。
以上で説明したようにして、本実施形態では、ゴルフボールを測定するユーザ端末10を所定の位置に固定することなく、ショットされたゴルフボールの地理的位置を的確に特定できることとなる。
なお、本発明は上述の実施形態に限定されるものではない。
例えば地図データが地形の3Dモデルを含む場合は、ボール位置特定部224により特定される位置における傾斜に基づいて、最終的なボール位置が決定されるようにしてもよい。
また、撮影動画像の撮影前におけるユーザ端末10に対する所定の操作に応じて、端末位置画像212が含まれるホール画像206が当該ユーザ端末10のタッチパネル26に表示されるようにしてもよい。なお、このホール画像206にはボール位置画像208やナビゲーション情報210や予測範囲画像214は含まれない。
また、本発明は、ティーショットにおいてショットされたゴルフボールの地理的位置を特定する場面に限らず、セカンドショット以降においてショットされたゴルフボールの地理的位置を特定する場面にも適用可能である。
また、上記の具体的な文字列や数値及び図面中の具体的な文字列や数値は例示であり、これらの文字列や数値には限定されない。