JP2010540036A - 物体の位置及び運動検出システム、及び方法 - Google Patents

物体の位置及び運動検出システム、及び方法 Download PDF

Info

Publication number
JP2010540036A
JP2010540036A JP2010525999A JP2010525999A JP2010540036A JP 2010540036 A JP2010540036 A JP 2010540036A JP 2010525999 A JP2010525999 A JP 2010525999A JP 2010525999 A JP2010525999 A JP 2010525999A JP 2010540036 A JP2010540036 A JP 2010540036A
Authority
JP
Japan
Prior art keywords
ball
camera
image
club
spin
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010525999A
Other languages
English (en)
Other versions
JP5719170B2 (ja
Inventor
ティモシー ジェイ ロック
Original Assignee
プレイデータ エルエルシー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by プレイデータ エルエルシー filed Critical プレイデータ エルエルシー
Publication of JP2010540036A publication Critical patent/JP2010540036A/ja
Application granted granted Critical
Publication of JP5719170B2 publication Critical patent/JP5719170B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00Training appliances or apparatus for special sports
    • A63B69/36Training appliances or apparatus for special sports for golf
    • A63B69/3658Means associated with the ball for indicating or measuring, e.g. speed, direction
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0021Tracking a path or terminating locations
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A63B2024/0012Comparing movements or motion sequences with a registered reference
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0021Tracking a path or terminating locations
    • A63B2024/0028Tracking the path of an object, e.g. a ball inside a soccer pitch
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0021Tracking a path or terminating locations
    • A63B2024/0028Tracking the path of an object, e.g. a ball inside a soccer pitch
    • A63B2024/0034Tracking the path of an object, e.g. a ball inside a soccer pitch during flight
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/05Image processing for measuring physical parameters
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/30Speed
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/30Speed
    • A63B2220/34Angular speed
    • A63B2220/35Spin
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/806Video cameras
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2225/00Miscellaneous features of sport apparatus, devices or equipment
    • A63B2225/74Miscellaneous features of sport apparatus, devices or equipment with powered illuminating means, e.g. lights
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B37/00Solid balls; Rigid hollow balls; Marbles
    • A63B37/0003Golf balls
    • A63B37/0022Coatings, e.g. paint films; Markings
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B45/00Apparatus or methods for manufacturing balls
    • A63B45/02Marking of balls
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00Training appliances or apparatus for special sports
    • A63B69/0002Training appliances or apparatus for special sports for baseball

Abstract

ライト(43)と協働する第1のカメラ(42)と、ライト(45)と協働する第2のカメラ(44)と、によって観察される第1の視野領域(40)を利用する、目標の場所及び運動を検出するためのシステム及び方法である。第1の視野領域(40)を包囲する視野領域(47)を観察するために、第3のカメラ(46)を追加することができる。第1のカメラ(42)は時空間点(51)及び(53)において第1の軌道ライン(55)に沿って画像を取得する。第2のカメラ(44)は時空間点(52)及び(54)において第2の軌道ライン(56)に沿って画像を取得する。この情報を組み合わせて、目標の3D軌道ライン(50)が生成される。
【選択図】図9A

Description

本発明は、ボール、クラブ/バットを位置決めするために機械視覚を用いること、及び人によるクラブ/バットの使用へと向けられている。
アスリートが成功するための機会を増すこととしては、アスリートの運動を概算的に測定することや、それら測定値を一般統計データに照らして分析することが含まれうる。現在のところ、ゴルファー等のアスリートは、カメラやライトを含む、ゴルフボールの打ち上げに対するデータ(速度、打ち上げ角度、スピン)やクラブデータを捕捉するための多くのやり方のうちの1つを用いて、彼らのゴルフスイングを分析することができる。それら現在の先行技術システムにおける幾つかの欠点は、本発明により克服される。我々の開発したシステムはそれら先行技術の方法及び装置のいずれによって与えられるものでもないのであって、それには具体的に幾つかの理由がある。
1.ボールのスピンは、特別な光学的性質を有するボール上の目標のパターンを用いて見出される(米国特許出願第20070060410号)。それら目標のタイプに依存する処理が説明されている。
2.特別なマーキングパターンを用いる、ボールのスピンにおける他のやり方が特許されている。そのやり方は、我々が現在用いているやり方とは異なるものである。
3.取得の設定は固有のものであって、我々が用いているものとは異なる。そのやり方は、設定及び取得される画像の形状(配置)、及び取得のタイミングと同期において、異なるものである。
4.開示されているやり方は全て、極端に高い分解能を得ることができ、且つノイズデータを低くできるということを仮定しているように見える。そのようなやり方のほとんどは、ボール上の2つの「固定位置」(“fixes”)を用いてスピンを計算できるということを前提にしている。このことは正しいのではあるが、ノイズのあるデータを用いる場合には、ボール上の如何なる単独の「固定位置」によっても大きな誤差がもたらされる可能性がある。より優れたハードウェアを用いてこれを解決するためには、極めて多大な経費がかかるかもしれない。
5.ほとんどのやり方において、データを高い分解能で、且つ既知の適切なタイミング関係をもって捕捉できるということが前提とされているように見える。このようにすることは可能ではあるが、出来上がったシステムは極端に高コストなものとなるかもしれない。
米国特許第7,170,592号において、例えばゴルフボールのようなカーブのある物体を検査するための方法が開示されている。その方法は、センサを用いてカーブのある物体の画像を取得することと、歪みを最小化するために画像を調整することと、調整された画像を既定の調整されたマスタ画像と比較することとを含む。物体の向きを必要としないこと、及び測定中の曲率歪みを最小化することについて、新規性が存在する。
米国特許第7,143,639号において、持ち運び可能であってバッテリ動作する(動力セル)、改良された打ち上げモニタ(Launch Monitor)が開示されている。持ち運び可能な打ち上げモニタは、好ましくは4つのカメラであるカメラシステムと、視界を照らすための少なくとも2つのライトシステムを備えている。そのシステムは、データ記憶手段と表示デバイスを備えている。そのシステムは記憶された参照画像を備えており、測定プロセス中で用いられるゴルフクラブとゴルフボールのタイプ等、画像を認識する。そのシステムは、クラブヘッドスピード、クラブヘッドパス角度、クラブヘッドアタック角度、クラブヘッドロフト、クラブヘッド垂下、クラブヘッドフェイス角度、クラブヘッドフェイススピン、クラブヘッド垂下スピン、クラブヘッドロフトスピン、及びゴルフクラブフェイス上のボールのインパクト位置を測定し、ボールスピード、ボール上昇角度、ボールの方位角、ボールのバックスピン、ボールのライフルスピン、ボールのサイドスピン、及びゴルフクラブフェイス上のボールのインパクト位置等、ゴルフボールの運動学的な情報を決定する。結果として得られる画像と総合的解析とを閲覧して仲立ちするために、ビデオインターフェースが提供される。そのシステムをネットワークに準拠させ、データを中央サーバに転送し、クラブの特徴、ボールの特徴、ボールの軌道、及び機材の比較等、ゴルファーの特徴を表示させることができる。他の実施形態においては、機材の注文、購入者の財務情報、届け先住所、販売員情報等の取引情報をネットワークによって中央サーバに送信可能とすることができる。加えて、注文確認情報の送信、オペレーティングシステムのソフトウェア更新、あるいは複数のデータコンシューマに対するデータ転送をネットワークによって行えるものとすることができる。
米国特許出願第20070060410号において、ゴルフボールの打ち上げ条件を測定するための方法及び装置が開示されている。この出願は、米国特許第7,143,639号と同一の発明者によるものである。その方法には、ゴルフボールの存在しない視界の画像を取得することと、その視界内で動いているゴルフボールの少なくとも2つの画像を取得することとが含まれる。画像は、ゴルフボールの表面上に備えられた実質的に円形の1以上のマーカーに基づくことが好ましい。ゴルフボールの画像が取得された後、動いているゴルフボールの少なくとも2つの画像の各々から、視界の画像が差し引かれる。その後、視界の画像が差し引かれた後の、少なくとも2つの画像の各々に対して、ゴルフボールの円形外周の位置を決定することができる。その方法はまた、少なくとも2つの画像の各々における円形外周を分析し、各々の画像においてゴルフボールの中心位置を決定することを含む。その後、少なくとも2つの画像の各々におけるゴルフボールの実質的に円形なマーカー及び中心に基づく、ゴルフボールの運動学的特徴を決定することができる。メモリ及びメモリにロードされたソフトウェアを有するプロセッサを用いて、差し引き、及び決定を実行することができる。これらのステップに基づき、サイドスピン、バックスピン、軌道、速度、打ち上げ角度、サイドアングル等の、ゴルフボールの運動学的特徴を計算することができる。ゴルフボールの運動学を決定するための装置は、既定の波長範囲にある光によって視界を照らすよう選択的に配置された照射デバイスと、既定の波長範囲にある光を吸収する表面を有したゴルフボールと、既定の波長範囲にある光を反射するバックグラウンド表面と、を備える。ある実施形態において、バックグラウンド表面は階調レベルの高い表面を有するものとすることができる。また、その装置は、視界の1以上の画像を取得するよう配置されたカメラと、メモリ及びメモリにロードされた分析ソフトウェアを有するプロセッサと、を備えることが望ましい。ソフトウェアは、取得された1以上の画像を分析してゴルフボールの中心位置を決定することが可能なものであることが好ましい。
米国特許出願第20070049393号において、ボール打ち上げ条件を予測するための方法が開示されている。この出願は、米国特許第7,143,639号、及び米国特許出願第20070060410号と同一の発明者によるものである。その発明は、ゴルファーがボールを打つパフォーマンスを予測するための方法を含む。その方法には、ゴルファーのゴルフクラブを用いたスイングに基づいて、そのゴルファーに対する複数のインパクト前のスイング特性を決定することが含まれる。複数のインパクト前のスイング特性としては、例えば、インパクト位置、ゴルフクラブヘッドの向き、及びゴルフクラブヘッドスピードを含むことができる。ゴルフクラブとゴルフボールの間の滑りを決定することが好ましい。滑りは、複数のボール特性、複数のクラブ特性、及び複数のインパクト前のスイング特性に基づくものであってよい。滑りは、ゴルフクラブとゴルフボールの間の第1スリップピリオド、スティックピリオド、及び第2スリップピリオドに対して、マイクロ秒間隔での各々の時間ステップを計算することにより、決定することができる。各々の時間ステップは、少なくとも、ゴルフボールにおける横方向の力、ゴルフボールの摩擦係数、及びゴルフボールにおける垂直方向の力に基づくことが望ましい。ゴルファーに、監視システムの前でゴルフクラブをスイングさせることによって、インパクト前のスイング特性を決定することができる。正確なインパクト前のスイング特性を生成するために、ゴルファーは所望の回数だけクラブをスイングしてよい。インパクト前のスイング特性は、大体1回以上のゴルフクラブのスイングに基づくことが好ましい。
決定されるゴルフボール特性は、複数の速度におけるボールの反発係数、複数の速度における接触時間、及び複数の速度及びロフト角度におけるスピンを含むが、これらに限られない。
加えて、決定することのできるゴルフクラブ特性としては、クラブフェイスの幾何学的中心、クラブヘッドの質量中心、ホーゼルからクラブフェイスの質量中心、及び/又はクラブヘッドの質量中心までの距離、シャフト材料の実効密度、軸中心線についてのねじれに対する実効剛性率、シャフト材料に対する実効ヤング率、及びホーゼル端における2方向への、シャフトの外径及び内径が含まれる。
したがって、ゴルフボールの予測軌道及びボールの予測打ち上げ条件を決定するために、ゴルファーはゴルフクラブを1回スイングすることを要求されるのみである。予測軌道は、例えば、距離、飛行経路、着地位置、最終静止位置、等の特徴を含むものであってよい。さらには、ボール打ち上げ条件は、サイドスピン、バックスピン、ライフルスピン、方位角、打ち上げ角、速度、等を含むものであってよい。
上述の方法は、コンピュータ命令を含むコンピュータプログラムを用いて実行することができる。
米国特許第6,241,622号、及び米国特許第6,488,591号は、画像を記録して既定の視界内でのボールの飛行経路を決定するための、2つのカメラ、ストロボ光、ビームスプリッタ、反射素子、及び反射性ゴルフボールを備えた、持ち運び可能な打ち上げ監視システムを開示する関連特許である。
米国特許第4,375,887号及び米国特許第4,063,259号は、ゴルファーのスイングを、そのスイングを最良に生かす特徴を有する好ましいゴルフボールとマッチングするために、初期速度、初期スピン速度、及び打ち上げ角度を測定するための打ち上げ監視システムを開示する関連特許である。
米国特許第4,160,942号は、複数のカメラを含む軌道計算機によって測定される、投影される物体のシミュレーションを表示するために用いられる、光学的な物体の投影、及びデータ分析を開示している。
米国特許第4,158,853号及び米国特許第4,136,387号は、ゴルフボール(または、任意のスポーツボール)の打ち上げ後の飛行を監視するための方法を開示している。その方法においては、ゴルフボールの位置、速度、及びスピンを測定するために構えられた複数のカメラと対応するフラッシュランプを用いることが好ましい。
米国特許出願第20070032143号は、好ましくはユーザの頭に搭載されたカメラとモニタとを含む、リアルタイムの視覚的自己監視システムを開示している。
米国特許出願第20070026975号及び第20070026974号は同一の発明者によるものであって、1以上のカメラ、追跡される物体を照らすための赤外線エミッタ、及び適切なテクニックを決定するために映像の記録されたシーケンスを分析するためのデータ分析を用いる、軌道検出及びフィードバックシステムを開示している。
米国特許出願第20070010342号は、軌道のシミュレーションを行い、仮想データに基づきゴルフボールをモデル化するための、ゴルフボールの仮想モデルを開示している。
米国特許出願第20040142772号は、第1及び第2のカメラを用いて後部からの撮影が行われ、第3のカメラを用いて前部からの撮影が行われるような、測定装置を開示している。ボールの位置座標は、後部からの撮影により得られる画像データと前部からの撮影により得られる画像データとに基づいて、三角測量法により計算される。後部から行われるべき撮影は、第1のカメラから第2のカメラへとリレーされる。第2のカメラの視野の角度は、第1のカメラの視野の角度に関連付けられる。したがって、リレーにより広範囲の軌道内でボールを撮影することができる。
第1のカメラを、ボール打ち上げ地点の後ろに配置するべきであって、第2のカメラを、打ち上げ地点と落下地点との間に配置するべきであって、そして第3のカメラを、落下地点の前に配置すべきである。第2のカメラは打ち上げ地点と落下地点との間に配置されるので、光軸によって水平方向に形成される角度が大きくなるよう設定することが可能である。第2のカメラを用いて落下直前に測定されるゴルフボールの上昇角度は大きい。測定装置は、落下直前のボールについての高い測定精度を有する。
第1のカメラの視野の角度は、第2のカメラの視野の角度と、部分的に重複すべきである。第2のカメラの視野の角度は、第1のカメラと第2のカメラとによって同時に撮影されるボール画像に基づいて、第1のカメラの視野の角度に関連付けられる。
他の先行技術は、データを測定して表示するためのGPSシステムの使用に言及している。
米国特許第7,175,177号は、プレイヤーにより入力されたデータ、及び使用されるゴルフクラブとショット距離に基づいて測定ユニットから得られるデータに基づいた個々のプレイヤーの分析をとりわけ提供するような処理ユニット、及びGPSを有する、PDAを含むゴルフデータ管理システムを開示している。
米国特許第7,118,498号は、ゴルファーと、例えば標的のような物体との間の距離を、ゴルフコースの地理情報サービスに基づいて測定し表示するための、持ち運び可能なGPSシステムを開示している。そのシステムはまた、プレイ時間の経過に伴って風の向きや強さ等のデータを測定するための手段を提供している。
米国特許第7,095,312号は、各々のスポーツ用物体に関連する、内蔵された電子的追跡デバイスを用いて、例えばゴルフボール等のスポーツ用物体の特質を測定して表示するための、持ち運び可能なGPSシステムを開示している。
米国特許第7,010,550号は、プレイヤーにおけるホールレベル、及びショットレベルの情報を入力し、記録及び格納するためのPDAを開示している。データはオフラインで入力してもよいし、あるいは双方向型オンラインインターネットで入力してもよい。
米国特許第6,697,820号は、米国特許7,010,550号の同一発明者によるバリエーションである。
米国特許第6,585,609号は、特定のゴルフコースに関するスコア付けブックレットを開示している。各々のホールのイラストレーションは、双方向型インターネットグリッドに対応するグリッドから成っている。プレイヤーは、各々のショットに対してゴルフボールの位置をホールグリッド上で指示し、その後、同じコースにおける過去のゴルフラウンドに基づいた履歴データを交換するために、情報を双方向型インターネットグリッドへとダウンロードする。
そしてさらに、他の先行技術に係るシステムとしては、以下のようなものが含まれる。
Blackwell Synergyは、ゴルフスイングの間のクラブヘッドの移動経路、及びスピードや、クラブフェイスの向き及びインパクト位置の、3D分析映像技法を用いた測定を行う研究を開示している。
IMAGO Video Trackersは、ゴルフボールを打ち上げから着地まで追跡することによりボールの真の軌道を測定するためのシステムを開示している。これは、ボールの初期位置及び着地位置を測定することによりボールの飛行を補間するような、過去のシステムとは異なるものである。
NASAexploresは、高速映像機器を用いて飛行中のゴルフボールを捕捉することを開示している。コンピュータハードウェア及びソフトウェアを用いて、測定された各々のボールのスピンレートと速度とが分析され、より良くデザインされたゴルフボールが生み出される。
Pitt Researchは、高度な生体力学的評価ツールを用いて、上半身、骨盤、及びX因子の、ゴルフスイング中の回転及び速度を測定することを開示している。ボール速度等、他の測定値と生体力学的変数間の関係が、高速8カメラ3D光学式運動分析システムを用いて評価されている。
Sports Coach Systemsは、回路基盤が封入され、またインパクト領域に亘ってクラブとボールの両方を測定するための赤外線技術を有した、シミュレータマットを開示している。
Zelocityは、ドップラーレーダーを用いてボールの速度、スピン、及び打ち上げ角度を測定するゴルフパフォーマンスモニタを開示している。ダウンスイング中、及びインパクトの時には、クラブヘッドスピードも測定される。
米国特許第7,170,592号明細書 米国特許第7,143,639号明細書 米国特許出願第20070060410号明細書 米国特許出願第20070049393号明細書 米国特許第6,241,622号明細書 米国特許第6,488,591号明細書 米国特許第4,375,887号明細書 米国特許第4,063,259号明細書 米国特許第4,160,942号明細書 米国特許第4,158,853号明細書 米国特許第4,136,387号明細書 米国特許出願第20070032143号明細書 米国特許出願第20070026975号明細書 米国特許出願第20070026974号明細書 米国特許出願第20070010342号明細書 米国特許出願第20040142772号明細書 米国特許第7,175,177号明細書 米国特許第7,118,498号明細書 米国特許第7,095,312号明細書 米国特許第7,010,550号明細書 米国特許第6,697,820号明細書 米国特許第6,585,609号明細書 米国特許出願第20040032970号明細書
本発明は、より高精度で、より低コストに、より良好な分析を与えることにより、これら先行技術の方法、システム、及び装置における欠点を克服する。
その発明とは、ゴルフ関連データを収集して分析するシステムである。分析されるデータは、打ち上げ角度を含むボールの軌道、ボール速度、及びボールのスピンのゴルフボール分析、スイングモニタ、打ち上げモニタ、パッティングプロファイラ、ボールファインダ、及び自動化されたパフォーマンスエンハンスメントに関するものであることが好ましい。好ましい実施形態において、ボールの飛行画像を記録するために少なくとも1つのカメラが用いられる。ストロボ光、あるいは赤外線照射と連動して、複数のカメラ又は高速カメラを用いることもできる。データの追跡及び分析の幾つかの例は、以下のようなものである。
ボールスピン分析
マーキングされたボールの運動を、較正された(calibrated)カメラで追跡する。ボールのマークは既定の関係を有していなければならず、また、飛行中のボールの画像は、既知の時間的関係を有するものでなければならない。カーブを基本とするマーキングを用いることが可能であって、またデータを3次元表面座標へとマッピングすることが可能である。既知の関係を有する複数の画像が、比較分析のために同一領域にて記録されている場合は、マーキングされていないボールを追跡することも可能である。
クラブ分析
2つのカメラを用いて、ゴルフクラブの3Dエッジを取得する。軌道に沿ったゴルフボールの開始位置及びクラブフェイスの向きが記録される。打撃の瞬間が軌道から決定され、クラブがボールを打つ位置の計算値と、その打つ位置におけるクラブフェイスの向きが与えられる。クラブフェイスからの鏡面反射は、必要なデータ測定における好ましい一形式である。可視光又は赤外光を用いることができるのであって、また6軸軌道を決定するために、カメラによりクラブフェイス特徴のシルエットを記録するか、直接照射を記録することができる。
スイング分析
ゴルファーのスイング分析においては、モデルスイングと比較されるデータを記録するためにシルエットと複数のカメラとが用いられる。シルエットは、捕捉されたゴルファーのシルエットからのずれが最小であるようなモデルから生成される。ゴルファーのスイングのモデルが作成され、検討中であるスイングとマッチングされる。
パタープロファイル
クラブ、ゴルファー、及びボールの位置をパッティングシーケンスの全体に亘って捕捉することによってパタープロファイルを分析することも可能である。
また本発明を、スポーツ及び医術における視覚ベースのトレーニングシステム、及び自動化されたパフォーマンスエンハンスメントのために用いることも可能である。具体的には、ゴルファーの動きのプロファイル、一連のスイングのプロファイル、及び骨格の動きを分析し、改善することが可能である。
本発明における上述の、及びその他の利点は、以下の好ましい実施形態の詳細な説明を添付図面に照らして検討することにより、当業者にとっては即座に明らかとなるであろう。
図1−4は、本発明に従ってスピンを決定するための、ボール上におけるダッシュあるいはラインセグメントでのマーキングを図示している。 図1−4は、本発明に従ってスピンを決定するための、ボール上におけるダッシュあるいはラインセグメントでのマーキングを図示している。 図1−4は、本発明に従ってスピンを決定するための、ボール上におけるダッシュあるいはラインセグメントでのマーキングを図示している。 図1−4は、本発明に従ってスピンを決定するための、ボール上におけるダッシュあるいはラインセグメントでのマーキングを図示している。 図5−6は、本発明に従ってスピンを決定するための、ボール上におけるリングでのマーキングを図示している。 図5−6は、本発明に従ってスピンを決定するための、ボール上におけるリングでのマーキングを図示している。 図7−8は、本発明に従ってスピンを決定するための、ボール上におけるらせんでのマーキングを図示している。 図7−8は、本発明に従ってスピンを決定するための、ボール上におけるらせんでのマーキングを図示している。 図9A及び図9Bは、本発明に従うシミュレータの基本構想ビューである。 図9A及び図9Bは、本発明に従うシミュレータの基本構想ビューである。 図10は、ボールの3D軌道の概略図である。
好ましい実施形態の説明
幾つかの好ましい実施形態のうち第1の実施形態において、本発明は、以下に説明するようなマーキングされたボールの打ち上げ装置を提供する。ここにおいて「ボール」という用語は、運動するような興味ある物体のうち任意のものを表すために用いられるのであって、これに対して、本発明に従うシステム及び方法により位置及び運動のデータが生成される。
マーキングされたボールの打ち上げモニタ
−システムの説明−
打ち上げモニタは、ボールに対する打ち上げデータを探し出すためのシステムである。それは、ボールの初期位置、ボールの初期3D軌道、及びボールのスピン軸とスピンレートからなる。
−セットアップ−
システムは、ボールの潜在的飛行経路の画像を作成するカメラのセット(全てのカメラデバイスは、共通の時間基準上におかれる)、カメラのための3Dキャリブレーションデータ、及び最終結果を作成するプロセッサと、選択的に、関連するタイミング情報を有する照射デバイスとからなる。全てのデバイスは接続されており、情報を共有することができる。
−画像取得−
システムは、任意の照射デバイスのタイミングに沿ってタイムスタンプされた一連の画像を作成する。
−画像分析−
一連の画像は分析され、ボールがカメラ視野の中にあるかどうかが決定される。ボールが運動している場合、照射デバイスはボールの画像を複数生じさせるということが起こりうる。画像の分析は、以下のとおり進む。
画像中に、何らかのボールが存在するか?
それらの、画像座標における中心及び直径はどうなっているか?
ボール画像中に、内部特徴あるいはマークが存在するか?存在する場合、そのピクセル座標はどうなっているか?
ストロボ照射は存在するか?存在する場合、そこには複数の画像が存在するか?そして、それらはどのようにストロボのタイミングと対応しているか?
ボールの動きに対応する観察結果が見出されれば、ボールにおけるその後の運動を予測することが可能となる。像空間において次の画像を見積もるか、あるいは、次の画像を3Dにマッピングし、飛行モデルとカメラ3Dキャリブレーションデータを用いて予測することが可能となる。この予測を用いて、処理するピクセル数を減らすことができるし、また矛盾するデータを含むかもしれない画像領域を無視することも可能となる。予測が誤っていた場合、ボールの飛行はボールの飛行モデルと整合しないのであって、更なる分析は不要である。
−画像観察−
画像分析ステップの結果、ボールの飛行について一連の明確な観察がなされる。観察とは、
使用されたカメラ
像空間におけるボール中心位置
ボール中心位置に対するタイムスタンプ
ボールの画像から抽出された一連の特徴
目標画像のピクセルのセット
に係るものである。
−3D観察−
一連の観察結果が分析され、ボールが運動したかどうか、そしてボールが飛行モデルと整合して運動したかどうかが決定される。一連の観察結果は3D位置へと変換され、その3D位置とタイムスタンプは整合性のチェックを受ける。一連の観察結果がボールの正当な飛行であるならば、その後、一連の特徴が分析され、それらを用いてボールの回転のオフセットが決定される。このステップにおいて、併せてボールの画像情報を有するべき領域を位置決めすることも可能ではあるが、ある理由により、それには抽出のための特別な処理が要求される。
−スピン計算−
その後、観察結果を用いて、初期打ち上げ位置、打ち上げ軌道、及びスピン軸とスピンレートが計算される。観察結果基準とは、
max rotation < PIであるような観察結果間の、最小時間
エイリアシングにより回転の情報が除去されないような、個別の時間間隔
Field of view size > max_vel * acq_time * 3であるような、少なくとも2つの観察結果
物体の中心付近の内部特徴を得ることだけができるか
である。
画像取得アプローチ(2以上の中速カメラ−連続光)
−取得アプローチ−
最も短い2msの間隔を得るための、60%−40%の時間オフセット、及び、異なるタイミングのショット間のバイアスからスピンを計算するための、2つの間隔。
−タイムスタンプ観察−
全ての観察結果を用いて、不正確性あるいは180度を過ぎるような急速なスピンによりもたらされるあいまいさを除去することを可能とする。
各々の取得に対する、一定の光、日光、あるいはカメラにより発せられるストロボの照射。
−3Dの観察結果と軌道−
依然として、スピン、速度、及び3D軌道の計算を可能とするような、ボールの正確な3D位置のために、ボールの3D位置がさらに必要である。
あるカメラからの2ショット、及びもうひとつのカメラからの1ショットである3ショットのみを用いてボールの3D位置を探し出すために、以下のことを行う。第1のカメラからの単独のショットに対する2つの画像の間の時間的関係を用いて、そのショットがその上になければならないようなラインの3Dスロープを探し出す。各々のカメラからの2つの画像を用いてボールの3D位置を探し出すために、各々のカメラにより、各々のカメラにおけるボールの、画像座標内の中心があるような3D平面を探し出す。それから、そのボールにより作られた3Dラインを探し出すために、その2つの平面を交差させる。より多くの点を用いることで、カーブをそれらの点に合わせることが可能であって、最も良く適合するカーブを計算できるということに留意すべきである。ここで、各々のボール画像の中心を、見出されたボールの3D軌道に交差させて、世界座標におけるボールの中心を探し出す。ボールの3D軌道をボールのプレースメント平面に交差させることにより、ボールの起点の計算を可能とすることができる。観察結果の全てのペア間における速度のペアワイズ計算を最大限行うことにより、速度が見出される。最終結果として、正しいタイミング関係を有するショットが得られる。
−複数のカメラ−
カメラのタイミング関係が分かっており、共通の3D座標系へと較正されている限り、より広い領域をカバーするためにカメラの数を増やすことが可能である。
ストロボ光−2以上のスローカメラ−
発火パターンを最大1000Hzまで制御可能なストロボ光を用いれば、たった2つのスローカメラ(60fps、あるいはそれ以下)を使用して、全ての起こりうるゴルフショットから打ち上げデータの捕捉を可能とするデータを得ることができる。捕捉可能なショットの範囲は、スピンが18,000rpm未満であるとして、100m/sから10m/sである。50m/sから5m/sまでの、ショットの第2範囲を用いることができる。5m/sより下の場合、ボールの飛行に対してスピンは小さな影響しか及ぼさない。ショット速度を予め知らずにストロボを使うことには、個別のショットを捕捉することが望まれるという問題がある。十分遅いスピードにおいて、画像は互いに重なり合う。十分速いスピードにおいては、一切の画像が存在しない。カメラの取得レート及び露光の関係、及びストロボタイミングによって、個別の観察結果としてとりうるものの数が決定される。これは、とりうる速度及びスピン速度の範囲と互いに影響しあう。正しいタイミング関係の下での、少なくとも3つの個別の観察結果が目標である。
−画像取得−
2つのカメラは、各々のカメラのフレーム開始時において特定のストロボパターンが発せられるよう、ストロボに同期される。カメラを同時に始動するよう同期してもよいし、あるいはそうしなくともよい。各々のフレーム開始について、時間オフセットが知られているということが要求されるのみである。設定と可能なショット範囲との間の相互影響を与えて、少なくとも3つの個別の観察結果を常にもたらすようなストロボパターンが選択される。
−画像分析−
画像分析における最初のステップは、個別の画像を探し出すということである。これは、正しい領域と奇抜なものとが結合された要素がないかをチェックする、ブロブ分析によって行われる。これらは、後に整合性と内部特徴についての処理を行うための候補となる。重なり合っていない領域を決定するために用いることのできるようなカーブの部分を有する、部分的に重なり合っている画像について、更に分析をすることが可能である。その後、最小の円を、内部で個別の領域と重なり合っている領域とに分割されるような各々の円へとフィッティングすることが可能である。結果として得られる中心と領域とが、候補を定める。ここで、個別の領域に対してマーキングのための処理がなされる。これは、画像のエッジにおけるボール画像に対しても言えることである。同様の処理により、追加的な観察結果を作り出すことができる。上記3D観察結果と軌道によって、その結果としてもたらされる画像観察を進めることができる。
最小スピード10mm/msecに対する例
フレーム開始よりも1ms後にストロボを発火し、少なくとも4msが経過するまでは別のストロボを発火しない。そして、フレームの終わりよりも1ms前にストロボを発火する前に、少なくとも4msは待つ。2msの時間オフセットを有する、2つの別個の画像(前のフレームの終わり、現在のフレームにおける最初のもの)が得られる。これらペアの1つは、60fpsにおいて、16msごとに得られる。16ms間隔(分解能1ms)に対する基本パターンは、1000 0110 0110 0001である。各々の7msサブセットが、少なくとも2つの画像を含むということに留意すべきである。各々の17msサブセットは、少なくとも4msのギャップを有する2つのフレームに亘って取得される1ms間隔の画像の少なくとも1つのペアを含む。ショット速度が、その画像が次の又は前の画像と同化するに十分なほど遅い場合、そのショットは破棄される。短い時間的関係を有し、しかしながら同化しないことが保証されているような2つのショットが、特別なショット(special shots)の値である。我々は、各々のカメラから少なくとも2つ、好ましくは3つ以上の観察結果を必要とする。
−観察結果を捕捉するための、プログラム化可能な画像取得−
利用可能なタイミング関係を有する必要な数の観察結果の捕捉を可能とする、飛行中の物体に適した一連の画像取得作業である。多くのカメラに対して、画像捕捉レートは捕捉されるラインの数に比例する。また、ハードウェアビニング又は他の技法を用いることにより同じ領域をカバーすることができるものの、ラインの数は減る。カバーされる領域はビニングによっては同一のままであるが、ラインの数が2の倍数で減るのであり、またしかしながら、分解能も同じ倍数で低下する。捕捉レートは、同じ倍数で上昇する。幾つかのカメラにおいては取得の最中に取得パラメータを変更することが可能であるが、通常、その変化の効力は幾らかの遅延を伴って発生する。物体が有することのできるスピードの範囲は、常に限られている。典型的に、高速の物体は、単独のフレーム時間内においてカメラの視界を通り過ぎるであろう。したがって、フレームレート全体において2回取得することにより、物体の2つの写真が捕捉されるということは保証されない。
高いフレームレートを得ることが可能である一方、捕捉するラインが少なく、また分解能が低いカメラを用いた物体取得に対し、以下のステップを用いて最大分解能での物体画像を得ることができる。
取得される第1の領域はビニングされており、最大スピードにおいてボールを確実に見ることができるために十分なラインのみである。
ピクセル値の初期値からの変化をチェックすることにより、第1のラインからのピクセルは、物体が存在するかどうかチェックされる。第1のラインのヒストグラムにおける変化を調べて、最初に物体を検出することも可能である。
物体が見つかった場合、最大スピードで運動するその物体を捕捉するであろう、起こりうる最も早い取得に対して、取得パラメータがセットされる。第1の最大分解能捕捉のサイズと配置は、第1の領域において物体がどこで見つけられるか、及び起こりうる最大スピードに関連するであろう。
第2の取得は、第1の領域について行われる。
第1及び第2の初期取得値間における物体の位置の変化を用いて、画像を横切るボールの方向とスピードとが見積もられる。その後、この情報は、センサを横切る物体の位置を予測するために用いられる。取得されるラインを、その物体を捕捉するであろうラインへと制限するような、一連の取得値が見出される。決定における誤差を許すための幾つかの追加ラインを伴うような、取得すべきラインの数が、物体のサイズを用いて決定される。この時点で、既に次の取得をセットアップしてもよいということに留意する。
物体のサイズ、速度、及び位置が、ラインのタイミングと共に用いられ、物体がもはや視野に存在しなくなるまでに取得されるべきラインの数及び開始が決定される。
高速物体の場合は、このことにより、最大分解能において丁度1回の、残りの画像センサにおけるさらなる取得が必要となるかもしれない。
センサの視野内に物体が存在する時間の総計は、その速度を導くような最初の2つの見積もりから見出される。
より遅い物体に対しては、非常に多くのショットを捕捉するための時間が存在するであろう。
物体の位置は、この位置を考慮して更新される次の取得領域を用いて計算される。
−スピンする物体についての特徴の画像−
画像センサを横切るボールの経路が上述のアプローチを用いて予測され、そして、全部のフレームを用いるよりも高いレートにおいて物体を捕捉するための低減された数のラインを用いて物体が追跡される。およそのスピードアップは、物体の占めるラインの数により全体の画像フレームレートを割った比率である。2つの連続したフレームにおいてボール位置を追跡し我々にとって興味のある特徴を抽出するよう、高速画像をここで処理すれば、あるいは、既知の3D関係を有する2つの配向特徴を抽出するか、既知の3D関係を有する3つの特徴を抽出すれば、我々は物体のスピンレートを見積もることができる。スピンのレート及び軸は、自由飛行する物体に対しては大体一定であり、いまや我々は、画像センサの視野内のどこに、そしていつ、さらなる特徴が存在するかということ、及び、どうやってそれらを捕捉するためのウインドウを配置するか、ということを予測できる。我々は、ボールの特徴についての選択された高分解能画像を捕捉し、それらにタイムスタンプをする。
画像の間で経過した時間間隔に従ってモデルの特徴の射影を作成することにより、特徴をその特徴の3Dモデルへとマッチングすることができる。第1の画像における特徴を用いて、そのモデルの回転を作成し、その物体の中心に対して、画像中で見えるとおりにその位置をマッチングする。ここで、画像から第2及び第3の位置が得られる。考えられる特徴の各々について、モデルを回転及び射影し、見出された位置とのマッチングを行う。全ての組み合わせについて試行し、最も画像誤差の少ないものを用いる。
物体の質量中心に対する位置を用いて、タイムスタンプされた特徴のセットを探し出す。
第1の特徴をとり、3Dモデルを回転し、射影して、その画像位置へのマッチングを行う。
第2の特徴をとり、3Dモデルを回転させ、各々のモデル特徴を順々に射影して、画像位置へのマッチングを行う。これにより、nの回転が作成されるであろう。
追加的特徴の全てをとり、3Dモデルを回転させ、各々のモデル特徴を順々に射影して、画像位置へのマッチングを行う。これにより、各々の追加的特徴に対してnの回転が作成されるであろう。
各々の回転をタイムスタンプによって分割し、各々の特徴選択によって暗示されるような回転レートを得る。
一定の回転レートからのずれを最小化するような3Dモデルラベリングに対する特徴を選択する。
不規則で広い間隔によるあいまいさを最小化するよう、特徴の位置を選ぶことができる。
ラベル付けされた特徴のセットを用いて、お互いについてタイムスタンプされた3D位置を作成し、最も適合するスピン軸を見つけ出す。
我々はまた、取得パラメータを変えることにより、物体の経路に沿ったさまざまな点において物体全体の画像を取得することができるのであって、カーブへと物体の位置をフィッティングして任意のタイムスタンプされた特徴観察結果に対して物体の中心位置を推測するために十分な分解能で、物体の質量中心位置が幾つか得られる。これを行うための追加的なアプローチは、複数の較正されたカメラからの物体中心の観察結果を用いて、タイムスタンプされた3D位置を作成することである。その後、これらを物体飛行モデルと共に用いて、飛行3D軌道を作成することができる。こうして、この3D軌道を用いることにより、タイムスタンプされた特徴観察結果に対して3D位置を与えることができる。
現在の打ち上げモニタシステム
−カメラのセットアップ−
カメラは、ティーの上方に、部分的に視界と重なるよう取り付けられる。視界と重なるような如何なる位置にカメラを取り付けてもよいことに留意する。カメラ位置は各々の次元における正確性に影響を与えるであろうし、また導入、及び衝突からの保護の容易さにも影響するであろう。我々のカメラは較正されているので、カメラが衝突を受けることは可能な限り少ないことが望ましい。ライトは頭上にあり、カメラの外側、かつカメラ同士の間に配置される。カメラは、平面較正目標を用いて較正される。各々のカメラに対する露光のタイミングは、各々の繰り返し処理に対して既知である。このタイミングが固定されている必要はない。
2つのアプローチが存在する。
高速カメラを用い、フレームあたり1つのボール画像とし、フレームごとに複数回の露光をする。フレームあたり複数回の露光を可能とするようなストロボシステムあるいはカメラを用いて、これを行うことができる。以下の画像サーチにおいては、1つのボールあるいは複数回の露光を探しているのかを知ることが必要である。画像サーチは候補のボールを識別するものであって、候補のボールはタイミング情報とペアをなすということ、そしてそれらの妥当性が決定される時が、候補の観察結果の作成に含まれるということを除いて、処理は等しい。システムへの入力は、「false」要因に対する多くの考えられる原因をもっては制御されない、ということに留意する。
−画像サーチ−
ゴルフボール画像の探索の用意がされると、システムは各々の画像をくまなくサーチする。見つかった場合、妥当なゴルフボールが取得されたということを確認する、処理の第1のステップが行われる。失われる画像がないように、必要に応じて画像は記憶される。ボールが画像中で静止している場合、その位置が見出され、そしてシステムはそれを無視する。これにより、システムに対して死角が作られる。初期画像を見つけ出す目的で、画像における無視された領域についてマスクが作成される。加えて、一旦視界の中から出発したボールは、カメラの視野から外へ移動するにしたがって無視されるであろう。
−ボール3Dカメラ特徴の探索−
各々の画像において、ゴルフボール画像があると見込まれる位置がサーチされる。候補が見つかった場合、各カメラは、位置調整により修正された最小包含円アルゴリズムによって、ボールブロブを抽出する。各々の円に対して、適合性の質の程度が計算される。その画像からの最高の質を有する円が、ボールに対して用いられる。画像空間中の各カメララインが見出され、このラインは世界座標内の3D平面へと渡される。画像を横断するボールの進行が追跡され、ボールが画像を横切ったとき、それ以上の画像が処理されることはない。処理の開始時においてボールの画像がそれ以上現れない場合、開始に誤りがあったものとみなされ、その画像は取り去られ、開始のサーチが続けられる。
−3D軌道ラインの探索−
2つのラインが両方とも存在する場合、3D軌道ラインを探し出すために、その2つのラインは交差される。ラインからの誤差が見出され、可能であれば異常値が除去される。ひとつのカメラからは1地点のみであって、もうひとつのカメラからは1ラインである場合には、3D軌道ラインを探し出すために別個のアルゴリズムが用いられる。ラインに対するボール画像の適合性の程度が計算される。
−ストライプ情報の抽出−
ボールの位置と直径とを用いて、ボールの画像が抽出される。この画像は規格化され、暗いストライプが抽出される。
−接続−
隣り合った地点の任意のペア間の二乗距離を、ブロブの中心からその地点がどれだけ離れているかに基づいてあらかじめ計算された値と比較することにより、ストライプ情報はストライプへと結び付けられる。
−間引き(Thin)−
結び付けられたストライプは、以下の方法で間引かれる(thinned)。
それらは、球体表面に置かれているものと仮定する。
1つの半球体のみが、視認できる。
ストライプは球体中心について秩序付けられ、θは一端から他端へと移りゆく。
デルタ角度について、重み付けられた質量中心を探し出し、単一の地点を取り出す。
−回転の探索及びラベル−
間引かれたストライプにはラベルが付され、捕捉された全てのボール画像に対する名目上の位置からのボールの6軸3Dオフセットを探し出すために、モデルとマッチングされる。
最初の見積もりは、リングの順序付けを用いてなされる。
各々の考えられる組み合わせに対して、候補のラベリングを作成する。
側面の制約を用いて、リングを平面フィッティングする。
各々のラベリング候補に対して、誤差を見つけ出す。
最も適合するラベリングを用いる。
ボールの直径、中心の評価値、及びカメラからの3Dレイを用いて、3Dへと射影する。
フィッティングの質に基づいて、リングにウエイトを割り当てる。
リングにおいて見つかった、2つの最も強い標準(normals)を用いることにより、3D回転行列を探し出す。
使われていない地点を再び組み合わせて、必要であればフィッティングを繰り返す。
平面における移動距離を用いて、中心誤差を見積もる。
必要であれば、修正された中心誤差を用いて計算をやりなおす。
見出された3D位置をオフセット位置に用いる。3D回転が計算され、4×4オフセット行列に加えられる。
−軌道スピンシステム−
−システム説明−
−マーキングされていないボール−
−偏位法−
−飛行モデル−
所定の初期速度、所定の打ち上げ角度、ボールのレイノルズ数関数(温度、湿度、風速)に対する妥当なボール飛行モデルによってマークされてないボールを用いるときは、ボールの質量により、所定のボールスピンに対するボール軌道を計算することができる。
−第1のカーブの探索−
センサによって、ボールの軌道の第1のセグメントが得られる。典型的には、最も適合する軌道二次関数を決定することを可能とするような、一連の測定が用いられる(例えば、ボールの飛行における最初の1mで、位置が10回測定される)。初期速度及び打ち上げベクトルが決定される。
−飛行の射影−
見出された、ボールの軌道に最も適合するような打ち上げベクトルと速度は、ボール飛行モデルにおいて、ボールの飛行を当該ボール飛行の第2のセグメント(例えば、2m〜3mのうちの1mの距離)に亘って射影するために用いられる。
−スピンテーブルの計算−
この飛行モデルを用いて、さまざまなスピンレート及びスピン軸を有する一連の軌道が探し出される。
−第2のカーブの探索−
第2のセンサが、アークにおける第2のセグメント内の軌道を決定するような一連の位置を捕捉する(例えば、2m〜3mより3D位置を10回測定する)。これらの位置は、第1のセグメントの位置を含むような最良のカーブにフィッティングされる。
−カーブのフィッティング−
第1のカーブに適合し、さまざまなスピン値を表すようなボールの飛行モデルカーブは、第2のカーブと比較される。2つのカーブの間の領域を最小化する「スピンカーブ」が見出される。あるいは、所定の時刻における、ゼロスピンボール飛行モデルからの、第2のカーブにおける最大のずれを見つけ出すことができる。これはスピンレートを指示するものであり、またマグナス力の影響によるものである。
−スピンの決定−
ずれが最大となる方向は、正しい方向を指していたところから離れるようなスピン軸の運動を指示する。これは、マグナス力が作用した方向を指示している。測定システムの精度においてマグナス力の影響が測定できるように、このアプローチにおいては十分大きな領域に亘ってのデータが必要とされる。画像は、軌道についての単独のカメラにおけるビューであってよいし、あるいは2以上のカメラにおける、軌道の複数のセグメントに亘るビューであってもよい。異なるスピン値を有するショットが同様のカーブを有するということがありうる。このような場合、ショットについての他の情報を用いて最良の値を選択する。クラブデータ、ロゴスピンデータ、及び有望なショットタイプがあり、またそれら全ては、最も有望な解を選択するために用いることが可能である。ボールの飛行モデルは、所定の測定システムについて十分な精度で軌道を決定することができるものでなければならない。モデルパラメータは典型的に、全てのショットタイプをカバーできるように挿入される複数の代表的ショットから実験的に決定される。このデータは用いられる各々のボールタイプに対して取得されなければならないものであって、わずかに異なるパラメータを有するであろう。
−取得アプローチ−
上述の標準的技法を用いて白いボールを照らすことにより個別のボール画像を探し出すことに加えて、他のアプローチを採用することも可能である。軌道カーブを探し出す際に、重なり合う画像を処理して、それらが描く軌道を見つけ出すことが可能である。
−スミアアプローチ−
カメラの視界は、連続的に画像を露出するような一定の照明により照らされる。結果的に得られるスミアはボールの飛行を表し、ボール上のマーキングの移動は、スピン軸とスピンレートとを表す。画像中に明るいタイミングマークを作り出して正確なタイミング情報を可能とするために、ストロボを一定のレートで発火する必要がある。あるいは、通常はオンであって、タイミングの計算を可能にするような短いオフ間隔を伴うストロボ光を用いることも可能である。ここで、ボール上のマークは、ボールの回転によってスミアが付けられる際に特徴的なパターンを作り出すものでなければならない。スミアパターンからスピンを決定するためのアルゴリズムには、幾つかの種類がある。
既知のスピンについての人工的画像からテーブルを作成し、パターンマッチング及び内挿を行う。
さまざまなサーチラインを用いて、周期的パターンを探す。
同様に、クラブの運動を、クラブのはっきりした形、あるいはそのシルエットでスミアとして捕捉することが可能である。クラブフェイスとカメラの間の3D関係に依存して、幾つかのカメラにおけるエッジのシルエットによってクラブフェイスの3D運動を記述することが可能である。用いられるクラブの範囲に対して都合のよい、そしてカメラにおけるクラブの視認を妨げないような、セットアップが必要となるであろう。このアプローチはフィッティングすべきカーブを直接的に作り出すため、理想的である。ブロブ分析、それに伴うエッジ、あるいは他の標準的技法により画像からスミアを抽出することが可能である。
−シルエットアプローチ−
スクリーンが、ティー領域の前、横、あるいは後ろに亘って広げられ、可視光又は赤外線で照らされると、ボールのシルエットを処理することにより、ボール又はクラブの通り道を測定することが可能となる。シルエットは、目標の運動を止めるために十分な、短い露出からのものであってよい。あるいはそれよりも長いならば、スミアが作られる。ブロブ分析、それに伴うエッジ、あるいは他の標準的技法により画像からシルエットを抽出することが可能である。
−影アプローチ−
カメラと照射源とが適当な関係を有していれば、オブジェクトは背景に影を作ることもできる。ライトの位置、方向、及び特性がわかれば、影を用いて目標の3D位置を見つけ出すことができる。影は、目標の運動を止めるために十分な、短い露出からのものであってよい。あるいはそれよりも長いならば、スミアが作られる。ブロブ分析、それに伴うエッジ、あるいは他の標準的技法により画像から影を抽出することが可能である。
−ディンプルスピンシステム−
ボールの画像を用いて、マーキングされていないボールについてスピンを見つけ出すためのセットアップ及び処理方法であるようなアプローチが、KiralyによるUS2004/0032970A1にて説明されている。我々は、このアプローチが「マークアップされた(marked up)」マーキングされていないボール以外の如何なるものに対しても作用するものである、ということには納得していない。この特許出願においては、このアプローチについての制限への対処がなされていないのであるが、しかしながら我々は、そのような制限が重要であって、実現性のある打ち上げモニタ製品であるために十分な精度と信頼性とを備えた製品が得られることはないであろうと考える。
Kiralyの基本的方法は、以下のとおりである。
工場で、単独のカメラを較正する。
カメラが指示する方向を補償する。
画像のボールの直径、及び既知の直径を用いて、ボールの3D位置を見つけ出す。
画像が3Dにマッピングされ、グリント(輝き)が除去される。
ボールを回転させ、画像を再作成する。
ディンプルの中心を見つけ出す。
その後、前の画像に対する、その画像のディンプル中心の2D相関を見出す。
繰り返し処理を行い、最小誤差を見出す。
ボールの回転によって変換されるだけであれば、画像は同じように見えるであろうと考えられる。ディンプルの出現は、ボールの3D位置に依存する。これは、回転が十分小さければ正しいかもしれない。グリントは、ボールの中心にある。グリントの除去により、ボールの中心から重要な情報が取り除かれる。これは、測定の正確性に対して劇的な影響を及ぼす。
対照的に、出願人のアプローチは以下のとおりである。
カメラのペアを3Dで較正する。
ボールに対する3D打ち上げデータを見出す。
1以上のカメラに対して、画像の一部(ディンプル)を選び出す。
所定の量、ボールを回転させる。
(個々のディンプルあるいはマークの)サブ画像から、ボールの画像を再作成する。
ディンプル上における光の角度の変化の、モデル効果。
結果として得られる再作成画像、又は個々のサブ画像に相関する。
両方の画像に対し、ディンプルの位置決めを行い、「バンプス(突出部)」で置換する。その後、何らかの空間と相関付ける(恐らくは、2D/パノラマ射影)。
我々はディンプルの中心を相関付けているのではなく、ボールのサブ画像を相関付けているということに留意する。回転を決定するために、複数のカメラを時間内に、あるいはRGB又はIRフィルタと共に用いてよく、時間内のスタガ取得を用いてよく、また時間内のグリントパターン変化を用いることもできる。アルゴリズムにはサブピクチャの相関付け、及びその後の大きな相関の抜粋、及び、−繰り返し式ではない−ボールの回転による各々の繰り返しが含まれるのであって、我々は再作成された画像を得て、2Dにおいて動かし、そして3Dで結果を計算することができる。
スピン決定のためのボールマーキング
−マーキングアプローチ−
本発明は、如何なるビューからの方向付けをも可能とし、また如何なるビューからのラベル付けをも可能とするような、マーキングシステムを提供する。
ラインセグメントアプローチ − 図1−4を参照。
円アプローチ − 図5−6を参照。
アークアプローチ − ユニークな任意の3つのアークの距離−ユニークな任意の3つのアークの法線(normal) − 図7−8を参照。
−スピン決定のためのボールデザイン−
我々が取っている、マーキングされたボールのスピン測定アプローチは、新規であると思われる。私が見てきたあらゆるアプローチは、ボール上であって、通常はボール中のたった1つの領域における目標点のセットを当てにするものであるように思われる。我々のデザインの全ては、いまのところ、任意の単独のボール画像からそのボールの3D配向を発見することができるような何らかの処理方法が存在する、ということを目標にしている。このような特性を有するデザインは、多く存在する。そのボールデザインによれば、ボールを如何なる場所においてティーアップすることも許容されるのであり、任意の時に、あるいはその軌道に沿った任意の位置で、ボールの画像を捕捉することが許容される。それにより、ボールにおけるどのビューが見えているのか、ということを識別することが可能となるのであり、その後その地点においてスピンを計算することが可能となる。これら2つのステップは、ボールが任意の位置にあってよいということを許容するために、そして、任意の2つの画像を用いてスピンを見出すために、不可欠である。不確定の間隔を減らし、測定の精度を高めるためには、さらなる画像及び取得される画像の入念な計時が必要となるかもしれない。
図1−4を参照すると、ボールデザインのあるファミリは、ボール10の特定領域上に配置されたドットパターンを有するのであって、ボールの可視領域は常にユニークなパターンを含んでいる。マークは、ドット、リング、ラインセグメント11、矢印、あるいは任意の向きを有する、あるいは有しないマークであってよい。より少ない数のマークによってパターンのユニークさを利用し、ボールの配向を見出すことができるため、向きを有するマークが好ましい。このアプローチは結局、まさにボール表面に2Dバーコードをマッピングする技術ということになる。
図5−6を参照すると、ボールデザインの別のファミリにおいては、互いに特定の幾何学的関係を有するような、ボール20上のラインが用いられている。整列されていない円21による円パターンにおいて、各々の円はユニークな中心及び法線を有する。
図7−8を参照すると、ボール30は以下に説明するとおりのらせんデザイン31を有する。
同じ特性を有する、他の多くのパターンが考えられる。加えて、上述のパターンを、ライン中に断線を有するものとして用いることが可能である。このようにすれば、より簡単なやり方でボールへのマーキングを行うことが可能となるが、その処理は複雑になる。このアプローチにおいて、そのラインの中央、あるいは2つの端が決められた、ある幅をもつ「ライン」を用いることが可能である。第2のアプローチは、暗い/明るい、あるいは色の付いた対照的な領域において、形状を定める領域間の端を与えることである。その後、その端は画像から抽出される。
−5つの円のデザイン。図5−6。−
このデザインは、異なる直径と法線とを有する5つの円形マークを備える。法線は全て異なる方向を指しており、また、全ての直径を極力異なるものとする。マークは幾らかの幅を有しており、その幅は隣り合う円の間の最小距離よりも小さい。円は、頂点から底まで配列される。用いられるこのパターンにおいて、如何なる円にも断線は存在しない。デザインを修正して、円内に断線を有しうるものとすることが可能である。円を復元するための処理は、上記マーキングされたボールの打ち上げモニタセクションにて詳述されている。
−らせんデザイン。図7−8。−
1つが頂上から赤道への時計回りの向きを有し、第2のものが底部から赤道への反時計回りの向きを有するような、2つのらせんである。極と赤道との間で、1.5−2回の巻きが存在する。らせんを復元するための処理は、円に対する処理と似ている。所定の抽出された3Dセグメントについて、そのセグメントがらせん上のどこからのものであるかを決定するアルゴリズムが要求される。
−複数アークのデザイン。図1−4。−
短いアーク(例えば、長さ6mm、幅3mm)が、以下の制約に従いボール表面について一見ランダムに分布している。
容易にプリントできるよう、円周の周りの領域はマークしないままに残されている。
マーキングされた「湿った」ボールがグリッパーの上に載ることを可能とするような、4つのマーキングされていない領域を有する1つの極付近の領域が残されている。
互いに隣接するマークは、可能な限り異なる向きを有している。
互いに隣接するマークは、可能な限り異なる中心位置を有している。
マークを可能な限り少なくするが、一方でどのビューにおいても少なくとも3つは見えるようにする。
可能な限り、マークによってボールの外周があいまいになることがないようにする。
1つのビューにおいて、幾らかのマークがボールの外周をあいまいにしている場合、その外周について反対側からのビューにおける他のマークは、外周をあいまいにしないような向きを有する。
−抽出アルゴリズム−
アルゴリズムは、ラベル付けのステップまでは同一である。マーク間の距離、及びマークの向きの両方を用いて、ラベル付けが行われる。これによりユニークなパターンが形成されるのであり、全ての可能なラベル付けをチェックすることにより最良のラベル付けが計算される。一旦ラベル付けが見つかれば、デザインに対するモデルより、観察結果の回転が決定される。
−複数の観察結果からの、スピンの決定−
観察結果の1つは、タイムスタンプ及び当該画像の撮影に用いられたカメラの較正データを有するような、ボールの画像である。それは、ボールの向きを表す6軸オフセット、ボールの位置、抽出されたデータとともに作成された信頼値とともにボールより抽出されたさまざまなサブ画像の位置又は分布、のような以前の入力を用いて抽出された、結果として得られるデータからなるものであってよい。
−スピン計算−
ボールの観察値のセットを用いて、スピン軸とスピンレートを計算する。観察結果の1つは、カメラ及び関連するタイムスタンプと共にあるような3Dオフセット行列である。3D軸についての、或る大きさの運動として、ねじれが定義される。観察結果の各々のペアリング間の、明らかなねじれを見つけ出す。このねじれ値は、ねじれ値の間の角度のsin/2によって重み付けられる。これらのねじれの重み付け平均は、スピン軸を与える。全体に亘る信頼値を用いてスピン値が計算されるのであり、計算されたスピン軸及びスピンレートからの個々のずれが見出される。その後、これらを用いて異常値が取り除かれ、スピンが再計算される。結果として得られるスピン軸ベクトル及びスピンオフセットが図解的に3Dで示されるのであり、これにより作業者は、値が正しいことを検証することが可能となる。スピン軸を有するボールの飛行のアニメーションが示され、また実際に取得されたデータに対する関係が表される。任意の中間位置におけるボールの画像が作成され、中間位置において任意の角度からボールを視認することが可能となる。
−回転軸、及びレートの計算−
以下、最初の3つの場合においては、球状の物体上で観察されるマークから整合性のある3D座標を計算するための方法が既に存在するものとする。
ケース1:マーキングされたボール、既知のモデル、及び2つのラベル付けされた観察結果のセット。
2つの観察結果に対する直接的な方法は、現在の基準セット(潜在的にボールの中心を含む)に基づいて座標フレームFc1及びFc2を計算し、その後、対応するモデルの基準と共に同一のアルゴリズムを用いてモデルフレームFm1及びFm2を計算することである。同次座標を用いて行列として座標フレームを表すことにより、我々は、以下のようにモデルを観察位置へと動かすオフセット行列を計算することができる。
1=Fc1*Fm1 -1,O2=Fc2*Fm2 -1
1をO2へと回転するような所望のオフセット行列Rが、以下のように見出される。
R*O1=O2,R=O2*O1 -1
R=Fc2*Fm2 -1*Fm1*Fc1 -1
所望される場合、標準的な手続きを用いて、回転行列を同等の角度及び回転軸形式へと容易に変換することが可能である。
四元形式;(cos(Θ/2),ηxsin(Θ/2),ηysin(Θ/2),ηzsin(Θ/2),
あるいは(角度,ベクトル)形式;(Θ,ηx,ηy,ηz
角度は、(+/−)N*2πの間隔までしか分からないということに留意する。回転レートの計算は観測結果の間の既知の時間差(To2−To1)に基づいており、適切な間隔Nを決定するためにはスピンレートと方向とに物理的な制限を仮定しなければならない。
スピンレート=(Θ +/− N*2π)/(To2−To1
ケース2:マーキングされたボール、既知のモデル、及びNのラベル付けされた観察結果のセット。
任意の観察結果のペアにより、ケース1にて概説した手続きを用いて角度/ベクトルの見積もりが出されるであろう。ベクトルの見積もりは2πの間隔に依存するものではなく、見積もりの重み付け平均を直接計算することができる。平均回転レートの計算は、仮定している物理的制約や、観察結果に亘って整合するような個々の2π間隔を見つけるということに依存するであろう。「最もよく適合する」角度/ベクトルを見つけ出すための代わりのアプローチは、問題を3変数における非線形誤差最小化問題として設定し、未知数について解くための標準的技法を用いることである。複数の時間間隔によりあいまいさが低減されるのであり、πよりも大きい観察結果間での回転についてさえ、解を得ることが可能となる。
−ロゴスピン−
ボールの反対側に同一のマークを有する既知のボールに対して、スピンレート及び軸を明確な一連の可能性へと制限することができる。マークの積極的な識別に加えて、マークがないということをもって可能性を制限できるということにも注目すべきである。この計算からの結果は常に単独の値であるとは限らず、むしろ可能性のある範囲のセットとして得られるものである。最良の可能性を決定するために、しばしば他の情報が用いられるであろう。
ケース3:マーキングされたボール、未知のモデル、及びNの観察結果のセット。
この技法においては、複数の観察結果に亘って視認できるようなボールへの共通のマーキングが要求される。マーキングの回転はボールの回転軸に直交し、マークの移動を用いて回転レートを計算できるであろう。
−ロゴスピン−
未知のボールに対して、観察結果のセットを用いて典型的なボールのマーキングと整合するようなボールの記述の構築を試みることができる。見出された観察結果を用いて、既知のゴルフボールマーキングシステムに対する整合性のチェックが行われ、可能であればモデルが作成されるであろう。しかしながら、1つのあるいは複数の視認できるマークを捕捉する観察結果が複数存在する場合、上記のとおりこれを直接用いて、ボールのモデルを構築することなく、回転軸とレートとを見出すことができる。
ケース4:マーキングされたボール、未知のモデル、及び2の観察結果のセット。
マークの向きがわかれば、そしてそれが両方の観察結果におけるものであれば、上記のとおり向きの変化を直接計算することが可能である。そうでない場合、回転のサイズの下限を除けば何もわからない。これは、ロゴマークを有する典型的なボールに対する例である。
−スピン減衰測定システム−
スピン減衰測定システムは、以下により構成される。
空間の測定体積をカバーすることができ、見出された全てのショットにタイムスタンプをすることができるスピン測定システム。
著しい数のボールがショットの終わりにおいて測定体積を通過するように、設定されたスピン、角度、速度で反復可能にボールを打ち上げる、打ち上げデバイス。
初期スピンと打ち上げデータを捕捉する、スピン測定システム。
一連の特定打ち上げ条件に対してボールの着地スポットの中央に配置することのできる、持ち運び可能なスピン測定。
全ての情報及び計算結果を記録するための、データ収集システム。
システムは、特定のスピン、角度、及び速度で複数のショットを打ち上げることにより動作する。ショットの打ち上げ地点には注意すべきである。持ち運び可能なシステムは着地ゾーンの中央に置かれており、最終的なスピンの十分な測定を可能として飛行中のスピン変化を正確に決定することができるようにするべく、十分な数のショットが行われる。初期の、及び最終的な測定の両方がなされる全てのショットに対して、初期セグメントと最終セグメントとの間でスピン軸及びレートが比較され、差が計算される。このプロセスはさまざまな初期条件に対して繰り返され、結果の整合性が計算され、スピン減衰を用いた飛行モデルへのフィッティングがなされる。
−例−
所定のスピン、打ち上げ角度及び速度の設定に対して、ボールは20回打たれる。着地位置、及びそれらの分布には注意すべきである。少なくとも5つのボールが飛行により測定ゾーンを通過するような位置が見出され、持ち運び可能なスピン測定システムはそこに置かれる。この設定において20の測定結果が所望される場合、80回のショットがなされ、全てのショットに対して初期スピンデータが捕捉され、ショットの最終セグメントから捕捉された任意のスピンデータと組み合わせられる。これは、全てのスピン測定結果に対してタイムスタンプをマッチングすることにより行われる。
−クラブ測定システム−
クラブヘッドスピードのある範囲に亘るクラブデータを捕捉するために、発火するストロボを備えた2つのカメラを用いることができる。クラブ上でのマーキングを必要としない、2つのアプローチとは、クラブフェイスを照射するか、あるいはクラブのシルエットを捕捉するものである。クラブのシルエットは、クラブが背景に対して移動するに従ってそのクラブの画像を取得するような高速カメラを用いて得ることができる。赤外線を用いる場合には、赤外光によって強く照らされるような、或る材料を用いることができる。しかしながら、クラブはボールに向かう予測可能な経路内を移動するのであって、したがって取得されなければならない領域は画像全体よりも大幅に小さい。ゆえに、取得領域を計算することが可能であり、クラブに対する効果的な取得レートは200fpsとすることが可能であって、これは前後における少なくとも3つの位置に対して十分な速さである。例えば何らかのCMOSセンサ等、幾つかの商用センサによって興味ある領域の捕捉が可能となるのであり、その取得スピードは取得されるピクセル領域に比例するということに注意すべきである。これにより、捕捉される領域を減らすことができるならば、大幅に高いフレームレートを得ることが可能となる。ボールが打たれるかもしれない潜在的領域を、例えば24”×12”のように大きくとる場合、ボールが実際にどこで打たれるかを知ることにより、捕捉する領域のサイズを1/4から1/16にすることが可能となるかもしれない。これによりフレームレートを4−16倍速くすることが可能となるのであり、クラブスイングの事象を捕捉するために従来の15−60fpsセンサを用いることが可能となる。多くの場合、センサの興味ある取得エリアをセットアップするためのセットアップ時間が存在するということに注意すべきである。しかしながら、この時間は、打つべきボールが静止していなければならないようなゴルフアプリケーションにおいても存在しうるものである。ベースボールに適用する際には、例えば視界をプレートの周りのヒッティングゾーンに制限することが可能である。シルエットアプローチにおいてストロボを用いる場合、各々のショットにおいてクラブヘッドを見分けることは困難である。
−直接の照射−
クラブ領域を光で照らすことができ、その光の鏡面反射を取得するようカメラが配置される。構造化された光を用い、クラブフェイスを3Dで決定することを可能とするようなパターンを作り出すことができる。クラブの材料及び形状には幅があり、ひとつの設定において全てのタイプのクラブからよいデータを取得することは困難である。
−スミアアプローチ−
カメラの視界は、連続的に画像を露出するような一定の照明により照らされる。結果的に得られるスミアはボールの飛行を表し、ボール上のマーキングの移動は、スピン軸とスピンレートとを表す。画像中に明るいタイミングマークを作り出して正確なタイミング情報を可能とするために、ストロボを一定のレートで発火する必要がある。あるいは、通常はオンであって、タイミングの計算を可能にするような短いオフ間隔を伴うストロボ光を用いることも可能である。フレームレートが十分であれば、フレームの終わりよりも前に停止する露出により画像中にギャップが作り出され、これにより速度を見出すことが可能となるであろう。ここで、ボール上のマークは、ボールの回転によってスミアが付けられる際に特徴的なパターンを作り出すものでなければならない。同様に、クラブの運動を、クラブのはっきりした形、あるいはそのシルエットでスミアとして捕捉することが可能である。クラブフェイスとカメラの間の3D関係に依存して、幾つかのカメラにおけるエッジのシルエットによってクラブフェイスの3D運動を記述することが可能である。用いられるクラブの範囲に対して都合のよい、そしてカメラにおけるクラブの視認を妨げないような、セットアップが必要となるであろう。
−シルエットアプローチ−
スクリーンが、ティー領域の前、横、あるいは後ろに亘って広げられ、可視光又は赤外線で照らされると、ボール又はクラブによって画像センサ上に落とされる影を分析することにより、ボール又はクラブの通り道を測定することが可能となる。影は、目標の運動を止めるために十分な、短い露出からのものであってよい。あるいはそれよりも長いならば、スミアが作られる。ボール内部の特徴を決定することは不可能である。
−クラブのシルエット−
使われているクラブの3Dモデルを用いて、それが作るシルエットを十分なカメラから得ることにより、クラブフェイスの経路を再構築することが可能となる。スイング中の幾つかのポイントにおいてクラブの臨界のエッジが視認できるよう、カメラを配置する必要があるであろう。シルエット中のさまざまなエッジから、クラブフェイスの6軸位置が再構築される。カメラにフィルタをかけて、照射波長における影響を最大化することが可能である。緑色(芝の色)の背景に対しては、緑色ノッチフィルタによって可視スペクトルにおける所望の影響が与えられるであろう。赤外線照射に対しては、可視光での色とは無関係に拡散照射を生み出すような材料が存在する。このような性質に関する例としては、オレフィンのカーペットがある。赤外光が照射されたときから拡散赤外光照射を生み出すように、芝の色をしたマットにはこの材料が「ドープ」される。これにより、ヒッティング領域は、クラブとボールとをシルエットで描くバックライトに当てられる。運動の軌道に対してカメラがなす角度によって長い露出におけるシルエット画像の強度が決定されるということに、留意すべきである。
−クラブモデルの決定−
クラブモデルとは、その幾何学構造、及び質量分布等、その他の性質である。これらの値を捕捉して取り出すために、3Dカメラと、恐らくは重量センサが用いられる。あるいは、カメラを用いて、使われるクラブ、及びクラブの性質についてのデータベースから得られるその性質を識別することが可能である。また、ユーザは必要な値を単に入力してもよい。シルエットアプローチにおいては、使われるクラブを決定するために、クラブの取得シーケンスに追加を行うことが必要となるであろう。これにより、その幾何学構造及び性質をデータベースから読み出すか、又はそれらをクラブパラメータ決定作業によって決定することが可能となる。クラブの幾何学構造を見出すプログラムが実行されているさまざまな方向へと、カメラの視界に亘ってクラブを動かすことにより、クラブパラメータが決定される。加えて、クラブの幾何学構造がわかったのであれば、クラブ質量分布プログラムを実行しつつ、幾つかの方向からクラブによって重量シフトセンサを打つことにより、クラブの質量分布を決定することが可能である。例えば、まず底面によってクラブに打撃が与えられなければならず、その後に先端、後端、そしてフェイスの反対側が続くというように、クラブにおいて重量シフトセンサ表面を打つ部分は既知でなければならないとすることができる。
−影アプローチ−
カメラから見てクラブ背後の光景が暗く、何らかのオフセットを用いつつカメラについてさまざまな方向から照射が行われている場合、クラブはそのクラブの背後に影を落とすであろう。影は、目標の運動を止めるために十分な、短い露出からのものであってよい。あるいはそれよりも長いならば、スミアが作られる。このアプローチを、通常のボール画像の取得と合わせて用いることが可能である。ライトとカメラの位置が既知であるとすれば、影は内部的特徴を含まないがボールの位置についての情報を含んでいる。
−3D視野シミュレータシステム−
上記システムは、ボールデータシステム、パッティングシステム、クラブシステム、スイングシステム、及び広角度カメラを備える。
−スイングシステム−
さまざまな目標を照らして目立たせ、これと組み合わせて、2以上のカメラがシミュレータにおけるさまざまな領域から情報を取得する。
−広角度カメラ−
シミュレータ上部から広い領域を見渡すカメラが追加される。カメラはシミュレータ座標へと較正され、シミュレータ時間に同期される。このカメラから観察結果が抽出され、さまざまな目的のために使用される。
より分解能の高いカメラによって十分な観察結果が得られない場合、それらを用いて追加的観察結果を与えることができる。このようなことは、ショットが大きく外れたときに起こりうる。
ボールの初期位置、及び打撃の時刻を取得する。
水平打ち上げ角度、クラブ速度等のクラブデータを取得する。
視界中のいずれかより、パッティング情報を捕捉する。
広角度カメラは較正されるのであって、連続的な照射、あるいはストロボ照射のいずれを用いることも可能である。画像は捕捉され、また、シミュレータの状態、及び任意の画像処理をガイドするために用いられる主要なボールデータシステムからの結果と共に記憶される。システムが用意されると、画像のヒッティング領域内でボールの画像を見つけ出すことにより、ボールの初期位置が見出される。ヒッティング領域内のボールの位置によってボールの高さが決定されるのであり、ここにおいて高さがあらかじめ見出されることとなる。加えて、ティーショットであるか否かということが、システムに伝えられる。ボールにおける初期の高さ、及び初期位置を、ボールの高さを正確に決定するべくボールインパクトモデルと一緒に用いられているカメラにおけるボールの初期位置の間の関係を用いて、主要な3D打ち上げカメラから見出すことも可能である。
クラブデータと共に、ボールを打つタイミングがまず見出される。ボールとクラブの画像が抽出される。ボールは直接抽出され、クラブはグラウンド背景に対するシルエットとして抽出される。このカメラにフィルタをかけて緑色の背景についてのコントラストを強調することができるし、あるいは背景を、赤外線を照射されて拡散する材料とすることも可能である。
ボールの初期位置を中心とする少なくとも3つの位置において、クラブ位置が見出される。ボールの初期位置、3D打ち上げ角度、及び3D速度が、クラブ速度と水平打ち上げ角度とを見出すために、知られる。その後これらの位置は、このデータと整合するクラブヘッド運動のモデルへとフィッティングされ、ボールを打つ前後におけるクラブヘッド速度が、水平打ち上げ角度と共に見出される。
パッティングに対して、カメラは単に、初期パッティング位置の領域においてボールの画像を取得する。ボールは極めて遅く動いている。少なくとも2つの画像が得られるのであり、これにより、パットスピードとパットの水平打ち上げ角度とを見つけ出すことが可能となる。
カメラスピードを上昇させるような臨界的アプローチは、既知のボール初期位置を利用し、その上で極めて小さい画像を取得することを中心とするものである。これにより、領域の1/3だけが取得される場合には、例えばフレームレートを2倍に増やすことが可能となる。大部分の画像センサはこのような能力を与えるものであるが、ひとつの方向についてのみ可能とするものもある。
センサの全長がボールの飛行方向にくることができるよう、カメラを向けなければならない。取得の幅は、スピードを得るために可能な限り狭められるが、典型的なクラブとボールの角度を許容するのに十分広いものとされる。
追加的な情報が用いられる。単純なクラブデータ、パッティングデータ、広いショットのデータ、及び精度と範囲とを改善させるためのさらなる視界。
−シミュレータのシミュレーション−
シミュレータが作成される。そのシミュレータは、当該シミュレータにおける3D体積をシミュレーションするものである。それには、ボール飛行モデルと共に、ゴルファー、ゴルフスイング、カメラ、及びライトのモデルが含まれる。それにより、シミュレータのレイアウトの変化に伴うカメラ及びライトのセットアップ調整が可能となる。それは、シミュレーションの初期条件を保存する。サンプルのショットから、一連の画像が作成される。シミュレータにより、起こりうる衝突及び目標間の距離を見ることが可能となる。シミュレータは、画像を劣化させるさまざまなノイズ及びエラー条件の導入を可能とするようセットアップされる。カメラとライトとをセットアップし、特定のシミュレータ構成が与えられたときの最終的な位置を決定するために、それを用いることができる。その後、これらの位置は、カメラとライトの取り付けをするために用いることができる。シミュレータによって、期待される結果と見出された結果との分析を伴うボールマーキングシステムの自動的なテストが可能となる。
シミュレータ上で繰り返し実行し、さまざまな位置を評価することによって、最適なライト/カメラの幾何学配置を決定することができる。シミュレータにおけるカメラ/ライトの位置が、図9A及び9Aにて示されている。図9Aでは、起点41の地点に関して、ライト43と協働する第1のカメラ42、及びライト45と協働する第2のカメラ44により、視野領域40が観察される。図9Bにおいて、視野領域40を包囲する視野領域47を観察するために、第3のカメラ46が追加されている。ボールの3D軌道50が図10に示されている。第1のカメラ42は地点51(時刻1)及び53(時刻3)において第1の軌道55のラインに沿って画像を取得する。第2のカメラ44は地点52(時刻2)及び54(時刻4)において第2の軌道56のラインに沿って画像を取得する。この情報を組み合わせて、3D軌道ライン50が生成される。
−スポーツシミュレーションゲームの大気環境の捕捉及びシミュレーション−
このシステムには幾つかの要素が存在する。
隆起を含む地形のモデル。
地形に基づいて局所的風速のモデル化を可能とするような、地形の拡張。
所定の位置に対して実際の空気流を見出すに際して地形を考慮に入れる、空気流モデル。
平均風速数又は気象条件を用いて、例えば丘、川、木がある丘、浜風等の地形的特徴周辺での空気流をモデル化する、空気流モデル。
季節、気象条件、及び日における時刻を考慮に入れる、空気流モデル。
数10メートル(10s of meters)のオーダーで空気流を再形成するようなテーブルを許容するモデル。
所定の現在の条件下での空気流の値を作成するための入力を与えるような位置及び隆起に対応する測定された流れの値のテーブルが作成される。符号化スキームにより、流れのパターンを効率的に記憶することが可能となる。デバイスにより、1メートル領域における風速と風向きが測定される。特定の時刻、季節、気象条件に対する空気流チャートの作成を可能とするために、さまざまな領域がサンプリングされる。風速の追加的なセットが作成される。それらは、指示される位置及び条件に対してモデルが与える予測空気流と比較される。モデルからのずれが十分大きければ、そのずれが記録される。風速の変化及び向きが、位置と条件に基づいてモデル化される。現実の場所における、そして特定の条件における、風速と風向きの測定が行われる。特定の一連条件下での風速及び風向きの再作成を可能とするべく、モデルに対する相関が計算され、そして記憶される。
風速及び風向きは、さまざまな所定のボールの飛行において生じうる効果を示すようなアニメーションとして表現される。所定のボールパラメータの下でのボールスピードと向きへの影響がモデル化され、図解的に示される。これは、現行のスポーツイベントシミュレーションの拡張であって、ボールの飛行の結果をシミュレーションするに際してボール飛行モデルをより正確に用いることを可能とする。
特許法規の規定に従い、本発明の好ましい実施形態を表現すると考えられるべきものの中で当該本発明が説明された。しかしながら、本発明の精神又は範囲から逸脱することなく、具体的に描写及び記述されたものとは別の方法で本発明を実施できることに留意すべきである。

Claims (14)

  1. 打ち上げ角度、ボール速度、ボールスピン等のボール軌道、ゴルフ関連データを収集して分析するためのシステムであって、
    スイングモニタと、
    打ち上げモニタと、
    パッティングプロファイラと、
    ボールファインダと、
    自動化されたパフォーマンスエンハンスメントと、
    を備え、前記自動化されたパフォーマンスエンハンスメントは、
    ボールの飛行画像を記録するための少なくとも1つのカメラと、
    視野の初期位置のみを観察して目標の進入を検出し、前記カメラによって前記目標の画像を得るための視野における別の部分を予測するための、前記カメラに接続された制御手段と、
    を備えた、システム。
  2. 画像を得るために、複数のカメラ又は高速カメラがストロボライトあるいは赤外線照射とともに用いられる、請求項1に記載のシステム。
  3. ゴルファーの動きのプロファイル、一連のスイングのプロファイル、及び骨格運動を分析して改善することが可能である、請求項1に記載のシステム。
  4. ボールのスピンを分析するための方法であって、
    a)既定の関係を有するマークによってボールにマーキングをするステップと、
    視野を通過する前記ボールの運動中に、マーキングされたボールの画像を既定の回数だけ較正されたカメラを用いて得るステップと、
    マークの向きについて前記画像を分析し、前記ボールの3D軌道を得るステップと、
    を含む方法。
  5. 前記マークは、曲がった線セグメント、らせん線、及び円のうちのひとつである、請求項4に記載の方法。
  6. 前記画像から得られたデータを3D表面座標へとマッピングするステップをさらに含む、請求項4に記載の方法。
  7. 既知の関係を有する複数の画像が比較分析のために同一領域にて記録されている場合に、マーキングされていないボールを追跡するステップをさらに含む、請求項4に記載の方法。
  8. ゴルフクラブのスイングを分析するための方法であって、
    ゴルフクラブの3Dエッジ画像を取得するために少なくとも2つのカメラを備えるステップと、
    クラブフェイスを方向付けるステップと、
    ゴルフボールの出発点とボールの軌道とを記録するステップと、
    を含む方法。
  9. 前記クラブがゴルフボールを打つ瞬間が前記ボールの軌道から決定される、請求項8に記載の方法。
  10. 前記クラブが前記ボールを打ち、前記クラブフェイスの向きが打撃地点にあるようなポイントを計算するステップをさらに含む、請求項9に記載の方法。
  11. 前記クラブフェイスからの鏡面反射が必要なデータを測定するために用いられ、可視光あるいは赤外光がカメラと共に用いられ、カメラは前記クラブフェイスのシルエットを記録するか直接照射を記録し、
    さらに前記ゴルフクラブの6軸軌道を決定するステップを含む、
    請求項10に記載の方法。
  12. 複数のカメラとゴルフクラブのシルエットとを用いるステップと、
    モデルスイングと比較されるデータを記録するステップと、
    を含み、捕捉されたゴルフクラブのシルエットからのずれが最も小さいモデルからシルエットが生成される、
    請求項8に記載の方法。
  13. ゴルファーのスイングのモデルを作成するステップと、
    前記作成されたスイングを検討中であるスイングとマッチングするステップと、
    をさらに含む請求項12に記載の方法。
  14. 前記クラブはパターである、請求項8に記載の方法。
JP2010525999A 2007-09-21 2008-09-19 物体の位置及び運動検出システム、及び方法 Active JP5719170B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US97418507P 2007-09-21 2007-09-21
US60/974,185 2007-09-21
PCT/US2008/077010 WO2009039367A1 (en) 2007-09-21 2008-09-19 Object location and movement detection system and method

Publications (2)

Publication Number Publication Date
JP2010540036A true JP2010540036A (ja) 2010-12-24
JP5719170B2 JP5719170B2 (ja) 2015-05-13

Family

ID=40468375

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010525999A Active JP5719170B2 (ja) 2007-09-21 2008-09-19 物体の位置及び運動検出システム、及び方法

Country Status (6)

Country Link
US (1) US8328653B2 (ja)
EP (1) EP2185255A4 (ja)
JP (1) JP5719170B2 (ja)
KR (1) KR101386793B1 (ja)
CN (2) CN104524758B (ja)
WO (1) WO2009039367A1 (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101308369B1 (ko) 2013-02-26 2013-09-13 박선의 실외 골프 장치
JP2014508625A (ja) * 2011-03-22 2014-04-10 ゴルフゾン カンパニー リミテッド 仮想ゴルフシミュレーション装置と、これに用いられるセンシング装置及びセンシング方法
JP2014095553A (ja) * 2012-11-07 2014-05-22 Nippon Telegr & Teleph Corp <Ntt> カメラポーズ推定装置、及びカメラポーズ推定プログラム
JP2014512903A (ja) * 2011-03-22 2014-05-29 ゴルフゾン カンパニー リミテッド 仮想ゴルフシミュレーション装置に用いられるセンシング装置及びセンシング方法
JP2015508597A (ja) * 2011-12-29 2015-03-19 ゴルフゾン カンパニー リミテッド ステレオビジョンシステムの映像処理方法及びその装置
JP2016507283A (ja) * 2013-01-08 2016-03-10 ゴルフゾン カンパニー リミテッド 運動するボールに対するセンシング装置及びセンシング方法
WO2016068227A1 (ja) * 2014-10-31 2016-05-06 横浜ゴム株式会社 移動体の挙動計測方法および挙動計測装置
JP2016087427A (ja) * 2014-10-31 2016-05-23 横浜ゴム株式会社 移動体の挙動計測方法および挙動計測装置
JP2019536064A (ja) * 2016-11-16 2019-12-12 ダブリュエイダブリュジーディー インコーポレイテッド ゴルフボール打ち出しモニタ目標位置調整方法およびシステム
KR20220016027A (ko) * 2020-07-29 2022-02-08 썬전 그린조이 테크놀로지 컴퍼니 리미티드 골프 고속 카메라 센서 전용 mark 볼
US11615541B2 (en) 2019-10-31 2023-03-28 Gpro Co., Ltd. Ball tracking apparatus and ball tracking method

Families Citing this family (103)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9623284B2 (en) * 2008-02-20 2017-04-18 Karsten Manufacturing Corporation Systems and methods for storing and analyzing golf data, including community and individual golf data collection and storage at a central hub
CA2740109C (en) * 2008-10-08 2016-01-19 Interactive Sports Technologies Inc. Sports simulation system
US20100328140A1 (en) * 2008-11-06 2010-12-30 Lang Hong Video-Doppler-Radar Traffic Surveillance System
US8553936B2 (en) * 2009-03-03 2013-10-08 The Ohio State University Gaze tracking measurement and training system and method
US20110077112A1 (en) * 2009-09-30 2011-03-31 Richard Erario Electronics module support system for use with sports objects
US20110187536A1 (en) * 2010-02-02 2011-08-04 Michael Blair Hopper Tracking Method and System
US8882606B2 (en) * 2010-01-28 2014-11-11 Nike, Inc. Golf swing data gathering method and system
US9058670B2 (en) * 2010-05-03 2015-06-16 Stats Llc Trajectory detection and analysis in sporting events
US20120002041A1 (en) * 2010-07-02 2012-01-05 Sunman Engineering, Inc. Golf Ball Finder
US8935103B2 (en) * 2010-07-15 2015-01-13 Nike, Inc. Method and system for golf ball fitting analysis
US8988508B2 (en) * 2010-09-24 2015-03-24 Microsoft Technology Licensing, Llc. Wide angle field of view active illumination imaging system
KR101733116B1 (ko) * 2010-12-10 2017-05-08 한국전자통신연구원 고속 스테레오 카메라를 이용한 구형 물체의 비행 정보 측정 시스템 및 방법
KR101031432B1 (ko) * 2010-12-31 2011-04-26 (주) 골프존 비거리 감소율에 대한 보정을 제공하는 가상 골프 시뮬레이션 장치 및 방법
US8708833B2 (en) * 2011-02-18 2014-04-29 Sri Sports Limited Method for measuring behavior of golf club and ball
KR101078898B1 (ko) * 2011-03-31 2011-11-01 (주) 골프존 가상 골프연습장 시뮬레이션 장치 및 방법
US20120316843A1 (en) * 2011-06-08 2012-12-13 Cobra Golf Incorporated Systems and methods for communicating sports-related information
JP2013009771A (ja) * 2011-06-28 2013-01-17 Bridgestone Corp ゴルフスイング時のヘッドの挙動の計測解析システム、計測解析方法、及びプログラム
US8950236B2 (en) 2011-08-23 2015-02-10 Nike, Inc. Methods for providing a selection of a recommended golf ball
JP6176673B2 (ja) * 2011-09-23 2017-08-09 クリエイツ インコーポレイテッドCreatz Inc. 複数のカメラで運動する被写体を撮影し、その撮影イメージに基づいて被写体の実際の運動軌跡を取得するための方法およびシステム
WO2013067089A2 (en) * 2011-11-01 2013-05-10 Totus Solutions, Inc. Networked modular security and lighting device grids and systems, methods and devices thereof
US10118078B2 (en) 2011-11-02 2018-11-06 Toca Football, Inc. System, apparatus and method for ball throwing machine and intelligent goal
GB2496429B (en) * 2011-11-11 2018-02-21 Sony Corp A method and apparatus and program
KR101706200B1 (ko) 2011-11-25 2017-02-16 한국전자통신연구원 회전체의 회전 특성 측정 방법 및 장치
US8517850B1 (en) 2012-12-11 2013-08-27 Cobra Golf Incorporated Golf club grip with device housing
US9416959B2 (en) 2012-05-17 2016-08-16 Donald Spinner Illuminated golf
JP5843751B2 (ja) * 2012-12-27 2016-01-13 株式会社ソニー・コンピュータエンタテインメント 情報処理装置、情報処理システム、および情報処理方法
KR101472274B1 (ko) * 2013-01-08 2014-12-12 (주) 골프존 운동하는 볼에 대한 센싱장치 및 센싱방법
KR101428922B1 (ko) * 2013-04-19 2014-08-11 한밭대학교 산학협력단 퍼지 시스템을 이용한 골프 스윙 분류 장치 및 방법
US10576344B1 (en) * 2013-06-21 2020-03-03 Matthew Glenn Golfball rebounder
CN109364482B (zh) * 2013-07-01 2022-09-02 飞迪科技有限责任公司 双环境游戏系统
US11027193B2 (en) 2013-07-01 2021-06-08 Flyingtee Tech, Llc Two-environment game play system
WO2015026346A1 (en) 2013-08-22 2015-02-26 Hewlett Packard Development Company, L.P. Projective computing system
CN105288982B (zh) * 2014-07-23 2018-02-23 黄详龙 高尔夫球的运动状态测定装置
AT516137A1 (de) * 2014-08-14 2016-02-15 Natalis Mag Fh Ganzer Freistoßabstandsanzeigevorrichtung
US9555284B2 (en) * 2014-09-02 2017-01-31 Origin, Llc Multiple sensor tracking system and method
US20160173739A1 (en) * 2014-12-12 2016-06-16 Acushnet Company Portable launch monitor
CN104469326A (zh) * 2014-12-25 2015-03-25 安徽寰智信息科技股份有限公司 一种用于板球教学与训练的视频采集与处理方法
CN104486594A (zh) * 2014-12-26 2015-04-01 安徽寰智信息科技股份有限公司 一种用于壁球教学与训练的视频采集与处理方法
CN104486590A (zh) * 2014-12-26 2015-04-01 安徽寰智信息科技股份有限公司 一种用于高尔夫球教学与训练的视频采集与处理方法
CN104486592A (zh) * 2014-12-26 2015-04-01 安徽寰智信息科技股份有限公司 一种用于标枪教学与训练的视频采集与处理方法
CN104581065A (zh) * 2014-12-29 2015-04-29 安徽寰智信息科技股份有限公司 一种用于曲棍球击球教学与训练的视频采集与处理方法
KR101723432B1 (ko) * 2015-06-12 2017-04-18 주식회사 골프존 운동하는 볼에 대한 센싱장치 및 센싱방법
KR101892155B1 (ko) * 2015-10-01 2018-08-28 라온피플 주식회사 캘리브레이션 시스템 및 방법
US20170193140A1 (en) * 2015-12-30 2017-07-06 IAM Sports & Entertainment Monitoring Performance and Generating Feedback with Sensor Environment
KR101744042B1 (ko) * 2016-01-14 2017-06-07 주식회사 골프존뉴딘 야구 연습 장치에 이용되는 센싱장치 및 센싱방법과, 이를 이용한 야구 연습 장치 및 이의 제어방법
US9999823B2 (en) * 2016-01-15 2018-06-19 Inxpar Inc. System for analyzing golf swing process and method thereof
KR101865576B1 (ko) * 2016-01-22 2018-06-08 주식회사 골프존뉴딘홀딩스 야구 연습 장치에 이용되는 센싱장치 및 센싱방법과, 이를 이용한 야구 연습 장치 및 이의 제어방법
CN113599788B (zh) * 2016-02-19 2023-03-28 沛勒尔维珍公司 用于在体育事件中监测运动员表现的系统和方法
KR101920468B1 (ko) * 2016-03-04 2018-11-20 한국전자통신연구원 이중 촬영 방식 저속카메라 기반 객체 자동 인식 장치 및 그 방법
US10421012B2 (en) 2016-03-25 2019-09-24 Zero Latency PTY LTD System and method for tracking using multiple slave servers and a master server
US9916496B2 (en) 2016-03-25 2018-03-13 Zero Latency PTY LTD Systems and methods for operating a virtual reality environment using colored marker lights attached to game objects
US10717001B2 (en) 2016-03-25 2020-07-21 Zero Latency PTY LTD System and method for saving tracked data in the game server for replay, review and training
US10071306B2 (en) 2016-03-25 2018-09-11 Zero Latency PTY LTD System and method for determining orientation using tracking cameras and inertial measurements
US10486061B2 (en) 2016-03-25 2019-11-26 Zero Latency Pty Ltd. Interference damping for continuous game play
KR101906847B1 (ko) * 2016-06-29 2018-10-12 주식회사 크리에이츠 공 이미지 촬영을 위한 관심 영역을 결정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
KR101826837B1 (ko) * 2016-08-12 2018-02-08 주식회사 골프존 볼의 비행정보 연산장치, 볼의 비행정보 연산방법 및 이를 기록한 컴퓨팅장치에 의해 판독 가능한 기록매체
US10751609B2 (en) 2016-08-12 2020-08-25 Zero Latency PTY LTD Mapping arena movements into a 3-D virtual world
CN106643662B (zh) * 2016-09-20 2019-03-19 深圳市衡泰信科技有限公司 球体及其高速旋转运动参数检测方法
CN106422210B (zh) * 2016-10-13 2018-07-20 北京昊翔信达科技有限公司 一种基于图像处理的人体运动状态检测方法及系统
WO2018085894A1 (en) * 2016-11-10 2018-05-17 Formalytics Holdings Pty Ltd Measuring a property of a trajectory of a ball
KR101971060B1 (ko) * 2016-11-18 2019-04-23 한국전자통신연구원 모듈형 고속 촬영 장치, 고속 영상 기반의 공 운동 인식 장치 및 방법
EP3574490A1 (en) * 2017-01-26 2019-12-04 Telefonaktiebolaget LM Ericsson (publ) Detection systems and methods
GB201703243D0 (en) * 2017-02-28 2017-04-12 Pro Sport Support Ltd System, method, apparatus and marker for assessing athletic performance
KR101973607B1 (ko) * 2017-03-03 2019-04-29 주식회사 엠엘코어 Rfid를 이용한 볼 추적 장치 및 방법
US10486032B2 (en) 2017-03-09 2019-11-26 Sportsmedia Technology Corporation Systems and methods for tracking sports balls configured with electronic components
US10810903B2 (en) 2017-04-05 2020-10-20 Flyingtee Tech, Llc Computerized method of detecting and depicting a travel path of a golf ball
US20180353828A1 (en) * 2017-06-09 2018-12-13 Golftech, Llc Method and apparatus for ball flight analysis
US10803598B2 (en) * 2017-06-21 2020-10-13 Pankaj Chaurasia Ball detection and tracking device, system and method
US10489656B2 (en) * 2017-09-21 2019-11-26 NEX Team Inc. Methods and systems for ball game analytics with a mobile device
USD842401S1 (en) 2017-11-02 2019-03-05 Daniel J. Mueller Baseball
US10380409B2 (en) * 2017-11-16 2019-08-13 Blast Motion Inc. Method for estimating a 3D trajectory of a projectile from 2D camera images
USD849166S1 (en) 2017-12-07 2019-05-21 Ssg International, Llc Golf putter grip
US10099101B1 (en) 2017-12-07 2018-10-16 Ssg International, Llc Golf club grip with sensor housing
CN110298864B (zh) * 2018-03-23 2021-05-11 深圳市衡泰信科技有限公司 一种高尔夫推杆设备的视觉感测方法及装置
US11077351B2 (en) 2018-05-02 2021-08-03 Rapsodo Pte. Ltd. Measurement and reconstruction of the golf launching scene in 3D
WO2019229748A1 (en) * 2018-05-28 2019-12-05 United Perfectum Ltd. Golf game video analytic system
US11783707B2 (en) 2018-10-09 2023-10-10 Ford Global Technologies, Llc Vehicle path planning
KR102024831B1 (ko) * 2018-10-29 2019-09-25 주식회사 크리에이츠 공의 회전을 측정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
KR102185322B1 (ko) * 2018-11-28 2020-12-01 알바이오텍 주식회사 적외선 스테레오 카메라를 이용한 위치 검출 시스템
GB2582273A (en) * 2019-03-07 2020-09-23 Gazapi Sport Ltd Sports balls
US11030774B2 (en) 2019-03-19 2021-06-08 Ford Global Technologies, Llc Vehicle object tracking
US11045705B2 (en) * 2019-03-19 2021-06-29 NEX Team Inc. Methods and systems for 3D ball trajectory reconstruction
SE543273C2 (en) * 2019-03-29 2020-11-10 Tobii Ab Training an eye tracking model
US11460851B2 (en) 2019-05-24 2022-10-04 Ford Global Technologies, Llc Eccentricity image fusion
US11521494B2 (en) 2019-06-11 2022-12-06 Ford Global Technologies, Llc Vehicle eccentricity mapping
US11662741B2 (en) 2019-06-28 2023-05-30 Ford Global Technologies, Llc Vehicle visual odometry
WO2021025877A1 (en) * 2019-08-07 2021-02-11 Triple Track, Llc Golf ball with indicia
CN110598570A (zh) * 2019-08-20 2019-12-20 贵州民族大学 一种行人异常行为检测方法、系统、存储介质及计算机设备
US10894198B1 (en) * 2019-10-01 2021-01-19 Strikezone Technologies, LLC Systems and methods for dynamic and accurate pitch detection
CN110755835B (zh) * 2019-11-01 2021-09-14 深圳市衡泰信科技有限公司 一种高尔夫防作弊系统
US11207582B2 (en) * 2019-11-15 2021-12-28 Toca Football, Inc. System and method for a user adaptive training and gaming platform
EP4091681A4 (en) * 2020-01-16 2023-07-26 Creatz Inc. METHOD, SYSTEM AND COMPUTER READABLE NON-TRANSITORY RECORDING MEDIA FOR MEASURING BALL ROTATION
US10898757B1 (en) * 2020-01-21 2021-01-26 Topgolf Sweden Ab Three dimensional object tracking using combination of radar speed data and two dimensional image data
US20230188696A1 (en) * 2020-04-24 2023-06-15 Visionary Machines Pty Ltd Systems And Methods For Generating And/Or Using 3-Dimensional Information With Camera Arrays
US11514590B2 (en) 2020-08-13 2022-11-29 Toca Football, Inc. System and method for object tracking
US11710316B2 (en) 2020-08-13 2023-07-25 Toca Football, Inc. System and method for object tracking and metric generation
JP7322320B2 (ja) * 2020-08-14 2023-08-07 トップゴルフ スウェーデン エービー 仮想時間同期を使用した三次元オブジェクト追跡の前の二次元画像データのモーションベースの前処理
CN112801193B (zh) * 2021-02-03 2023-04-07 拉扎斯网络科技(上海)有限公司 定位数据处理方法、装置、电子设备、介质
DE102021202843A1 (de) * 2021-03-23 2022-09-29 ESN Deutsche Tischtennis Technologie GmbH Tischtennisball mit Markierung zur Erfassbarmachung einer Ballrotation
KR102603088B1 (ko) * 2021-03-30 2023-11-16 주식회사 골프존 타격되어 이동하는 골프공에 대한 스핀 산출 방법 및 이를 이용한 스핀 산출 장치
CN113274733A (zh) * 2021-07-12 2021-08-20 上海小白球体育文化发展有限公司 一种高尔夫球置顶式检测方法、系统及存储介质
KR102612559B1 (ko) * 2021-12-06 2023-12-13 (주) 엑스골프 패턴이 인쇄된 골프공의 움직임을 추적하는 전자 장치, 이의 동작 방법 및 이를 저장하는 컴퓨터로 판독 가능한 기록 매체
CN114677430B (zh) * 2022-01-12 2024-04-16 深圳市路远智能装备有限公司 一种组合式的多相机视觉对位方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04241885A (ja) * 1991-01-16 1992-08-28 Mizuno Corp ゴルフゲーム模擬装置
JPH1144700A (ja) * 1997-07-25 1999-02-16 Sanyo Electric Co Ltd 速度測定装置、該装置を用いた自動追尾システム及び予想到達位置表示システム
JP2002306659A (ja) * 2001-02-14 2002-10-22 Acushnet Co ローンチモニター装置及びその使用方法
JP2003117044A (ja) * 2001-04-26 2003-04-22 Photron Ltd 打球診断装置
JP2005529339A (ja) * 2002-06-06 2005-09-29 ウィントリス エンジニアリング コーポレイション 飛行パラメータ測定システム
JP2006181014A (ja) * 2004-12-27 2006-07-13 Fuji Photo Film Co Ltd 画像解析装置および動作修正システム
JP2006230630A (ja) * 2005-02-23 2006-09-07 Nihon Knowledge Kk 実技分析システム及びプログラム

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4063259A (en) * 1975-10-29 1977-12-13 Acushnet Company Method of matching golfer with golf ball, golf club, or style of play
US4375887A (en) * 1975-10-29 1983-03-08 Acushnet Company Method of matching golfer with golf ball, golf club, or style of play
US4160942A (en) * 1977-09-12 1979-07-10 Acushnet Company Golf ball trajectory presentation system
US4136387A (en) * 1977-09-12 1979-01-23 Acushnet Company Golf club impact and golf ball launching monitoring system
US4158853A (en) * 1977-09-12 1979-06-19 Acushnet Company Monitoring system for measuring kinematic data of golf balls
US6241622B1 (en) * 1998-09-18 2001-06-05 Acushnet Company Method and apparatus to determine golf ball trajectory and flight
US5846086A (en) * 1994-07-01 1998-12-08 Massachusetts Institute Of Technology System for human trajectory learning in virtual environments
US6359647B1 (en) * 1998-08-07 2002-03-19 Philips Electronics North America Corporation Automated camera handoff system for figure tracking in a multiple camera system
US6514081B1 (en) * 1999-08-06 2003-02-04 Jeffrey L. Mengoli Method and apparatus for automating motion analysis
US6697820B1 (en) * 2000-01-14 2004-02-24 Martin B. Tarlie System for and method of golf performance recordation and analysis
US7118498B2 (en) * 2000-06-16 2006-10-10 Skyhawke Technologies, Llc Personal golfing assistant and method and system for graphically displaying golf related information and for collection, processing and distribution of golf related data
JP2002024466A (ja) * 2000-07-05 2002-01-25 Fujitsu Ltd ゴルフデータ管理システム及びデータセンタ及びゴルフデータ管理方法
US6585609B2 (en) * 2001-01-05 2003-07-01 John Bays Golf shot mapping and analysis system
US7094164B2 (en) * 2001-09-12 2006-08-22 Pillar Vision Corporation Trajectory detection and feedback system
KR200265558Y1 (ko) 2001-11-30 2002-02-21 김기수 체감형 골프 시뮬레이션 시스템
US7324663B2 (en) * 2002-06-06 2008-01-29 Wintriss Engineering Corporation Flight parameter measurement system
JP4064248B2 (ja) * 2003-01-21 2008-03-19 Sriスポーツ株式会社 ボール弾道計測装置
US20060025229A1 (en) * 2003-12-19 2006-02-02 Satayan Mahajan Motion tracking and analysis apparatus and method and system implementations thereof
US7170592B2 (en) * 2004-03-10 2007-01-30 Acushnet Company Method of inspecting a sphere without orienting the sphere
US7095312B2 (en) * 2004-05-19 2006-08-22 Accurate Technologies, Inc. System and method for tracking identity movement and location of sports objects
KR100631035B1 (ko) * 2004-06-03 2006-10-02 이기영 구기 스포츠의 스윙 폼 교정장치
US7143639B2 (en) * 2004-06-07 2006-12-05 Acushnet Company Launch monitor
US7264554B2 (en) * 2005-01-26 2007-09-04 Bentley Kinetics, Inc. Method and system for athletic motion analysis and instruction
JP4609646B2 (ja) 2005-03-29 2011-01-12 ブリヂストンスポーツ株式会社 ゴルフボールの弾道シミュレーション方法及び飛行シミュレーション方法
US7217164B2 (en) 2005-08-03 2007-05-15 Andrew Liam Brendan Short Visual sports training apparatus and method
US8016688B2 (en) * 2005-08-15 2011-09-13 Acushnet Company Method and apparatus for measuring ball launch conditions
US20070049393A1 (en) 2005-08-26 2007-03-01 Acushnet Company Method for predicting ball launch conditions
JP2007167549A (ja) 2005-12-26 2007-07-05 Mizuno Corp ゴルフクラブヘッド挙動解析装置およびゴルフクラブヘッド挙動解析方法、シート材
EP1810721A1 (en) * 2006-01-19 2007-07-25 Friends-for-Golfers GmbH Golf diagnosis apparatus, golf equipment device, golf diagnosis system, and method of mounting a golf diagnosis apparatus

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04241885A (ja) * 1991-01-16 1992-08-28 Mizuno Corp ゴルフゲーム模擬装置
JPH1144700A (ja) * 1997-07-25 1999-02-16 Sanyo Electric Co Ltd 速度測定装置、該装置を用いた自動追尾システム及び予想到達位置表示システム
JP2002306659A (ja) * 2001-02-14 2002-10-22 Acushnet Co ローンチモニター装置及びその使用方法
JP2003117044A (ja) * 2001-04-26 2003-04-22 Photron Ltd 打球診断装置
JP2005529339A (ja) * 2002-06-06 2005-09-29 ウィントリス エンジニアリング コーポレイション 飛行パラメータ測定システム
JP2006181014A (ja) * 2004-12-27 2006-07-13 Fuji Photo Film Co Ltd 画像解析装置および動作修正システム
JP2006230630A (ja) * 2005-02-23 2006-09-07 Nihon Knowledge Kk 実技分析システム及びプログラム

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014508625A (ja) * 2011-03-22 2014-04-10 ゴルフゾン カンパニー リミテッド 仮想ゴルフシミュレーション装置と、これに用いられるセンシング装置及びセンシング方法
JP2014512903A (ja) * 2011-03-22 2014-05-29 ゴルフゾン カンパニー リミテッド 仮想ゴルフシミュレーション装置に用いられるセンシング装置及びセンシング方法
JP2015508597A (ja) * 2011-12-29 2015-03-19 ゴルフゾン カンパニー リミテッド ステレオビジョンシステムの映像処理方法及びその装置
JP2014095553A (ja) * 2012-11-07 2014-05-22 Nippon Telegr & Teleph Corp <Ntt> カメラポーズ推定装置、及びカメラポーズ推定プログラム
JP2016507283A (ja) * 2013-01-08 2016-03-10 ゴルフゾン カンパニー リミテッド 運動するボールに対するセンシング装置及びセンシング方法
KR101308369B1 (ko) 2013-02-26 2013-09-13 박선의 실외 골프 장치
WO2016068227A1 (ja) * 2014-10-31 2016-05-06 横浜ゴム株式会社 移動体の挙動計測方法および挙動計測装置
JP2016087427A (ja) * 2014-10-31 2016-05-23 横浜ゴム株式会社 移動体の挙動計測方法および挙動計測装置
JP2019536064A (ja) * 2016-11-16 2019-12-12 ダブリュエイダブリュジーディー インコーポレイテッド ゴルフボール打ち出しモニタ目標位置調整方法およびシステム
US11615541B2 (en) 2019-10-31 2023-03-28 Gpro Co., Ltd. Ball tracking apparatus and ball tracking method
KR20220016027A (ko) * 2020-07-29 2022-02-08 썬전 그린조이 테크놀로지 컴퍼니 리미티드 골프 고속 카메라 센서 전용 mark 볼
JP2022546146A (ja) * 2020-07-29 2022-11-04 深▲セン▼市衡泰信科技有限公司 ゴルフ高速度撮影センサー用マークボール
JP7288075B2 (ja) 2020-07-29 2023-06-06 深▲セン▼市衡泰信科技有限公司 ゴルフ高速度撮影センサー用マークボール
KR102616899B1 (ko) * 2020-07-29 2023-12-27 썬전 그린조이 테크놀로지 컴퍼니 리미티드 골프 고속 카메라 센서 전용 mark 볼
US11872450B2 (en) 2020-07-29 2024-01-16 Shenzhen Greenjoy Technology Co., Ltd. Mark ball special for golf high-speed camera sensor

Also Published As

Publication number Publication date
CN104524758B (zh) 2017-10-03
US20100210377A1 (en) 2010-08-19
KR101386793B1 (ko) 2014-04-21
EP2185255A1 (en) 2010-05-19
EP2185255A4 (en) 2013-08-14
CN101918089A (zh) 2010-12-15
CN104524758A (zh) 2015-04-22
JP5719170B2 (ja) 2015-05-13
KR20100102583A (ko) 2010-09-24
US8328653B2 (en) 2012-12-11
WO2009039367A1 (en) 2009-03-26

Similar Documents

Publication Publication Date Title
JP5719170B2 (ja) 物体の位置及び運動検出システム、及び方法
US11291902B2 (en) Systems and methods for illustrating the flight of a projectile
US7300356B2 (en) Apparatus and method of measuring the flying behavior of a flying body
JP3235987B2 (ja) ゴルフボールの回転運動測定方法
JP4628782B2 (ja) 飛行パラメータ測定システム
JP3778427B2 (ja) 打球診断システム
US20150119157A1 (en) Sports simulator and simulation method
US20070244667A1 (en) Method for predicting a golfer&#39;s ball striking performance
US20050159231A1 (en) One camera club monitor
JP5584961B2 (ja) ゴルフクラブの試打システムおよびゴルフクラブの試打方法
US20180353828A1 (en) Method and apparatus for ball flight analysis
JP4109094B2 (ja) 球体の回転特性と飛行特性の測定方法
US7346194B2 (en) Method and apparatus of measuring rotational and flight characteristics of sphere
KR20020005580A (ko) 골프 공 비행 감시 장치
KR20220136560A (ko) 2대의 카메라에 의해 실측되는 볼의 회전정보를 이용한 골프 시뮬레이션 방법 및 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110901

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121129

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130228

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130307

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130528

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140226

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140526

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140602

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140822

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150320

R150 Certificate of patent or registration of utility model

Ref document number: 5719170

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250