JP6458739B2 - 解析装置、記録媒体および解析方法 - Google Patents

解析装置、記録媒体および解析方法 Download PDF

Info

Publication number
JP6458739B2
JP6458739B2 JP2015554651A JP2015554651A JP6458739B2 JP 6458739 B2 JP6458739 B2 JP 6458739B2 JP 2015554651 A JP2015554651 A JP 2015554651A JP 2015554651 A JP2015554651 A JP 2015554651A JP 6458739 B2 JP6458739 B2 JP 6458739B2
Authority
JP
Japan
Prior art keywords
play
user
analysis
extracted
events
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015554651A
Other languages
English (en)
Other versions
JPWO2015098304A1 (ja
Inventor
有祐 渡邉
有祐 渡邉
英行 松永
英行 松永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JPWO2015098304A1 publication Critical patent/JPWO2015098304A1/ja
Application granted granted Critical
Publication of JP6458739B2 publication Critical patent/JP6458739B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/003Repetitive work cycles; Sequence of movements
    • G09B19/0038Sports
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Databases & Information Systems (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Biology (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本開示は、解析装置、記録媒体および解析方法に関する。
これまでに、センシングや解析を利用して、スポーツのプレーを支援する技術が多く開発されてきている。例えば、特許文献1には、モーションセンサの検出データを用いてスイングの動作の検出を行い、スイングの動作が検出されたデータをスイング候補データとして抽出し、スイングに関連付けられる判定条件に基づきスイング候補データから真のスイングデータを選択する技術が記載されている。これによって、例えば、ユーザがスイング動作の開始や終了のタイミングを指示する必要がなく、比較的小さい計算負荷でスイングデータの抽出を行うことができる。
特開2012−254205号公報
しかしながら、特許文献1に記載されたような技術では、個々のスイングを解析することはできるものの、得られたデータを系列または集合として解析していない。スポーツのプレーの上達のためには、スイングなどの個々のプレーを解析して改善点などを発見することも重要であるが、例えばゲームやセット構成する一連のプレーは相互に関係しており、個々のプレーに着目するにしてもその前後のプレーの影響は無視できない。また、いわゆる試合運びやプレーのコンビネーションといったものについては、一連のプレーについて得られたデータを系列または集合として解析しなければ把握することが困難である。
そこで、本開示では、スポーツの一連のプレーについて得られたデータを系列または集合として解析することが可能な、新規かつ改良された解析装置、記録媒体および解析方法を提案する。
本開示によれば、スポーツをプレーするユーザのモーションに基づいて定義されたプレーイベントを示すデータを取得する取得機能と、上記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出する抽出機能と、上記抽出された複数のプレーイベントを示すデータを解析する解析機能とを実現するプロセッサを備える解析装置が提供される。
また、本開示によれば、スポーツをプレーするユーザのモーションに基づいて定義されたプレーイベントを示すデータを取得する取得機能と、上記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出する抽出機能と、上記抽出された複数のプレーイベントを示すデータを解析する解析機能とをコンピュータに実現させるためのプログラムが格納された記録媒体が提供される。
また、本開示によれば、スポーツをプレーするユーザのモーションに基づいて定義されたプレーイベントを示すデータを取得することと、上記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出することと、上記抽出された複数のプレーイベントを示すデータを解析することとを含む解析方法が提供される。
以上説明したように本開示によれば、スポーツの一連のプレーについて得られたデータを系列または集合として解析することができる。
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態に係るシステム構成の例を示す図である。 本開示の一実施形態に係るシステムの装置構成を概略的に示すブロック図である。 本開示の一実施形態における解析処理の例について説明するための図である。 図3に示した例におけるフィルタ部の機能を概念的に示す図である。 図4の例において抽出されたプレーイベント群に対する解析の例を示す図である。 図5の例において示されたプレーイベントの特徴の分散と習熟度との関係について説明するための図である。 図4の例におけるプレーイベントの特徴に基づく解析の他の例を示す図である。 本実施形態における単一のユーザのプレーイベントの解析結果のさらなる例を示す図である。 本実施形態における単一のユーザのプレーイベントの解析結果のさらなる例を示す図である。 本開示の一実施形態における複数のユーザのプレーイベントの解析の例について説明するための図である。 本開示の一実施形態における複数のユーザのプレーイベントの解析の例についてより具体的に説明するための図である。 図11に示した解析の結果を2次元平面において表現する情報の例を示す図である。 図11に示した解析の結果を2次元平面において表現する情報の例を示す図である。 本実施形態における複数のユーザのプレーイベントの解析結果のさらなる例を示す図である。 本実施形態における複数のユーザのプレーイベントの解析結果のさらなる例を示す図である。 本開示の実施形態に係るセンサ装置のハードウェア構成の例を示す図である。 本開示の実施形態に係る解析装置のハードウェア構成の例を示す図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
1.システム構成
2.解析処理の例
2−1.単一のユーザのプレーイベントの解析
2−2.複数のユーザのプレーイベントの解析
3.ハードウェア構成
4.補足
なお、以下の説明は、具体的なスポーツの例(テニス)を用いてなされるが、本技術の適用範囲は例示されたスポーツには限られない。例えば、スポーツをプレーするユーザのモーションに基づいてプレーイベントが定義されうる限りにおいて、本技術はどのようなスポーツにでも適用可能である。
(1.システム構成)
図1は、本開示の一実施形態に係るシステム構成の例を示す図である。図1を参照すると、システム10は、センサ装置100と、スマートフォン200と、サーバ300とを含む。
センサ装置100は、テニスのラケットRに装着される。センサ装置100は、例えばモーションセンサ(例えば加速度センサ、ジャイロセンサ、地磁気センサなど)を備える。この場合、センサ装置100が直接的に検出するのはラケットRのモーションであるが、ラケットRはユーザによって把持され、ユーザの意思に従って運動するため、センサ装置100はラケットRのモーションを介して間接的にユーザのモーションを検出しているともいえる。本明細書では、このような場合、センサ装置100はユーザに間接的に装着されてユーザのモーションを検出しているという。
なお、他の実施形態において、センサ装置100は、例えばユーザの衣服や靴などに装着されてもよい。この場合も、センサ装置100が直接的に検出するのは衣服や靴のモーションであるが、衣服や靴はユーザとともに運動するため、センサ装置は間接的にユーザのモーションを検出しているといえる。あるいは、センサ装置100は、例えばバンドで腕に巻き付けられるなどして、ユーザに直接的に装着されていてもよい。この場合、センサ装置100は直接的にユーザのモーションを検出しうる。センサ装置100がユーザのモーションを直接的に検出する場合だけでなく、間接的に検出する場合であっても、検出されるモーションにユーザのモーションが反映されていれば、センサ装置100が提供する検出結果に基づいて、スポーツをプレーするユーザのモーションに対応するプレーイベントを定義することが可能である。
さらに、センサ装置100は、振動センサを備えてもよい。振動センサによって検出されるデータによって、例えば、プレーイベントに対応する区間(例えばボールのインパクトの前後の区間)の特定が容易になりうる。また、振動センサによって検出されるデータも、モーションセンサによって検出されるデータと同様にプレーイベントの解析に用いられてもよい。また、センサ装置100は、気温や湿度、明るさ、位置など、スポーツをプレーするユーザの環境情報を取得するためのセンサをさらに備えてもよい。センサ装置100が備える各種のセンサによって検出されたデータは、必要に応じて前処理された上で、例えばBluetooth(登録商標)などの無線通信によってスマートフォン200に送信される。
スマートフォン200は、例えばスポーツをプレーしているユーザの近傍に配置される。この場合、スマートフォン200は、Bluetooth(登録商標)などの無線通信によってセンサ装置100から送信されたデータを受信し、必要に応じて一時的に蓄積したり処理したりした上で、ネットワーク通信によってデータをサーバ300に送信する。また、スマートフォン200は、送信されたデータに基づいてサーバ300が実行した解析の結果を受信し、ディスプレイやスピーカなどを介してユーザに向けて出力してもよい。なお、解析結果の出力時において、ユーザはスポーツをプレーしていなくてもよい。また、解析結果の出力は、スマートフォン200とは別の、ユーザによって使用される情報処理端末、例えば各種のパーソナルコンピュータやタブレット端末、ゲーム機、テレビなどによって実行されてもよい。
また、スマートフォン200は、必ずしも、スポーツをプレーしているユーザの近傍に配置されていなくてもよい。この場合、センサ装置100は、検出されたデータを内部の記憶領域(メモリまたは外部記憶装置)に蓄積しておく。例えば、スポーツのプレー後、センサ装置100とスマートフォン200とが接近したときに、Bluetooth(登録商標)などの無線通信によって、データがセンサ装置100からスマートフォン200に送信されてもよい。あるいは、スポーツのプレー後、センサ装置100とスマートフォン200とがUSBなどで有線接続されたときにデータが送信されてもよい。また、センサ装置100からスマートフォン200へのデータの受け渡しには、リムーバブル記録媒体が用いられてもよい。
サーバ300は、スマートフォン200とネットワークを介して通信し、センサ装置100が備える各種のセンサによって検出されたデータを受信する。サーバ300は、受信されたデータを用いた解析処理を実行し、スポーツのプレーに関するさまざまな情報を生成する。例えば、サーバ300は、モーションセンサによって取得された、スポーツをプレーするユーザのモーションを直接的または間接的に示すデータに基づいて、プレーイベントを定義する。プレーイベントは、例えばラケットRを用いた1回のショットに対応する。プレーイベントを定義することによって、例えば、モーションデータによって表されるユーザのプレーを、{サーブ、ストローク、ボレー、…}といったような意味をもったプレーの連なりとして把握することができる。
さらに、サーバ300は、プレーイベントの解析処理によって、プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出し、抽出された複数のプレーイベントを示すデータを解析してもよい。サーバ300の解析処理によって生成された情報は、例えばスマートフォン200に送信され、スマートフォン200のディスプレイやスピーカを介してユーザに向けて出力される。あるいは、サーバ300は、スマートフォン200以外の情報処理端末に情報を送信し、ユーザに向けて出力させてもよい。また、サーバ300は、複数のユーザについてそれぞれ受信されたデータに基づいて解析処理を実行し、各ユーザについて生成されたプレーパターンなどを比較した結果に基づく情報を生成し、各ユーザの情報処理端末に送信してもよい。
図2は、本開示の一実施形態に係るシステムの装置構成を概略的に示すブロック図である。図2を参照すると、センサ装置100は、センサ110と、処理部120と、送信部130とを含む。スマートフォン200は、受信部210と、処理部220と、記憶部230と、送信部240と、撮像部250と、入力部260と、出力部270とを含む。サーバ300は、受信部310と、処理部320と、記憶部330と、送信部340とを含む。なお、それぞれの装置を実現するためのハードウェア構成例(センサ装置および解析装置のハードウェア構成例)については後述する。
センサ装置100では、センサ110が取得したデータを処理部120が処理し、処理されたデータを送信部130がスマートフォン200に送信する。センサ110は、上述の通り、例えばモーションセンサを含み、スポーツをプレーするユーザのモーションを直接的または間接的に検出する。また、センサ110は、振動センサやユーザの環境情報を取得するためのセンサなどをさらに含んでもよい。処理部120は、プログラムに従って動作するプロセッサによって実現され、センサ110によって取得されたデータを必要に応じて前処理する。前処理は、例えばサンプリングやノイズ除去などを含みうる。前処理は必ずしも実行されなくてもよい。送信部130は、通信装置によって実現され、例えばBluetooth(登録商標)などの無線通信を利用してデータをスマートフォン200に送信する。また、図2には示していないが、センサ装置100は、データを一時的に蓄積するための記憶部を備えてもよい。
スマートフォン200では、受信部210がセンサ装置100によって送信されたデータを受信し、送信部240がデータをサーバ300に送信する。受信部210および送信部240は、例えばBluetooth(登録商標)などの無線通信、および有線または無線のネットワーク通信を実行する通信装置によって実現される。受信されたデータは、例えば処理部220によって記憶部230に一時的に格納されてから送信される。また、受信されたデータについて、処理部220が前処理を実行してもよい。処理部220はプログラムに従って動作するプロセッサによって実現され、記憶部230はメモリまたはストレージによって実現される。受信部210は、さらに、サーバ300から送信された情報を受信してもよい。受信された情報は、例えば処理部220の制御に従って出力部270からユーザに向けて出力される。出力部270は、例えばディスプレイやスピーカを含む。
さらに、スマートフォン200では、撮像部250によって画像が取得される。撮像部250は、例えば撮像素子にレンズなどの光学系を組み合わせたカメラモジュールによって実現される。画像は、スポーツをプレーするユーザを被写体として含んでもよい。撮像部250によって取得された画像は、例えば受信部210によって受信されたデータとともに送信部240からサーバ300に送信される。画像は、サーバ300において、例えばセンサ装置100によって取得されたデータとともに解析処理に用いられてもよいし、解析処理によって生成された情報に組み込まれてもよい。入力部260は、例えばタッチパネルやハードウェアボタン、および/または音声入力やジェスチャ入力を受け付けるためのマイクロフォンやカメラを含む。処理部220は、入力部260を介して取得されたユーザ操作に従って、送信部240を介してサーバ300に情報をリクエストしてもよい。
サーバ300は、受信部310と、処理部320と、記憶部330と、送信部340とを備える。受信部310は、通信装置によって実現され、スマートフォン200からインターネットなどのネットワーク通信を利用して送信されたデータを受信する。処理部320は、例えばCPUなどのプロセッサによって実現され、受信されたデータを処理する。例えば、処理部320は、受信されたデータの処理の解析処理を実行し、解析後のデータをさらに記憶部330に蓄積したり、送信部340を介して出力したりしてもよい。あるいは、処理部320は、スマートフォン200などにおいて既に解析されたデータの蓄積および出力の制御を実行するだけであってもよい。
以上、本開示の一実施形態に係るシステムの構成について説明した。なお、上記で説明された構成は一例であり、他の実施形態ではさまざまな変形が可能である。例えば、上記の例では、センサ装置100によって取得されたデータを用いた解析処理がサーバ300の処理部320で実行されたが、解析処理はスマートフォン200の処理部220で実行されてもよいし、センサ装置100の処理部120で実行されてもよい。システム10は、センサ装置100と、スマートフォン200と、サーバ300とを含むものとして説明されているが、例えばスマートフォン200の処理部220で解析処理が実行される場合には、システム10にサーバ300が含まれなくてもよい。あるいは、この場合、サーバ300は、解析処理によって得られた情報を保存し、ユーザ間で共有するサービスを提供してもよい。また、例えばセンサ装置100の処理部120で解析処理が実行される場合には、システム10にスマートフォン200およびサーバ300が含まれなくてもよい。センサ装置100は、例えばユーザまたは用具に装着される専用のセンサ装置であってもよいし、携帯可能な情報処理端末に搭載されたセンサモジュールがセンサ装置100として機能してもよい。従って、センサ装置100は、スマートフォン200と同一の装置でありうる。
(2.解析処理の例)
図3は、本開示の一実施形態における解析処理の例について説明するための図である。図3を参照すると、解析処理を実行するプロセッサは、スポーツをプレーするユーザのモーションに基づいて定義されたプレーイベントを示すモーションデータ401とメタデータ403とを入力として取得する。次に、プロセッサは、フィルタ部405の機能によって、データによって示されるプレーイベントの中から、同じ種類に分類される複数のプレーイベントを抽出する。さらに、プロセッサは、特徴抽出部407の機能によって、抽出された複数のプレーイベントに対応するデータによって示されるモーションの特徴を抽出し、判定部409の機能によって特徴に基づく判定を実施する。
ここで、モーションデータ401は、センサ装置100が備えるセンサ110に含まれるモーションセンサによって取得されたデータであり、スポーツをプレーするユーザのモーションを示す。メタデータ403は、このモーションに基づいて定義されたプレーイベントを示すデータである。図示された例において、モーションデータ401とメタデータ403とは対応している。メタデータ403は、対応するモーションデータ401によって表されるプレーイベントの種類や属性などを定義する。例えばテニスの場合、プレーイベントの種類は、サーブ、フォアハンドストローク、バックハンドストローク、フォアハンドボレーなどといったショットの種類を含みうる。また、この場合、プレーイベントの属性は、発生時刻(例えばラケットとボールとのインパクトが発生した時刻)、スイング速度などといった情報を含みうる。
なお、モーションデータ401およびメタデータ403は、プレーイベントを示すデータの一例であり、他にもさまざまな形式で、プレーイベントを示すデータが取得されうる。例えば、個々のプレーイベントが、モーションデータとメタデータとが組み合わされた単一のデータによって示されてもよいし、連続して発生した複数のプレーイベントを示すモーションデータが1つに統合されており、複数のメタデータによって当該モーションデータの異なる区間が参照されてもよい。
フィルタ部405は、上記の通り、モーションデータ401およびメタデータ403によって示されるプレーイベントの中から、同じ種類に分類される複数のプレーイベントを抽出する。上記のように、例えばテニスの場合、プレーイベントの種類は、サーブ、フォアハンドストローク、バックハンドストローク、フォアハンドボレーなどといったショットの種類を含みうる。そこで、フィルタ部405は、いずれかのショットの種類のプレーイベントを抽出する。なお、抽出されるプレーイベントは単一であってもよい。ただし、その場合、抽出されたプレーイベントに対して実行される解析処理は、後述する特徴抽出部407および判定部409における処理とは異なりうる。
特徴抽出部407は、フィルタ部405によって抽出された複数のプレーイベントを示すデータ、つまり、モーションデータ401およびメタデータ403のうち、フィルタ部405によって抽出された複数のプレーイベントに対応するデータについて、特徴を抽出する解析処理を実行する。特徴抽出部407がプレーイベントのデータからどのような特徴を抽出するかは、例えば後続する判定部409での解析処理に応じて異なってもよい。また、抽出される特徴は、フィルタ部405が抽出するプレーイベントの種類に応じて異なってもよい。特徴の抽出方法としては、例えばk−meansコーディングや、オートエンコーダなどを利用することができる。これらの方法については既によく知られているため、ここでは詳細な説明を省略する。
判定部409は、フィルタ部405によって抽出された複数のプレーイベントについて、特徴抽出部407によって抽出された特徴に基づいて何らかの判定を実施する。例えば、抽出された複数のプレーイベントが単一のユーザのプレーイベントである場合、判定部409は、これらのプレーイベントによって示されるプレーの習熟度を判定してもよい。より具体的には、判定部409は、抽出された特徴に基づいてプレーの安定度を評価し、安定度に基づいて習熟度を判定してもよい。あるいは、判定部409は、プレーイベントの種類(例えばスイングの種類)ごとに予め収集された、習熟度(上級・中級・初級)ごとの教師データに基づいて学習される習熟度判定器を用いて習熟度を判定してもよい。
また、例えば、抽出された複数のプレーイベントが複数のユーザのプレーイベントを含む場合、判定部409は、これらのプレーイベントによって示される各ユーザのプレーの類似度を判定してもよい。より具体的には、判定部409は、抽出された特徴に基づいて各ユーザのプレーの特徴空間における距離を算出し(上記の安定度の評価と類似している)、距離に基づいて類似度を判定してもよい。
解析処理を実行するプロセッサは、さらに、解析によって生成された情報をディスプレイ(例えばスマートフォン200の出力部270に含まれる)に表示させる機能を実現してもよい。この場合、例えば、特徴抽出部407によって抽出された特徴を示す情報がディスプレイに表示されてもよい。このような表示のいくつかの例については後述する。
なお、上記の例において特徴抽出部407および判定部409によって実行される解析処理は、他の方法による解析処理、例えば特徴の抽出によらない解析処理によって代替されてもよい。例えば、モーションデータ401によってある種類のプレーイベントにおけるユーザのモーションが加速度などの波形として示される場合、所定の数のサンプル区間のそれぞれおける波形間の距離に基づいて、上記の安定度や類似度を判定してもよい。また、解析処理では、例えばユーザのプレーの癖が検出されてもよい。
図4は、図3に示した例におけるフィルタ部の機能を概念的に示す図である。図4には、3種類のプレーイベント1101からなる時系列から、同じ種類のプレーイベント群1103が抽出される例が示されている。より具体的には、プレーイベント1101は、フォアハンドストローク(FHST)のプレーイベント1101aと、バックハンドストローク(BHST)のプレーイベント1101bと、サーブ(SRV)のプレーイベント1101cとを含む。プレーイベント群1103は、フォアハンドストロークのプレーイベント群1103aと、バックハンドストロークのプレーイベント群1103bと、サーブのプレーイベント群1103cとを含む。
例えば、フィルタ部405は、プレーイベント1101の時系列から、プレーイベント群1103a〜1103cを抽出する。プレーイベント群1103a〜1103cは、同時並行的に抽出されて、それぞれのプレーイベント群についての解析処理が特徴抽出部407および判定部409で実行され、複数のプレーイベント種類についての解析結果が同時に出力されてもよい。あるいは、プレーイベント群1103a〜1103cは、そのうちの一部だけが抽出されて、抽出されたプレーイベント群についての解析処理が特徴抽出部407および判定部409で実行されてもよい。
なお、図示された例では、単一のユーザのプレーイベント1101からプレーイベント群1103が抽出されているが、複数のユーザのプレーイベントからプレーイベント群を抽出する場合についても同様である。この場合、プレーイベント群に含まれるプレーイベントのデータには、例えばどのユーザのプレーイベントであるかを示すユーザIDなどのメタデータが付加されてもよい。続く図5〜図7を参照した説明では、単一のユーザのプレーイベントからプレーイベント群が抽出された場合の例について説明する。複数のユーザのプレーイベントからプレーイベント群が抽出された場合の例については、さらに後で説明する。
(2−1.単一のユーザのプレーイベントの解析)
図5は、図4の例において抽出されたプレーイベント群に対する解析の例を示す図である。図5を参照すると、フィルタ部405によって抽出されたプレーイベント群1103a〜1103cのそれぞれについて、特徴抽出部407が各プレーイベントの特徴を抽出し、判定部409が各プレーイベントの特徴の分散(Distribution)に基づいて安定度(Stability)を評価する。
ここで、各プレーイベントの特徴は、例えば多次元の特徴ベクトルとして表現される。図では、このような特徴ベクトルの分散が、2次元平面において表現されている。例えば、解析処理を実行するプロセッサによって解析によって生成された情報をディスプレイに表示させる機能が実現される場合、このような、各プレーイベントの特徴空間での分散を2次元平面において示す情報が表示されてもよい。なお、多次元の特徴ベクトルを2次元平面や3次元空間において可視化する技術については、既によく知られているため、ここでは詳細な説明を省略する。
図示された例では、各プレーイベントの特徴の分散が、プレーイベント群1103ごとに大きく異なっている。従って、分散に基づいて評価される安定度も、プレーイベント群1103ごとに大きく異なる。次の図を参照して説明するように、安定度は、プレーの習熟度を示す指標として用いることができる場合がある。従って、図示された例では、プレーの習熟度を、プレーイベント群1103ごと、すなわちプレーイベントの種類ごとに判定できることになる。安定度が高いほど習熟度が高いとした場合、図示された例のユーザは、フォアハンドストロークについては習熟度が比較的高く、バックハンドストロークについては習熟度が比較的低く、サーブについては習熟度が中程度であることが推定される。このように、習熟度などの情報がプレーイベントの種類、テニスの例であればショットの種類ごとに生成される点は、本実施形態の利点の1つである。
図6は、図5の例において示されたプレーイベントの特徴の分散と習熟度との関係について説明するための図である。図6を参照すると、フォアハンドストロークについての2つのプレーイベント群1103a1,1103a2について、分散(Distribution)に基づいて安定度(Stability)が評価されている。ここで、プレーイベント群1103a1はテニス上級者のフォアハンドストロークのプレーイベント群であり、プレーイベント群1103a2はテニス初級者のフォアハンドストロークのプレーイベント群である。
本発明者らが立てた仮説によると、同じ種類のショットのプレーイベント群に含まれるプレーイベントの特徴の分散は、習熟度が高いほど小さくなる。従って、上級者のプレーイベント群1103a1に含まれる各プレーイベントの特徴空間での分散は、初級者のプレーイベント群1103a2に含まれる各プレーイベントの特徴空間での分散よりも小さい。これは、習熟度が高い上級者ほどスイングのモーションのばらつきが小さく、多くのケースで同じようなスイングができるためと考えられる。
ここで、例えばプレーイベントがテニスのショットについて定義されるような場合、ショット時のユーザのモーションに基づいて定義されるプレーイベントの特徴は、ショットの種類によって異なる。従って、プレーイベントの特徴分散を、異なる種類のプレーイベント(ショット)が混在した状態で算出しても、図6に示したような分散と安定度、および習熟度の関係は成り立たない。従って、上記のような特徴に基づく安定度の評価、および安定度に基づく習熟度の判定が可能になるのも、プレーイベントが同じ種類に分類されるプレーイベント群ごとに解析される本実施形態の利点の1つであるといえる。
図7は、図4の例におけるプレーイベントの特徴に基づく解析の他の例を示す図である。図7を参照すると、特徴空間において、さまざまな習熟度のプレーヤ(ユーザ)のプレーイベントの特徴が分布する領域A1〜A3が定義されている。領域A1は初級のプレーヤの特徴が分布する領域であり、領域A2は中級のプレーヤの特徴が分布する領域であり、領域A3は上級のプレーヤの特徴が分布する領域である。
図示された例は、判定部409が、プレーイベントの種類(例えばスイングの種類)ごとに予め収集された、習熟度(上級・中級・初級)ごとの教師データに基づいて学習される習熟度判定器を用いて習熟度を判定するケースに対応する。図示された例において、習熟度判定器は、それぞれの習熟度のプレーヤのプレーイベントの特徴の分布を教師データとする学習によって形成される。例えば図7に示したような2次元平面での領域の表現も、例えば解析処理を実行するプロセッサによって解析によって生成された情報をディスプレイに表示させる機能が実現される場合に利用されてもよい。
さらに、図示された例では、特徴空間において、あるユーザの特徴分布の時系列遷移を示す点Pが示されている。この例では、サービス利用開始当初は初級の領域A1の点P1にあったユーザの特徴分布の中心が、上達に従って中級の領域A2の点P2まで遷移し、さらに現在は上級の領域A3に向かって移動して点P3(まだ中級の領域A2)にあることが示されている。このような時系列遷移の表現も、解析によって生成された情報の表示に利用されてもよい。
図8および図9は、本実施形態における単一のユーザのプレーイベントの解析結果のさらなる例を示す図である。これらの例のような解析結果の表現も、解析によって生成された情報の表示に利用されてもよい。
図8に示す例では、上記で図5および図6を参照して説明されたプレーイベントの特徴の安定度(Stability)の、1日の中での時間的な変化が検出されている。図示された例では、ユーザがほぼ1日中(だいたい10:00から17:00まで)プレーしていたある日について、1時間ごとのプレーイベントの特徴の安定度が時間を横軸として、始点Psから終点Peまでの折れ線によって表現されている。このような表現によって、例えば、1日の中でのプレーの安定度の変化から、「ウォーミングアップに必要な時間」や、「疲れてプレーに影響が出るまでの時間」といった情報を得ることができる。
なお、例えば図8に示すように、ユーザのプレー全体に関する情報を得る場合には、プレーイベントの種類ごとに算出された特徴の安定度が、各種類のプレーイベントについて平均されて出力されてもよい。上述の通り、意味のある安定度を算出するためにはプレーイベントの種類ごとに解析処理を実行することが有効であるが、安定度が算出された後はプレーイベントの種類を超えた平均などの処理を実行してもよい。
図9に示す例では、上記で図5および図6を参照して説明されたプレーイベントの特徴の安定度(Stability)が、数カ月にわたる比較的長い期間での時間的な変化が検出されている。図示された例では、1月から7月までの期間について、1カ月ごとのプレーイベントの特徴の安定度が時間を横軸として表現されている。例えば、期間を通じたプレーの安定度の変化から、過去数カ月でプレーがどの程度上達したかを知ることができる。図示された例のように、安定度をプレーイベント(ショット)の種類ごとに表現すれば、それぞれの種類のプレーイベントに対応するプレーの上達具合を比較することもできる。また、同様の表現を、同じ種類のプレーイベントについての異なるユーザの間での安定度の比較に利用してもよい。
(2−2.複数のユーザのプレーイベントの解析)
図10は、本開示の一実施形態における複数のユーザのプレーイベントの解析の例について説明するための図である。図10を参照すると、解析処理を実行するプロセッサは、複数のユーザのプレーイベントから特徴抽出部407によって抽出された特徴データ411に基づいて、比較処理413を実行し、解析結果415を得る。解析結果415は、例えば、以下で説明する各プレーヤのプレーの特徴マップや、類似プレーヤマップなどを含みうる。
また、比較処理413では、さらに、特徴データ411にプレーイベントの特徴データが含まれる第1のユーザに提供するための付帯情報417が用いられてもよい。この場合、比較処理413の結果によってプレーが第1のユーザと類似していることが示される第2のユーザ(同じく、特徴データ411にプレーイベントの特徴データが含まれる)に、第1のユーザのための付帯情報417が提供されてもよい。付帯情報417は、例えば、ユーザの特定の種類のプレー(テニスの場合、例えばフォアハンドストローク)へのアドバイスや、ユーザの過去の対戦相手とその感想、などを含みうる。特徴データ411によってプレーが第1のユーザに類似していることが示される第2のユーザに対しては、第1のユーザと同じ付帯情報417が有効である可能性が高い。
図11は、本開示の一実施形態における複数のユーザのプレーイベントの解析の例についてより具体的に説明するための図である。図11を参照すると、解析処理を実行するプロセッサは、クエリ419を発行して、モーションデータ421からのデータの抽出処理423を実行する。抽出されたデータからは、解析処理425によって解析結果427が得られる。さらに、解析結果427に基づく表示処理429によって、解析結果の表示431が実現される。
クエリ419では、例えば、抽出するプレーイベントの種類(例えばテニスであれば、ショットの種類、フォアハンドストロークやバックハンドストローク、サーブなど)と、抽出対象のユーザとが指定される。例えば、サーバ300の記憶部330のデータベースには、多くのユーザのモーションデータ421が格納されているが、本実施形態におけるプレーイベントの解析、例えばプレーの類似度の判定が有効に実行できるユーザの数は限られているため、対象のユーザが限定されてもよい。また、モーションデータも個人情報の一種であるため、公開対象(友人まで、など)が限定されていることによって、抽出対象のユーザが限定されてもよい。
解析処理425では、上述した特徴抽出部407および判定部409の処理が実行される。つまり、抽出されたモーションデータ(クエリ419によって、特定の種類のプレーイベントに限定されている)からプレーイベントの特徴を抽出し、抽出した特徴に基づいて類似度などの判定が実施される。例えば、解析処理425において複数のプレーヤ(ユーザ)のプレーの特徴空間での距離を算出する場合、以下に示すようなプログラムによって処理が実行されうる。
for i=1,...,N
for j=i+1,...,N
(プレーヤiとプレーヤjの特徴間の平均距離を算出)
(算出された距離をC(i,j)に代入)
end
end
上記の場合、各プレーヤのプレーの特徴空間での距離を示す解析結果427は、行列Cを含みうる。上記のプログラムに示されるように、行列Cでは、要素C(i,j)が、i番目のプレーヤのプレーとj番目のプレーヤのプレーとの特徴空間での距離を示す。さらに、この場合、表示処理429では、以下の式1に示すような最適化問題を解く処理によって、行列Cで表現された各ユーザのプレーの特徴空間での距離が2次元平面において表現される。
Figure 0006458739
図12および図13は、図11に示した解析の結果を2次元平面において表現する情報の例を示す図である。図示された例では、実際に複数のユーザがテニスをプレーしたときに、ラケットに装着したセンサ装置100を用いて3軸の加速度および角速度のデータ(モーションデータ)を取得し、それぞれのユーザのモーションデータから抽出された特徴の特徴空間での位置関係を2次元平面において表現した。図12は種類(スイング種類)がフォアハンドストロークのプレーイベントについての特徴を示し、図13は種類がサーブのプレーイベントについての特徴を示す。例えばこれらの図に示したような2次元平面での領域の表現も、例えば解析処理を実行するプロセッサによって解析によって生成された情報をディスプレイに表示させる機能が実現される場合に利用されてもよい。
上記の例では、図12、図13とも、女性のプレーヤ(ユーザ)の特徴が、2次元平面における領域Awに集中して分布する傾向が見られた。この傾向が具体的に何を表しているかについてはさまざまな推測が可能である。この結果から、プレーイベントの種類ごとに特徴の解析を実施したことによって、解析結果において何らかの傾向が現れやすくなっていると推定される。
図14および図15は、本実施形態における複数のユーザのプレーイベントの解析結果のさらなる例を示す図である。これらの例のような解析結果の表現も、解析によって生成された情報の表示に利用されてもよい。
図14に示す例では、あるユーザのサーブについてのプレーイベント群1103c1によって示されるプレー(サーブ)が、比較対象となる他のユーザ(例えばプロのプレーヤであってもよい)のうち誰のプレーに似ているかが判定される。この場合、ユーザのプレーイベント群1103c1に含まれるプレーイベントの特徴が、他のユーザのプレーイベント群1103c2〜1103c4のそれぞれに含まれるプレーイベントの特徴と比較され、プレーイベント群1103c2〜1103c4のそれぞれについて類似度が算出される。図示された例では、プレーイベント群1103c3との類似度が最も高かったため、ユーザがプレーイベント群1103c3のユーザと共通するタイプであることを示す解析結果1105が出力されている。
図15に示す例では、サーブについてのプレーイベント群1103cによって示されるプレー(サーブ)について、各ユーザのプレーイベントの特徴を2次元平面にマッピングし、各ユーザを示すアイコンとともに表示する解析結果1107が出力されている。解析結果1107は、例えば図12および図13を参照して説明したマップと類似しているが、例えばアイコンとともに表示することで、各ユーザのプレーの類似度マップであることがよりわかりやすくなる。
(3.ハードウェア構成)
次に、図16および図17を参照して、本開示の実施形態に係るセンサ装置および解析装置(上述した例ではセンサ装置、スマートフォンまたはサーバ)を実現するためのハードウェア構成の例について説明する。
(センサ装置)
図16は、本開示の実施形態に係るセンサ装置のハードウェア構成の例を示す図である。図16を参照すると、センサ装置100は、センサ101と、CPU(Central Processing Unit)103と、ROM(Read Only Memory)105と、RAM(Random Access Memory)107と、ユーザインターフェース109と、外部記憶装置111と、通信装置113と、出力装置115とを含みうる。これらの要素は、例えばバスによって相互に接続される。
センサ101は、例えば加速度センサ、角速度センサ、振動センサ、地磁気センサ、温度センサ、圧力センサ(押下スイッチを含む)、またはGPS(Global Positioning System)受信機などを含む。センサ101は、カメラ(イメージセンサ)やマイクロフォン(音センサ)を含んでもよい。
CPU103、ROM105、およびRAM107は、例えば外部記憶装置111に記録されたプログラム命令を読み込んで実行することによって、様々な機能をソフトウェア的に実現する。本開示の実施形態では、CPU103、ROM105、およびRAM107によって、例えば、センサ装置100全体の制御などの機能が実現されうる。
ユーザインターフェース109は、センサ装置100へのユーザ操作を受け付ける、例えばボタンやタッチパネルなどの入力装置である。ユーザの操作は、例えば、センサ装置からのセンサ情報の送信の開始や終了を指示するものでありうる。
外部記憶装置111は、センサ装置100に関する各種の情報を記憶する。外部記憶装置111には、例えば、CPU103、ROM105、およびRAM107にソフトウェア的に機能を実現させるためのプログラム命令が格納されてもよく、またセンサ101によって取得されたデータが一時的にキャッシュされてもよい。センサ装置100が打具などに装着されることを考慮すると、外部記憶装置111としては、例えば半導体メモリなどの衝撃に強いものを使用することが望ましい。
なお、上述した、スマートフォン200がスポーツをプレーしているユーザの近傍に配置されない場合における、センサ装置100において検出されたデータを蓄積する内部の記憶領域(メモリまたは外部記憶装置)に対応する構成は、ROM105、RAM107、および/または外部記憶装置111である。
通信装置113は、有線または無線の各種通信方式によって後述する解析装置600と通信する。また、通信装置113は、機器間通信によって直接的に解析装置600と通信してもよいし、インターネットなどのネットワークを介して解析装置600と通信してもよい。
出力装置115は、情報を光、音声または画像として出力することが可能な装置で構成される。出力装置115は、例えばセンサ装置100における時刻やプレーイベントの検出を通知する情報を出力してもよいし、解析装置600から受信された解析結果、またはセンサ装置100において算出された解析結果に基づいて、ユーザに対する視覚的または聴覚的な通知を出力してもよい。出力装置115は、例えば、例えばLEDなどのランプ、LCDなどのディスプレイ、スピーカ、またはバイブレータなどを含む。
(解析装置)
図17は、本開示の実施形態に係る解析装置のハードウェア構成の例を示す図である。解析装置600は、本開示の実施形態に係る解析装置、例えば上記で説明したスマートフォン200またはサーバ300を実現しうる。なお、上述のように、解析装置は、センサ装置100によって実現されてもよい。
解析装置600は、CPU601と、ROM603と、RAM605と、ユーザインターフェース609と、外部記憶装置611と、通信装置613と、出力装置615とを含みうる。これらの要素は、例えばバスによって相互に接続される。
CPU601、ROM603、およびRAM605は、例えば外部記憶装置611に記録されたプログラム命令を読み込んで実行することによって、様々な機能をソフトウェア的に実現する。本開示の実施形態では、CPU601、ROM603、およびRAM605によって、例えば、解析装置600全体の制御や、上記の機能構成における処理部の機能などが実現されうる。
ユーザインターフェース609は、解析装置600へのユーザ操作を受け付ける、例えばボタンやタッチパネルなどの入力装置である。
外部記憶装置611は、解析装置600に関する各種の情報を記憶する。外部記憶装置611には、例えば、CPU601、ROM603、およびRAM605にソフトウェア的に機能を実現させるためのプログラム命令が格納されてもよく、また通信装置613が受信したセンサ情報が一時的にキャッシュされてもよい。また、外部記憶装置611には、解析結果のログが蓄積されてもよい。
出力装置615は、情報をユーザに対して視覚的または聴覚的に通知することが可能な装置で構成される。出力装置615は、例えば、LCD(Liquid Crystal Display)などの表示装置、またはスピーカやヘッドホンなどの音声出力装置などでありうる。出力装置615は、解析装置600の処理により得られた結果を、テキストまたは画像などの映像として出力したり、音声または音響などの音声として出力したりする。
以上、センサ装置100および解析装置600のハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。かかる構成は、実施する時々の技術レベルに応じて適宜変更されうる。
(4.補足)
本開示の実施形態は、例えば、上記で説明したような解析装置(スマートフォンなどの情報処理端末、サーバ、またはセンサ装置)、システム、解析装置またはシステムで実行される情報処理方法、解析装置を機能させるためのプログラム、およびプログラムが記録された一時的でない有形の媒体を含みうる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、以下のような構成も本開示の技術的範囲に属する。
(1)スポーツをプレーするユーザのモーションに基づいて定義されたプレーイベントを示すデータを取得する取得機能と、
前記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出する抽出機能と、
前記抽出された複数のプレーイベントを示すデータを解析する解析機能と
を実現するプロセッサを備える解析装置。
(2)前記解析機能は、前記抽出された複数のプレーイベントに対応する前記モーションの特徴を解析する、前記(1)に記載の解析装置。
(3)前記抽出された複数のプレーイベントは、単一のユーザのプレーイベントであり、
前記解析機能は、前記抽出された複数のプレーイベントによって示される前記単一のユーザのプレーを前記特徴に基づいて評価する、前記(2)に記載の解析装置。
(4)前記解析機能は、前記単一のユーザのプレーの安定度を前記特徴に基づいて評価する、前記(3)に記載の解析装置。
(5)前記解析機能は、前記単一のユーザのプレーの習熟度を前記安定度に基づいて判定する、前記(4)に記載の解析装置。
(6)前記解析機能は、前記特徴の時間的な変化を検出する、前記(3)〜(5)のいずれか1項)に記載の解析装置。
(7)前記抽出された複数のプレーイベントは、複数のユーザのプレーイベントを含み、
前記解析機能は、前記抽出された複数のプレーイベントのそれぞれによって示される前記複数のユーザのプレーを前記特徴に基づいて比較する、前記(2)に記載の解析装置。
(8)前記複数のユーザは、第1のユーザおよび第2のユーザを含み、
前記解析機能は、前記プレーに関して第1のユーザに提供される情報を、前記比較の結果によって前記プレーが前記第1のユーザと類似していることが示される前記第2のユーザにも提供する、前記(7)に記載の解析装置。
(9)前記プロセッサは、前記解析によって生成された情報をディスプレイに表示させる表示制御機能をさらに実現する、前記(1)〜(8)のいずれか1項)に記載の解析装置。
(10)前記解析機能は、前記抽出された複数のプレーイベントに対応する前記モーションの特徴を解析し、
前記表示制御機能は、前記特徴を示す情報を表示させる、前記(9)に記載の解析装置。
(11)前記抽出された複数のプレーイベントは、複数のユーザのプレーイベントを含み、
前記表示制御機能は、前記複数のユーザの前記特徴を2次元平面において示す情報を表示させる、前記(10)に記載の解析装置。
(12)スポーツをプレーするユーザのモーションに基づいて定義されたプレーイベントを示すデータを取得する取得機能と、
前記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出する抽出機能と、
前記抽出された複数のプレーイベントを示すデータを解析する解析機能と
をコンピュータに実現させるためのプログラムが格納された記録媒体。
(13)スポーツをプレーするユーザのモーションに基づいて定義されたプレーイベントを示すデータを取得することと、
前記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出することと、
前記抽出された複数のプレーイベントを示すデータを解析することと
を含む解析方法。
10 システム
100 センサ装置
110 センサ
120 処理部
200 スマートフォン
210 受信部
220 処理部
300 サーバ
310 受信部
320 処理部
401 メタデータ
403 モーションデータ
405 フィルタ部
407 特徴抽出部
409 判定部

Claims (19)

  1. スポーツのプレーに応じたユーザのモーションの検出結果に対応付けて定義されたプレーイベントの時系列を示すデータを取得する取得機能と、
    前記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出する抽出機能と、
    前記抽出された複数のプレーイベントに対応する前記モーションの特徴を抽出し、当該特徴の分散に基づきプレーの安定度を前記種類ごとに算出し、前記種類ごとに当該安定度の時間的な変化を検出する解析機能と
    を実現するプロセッサを備える解析装置。
  2. 前記解析機能は、前記モーションの特徴を多次元の特徴ベクトルとして抽出し、当該特徴ベクトルの分散に基づきプレーの安定度を前記種類ごとに算出する、請求項1に記載の解析装置。
  3. 前記抽出された複数のプレーイベントは、単一のユーザのプレーイベントであり、
    前記解析機能は、前記抽出された複数のプレーイベントによって示される前記単一のユーザのプレーを前記特徴に基づいて評価する、請求項1または2に記載の解析装置。
  4. 前記解析機能は、前記単一のユーザのプレーの習熟度を前記安定度に基づいて判定する、請求項に記載の解析装置。
  5. 前記抽出された複数のプレーイベントは、複数のユーザのプレーイベントを含み、
    前記解析機能は、前記抽出された複数のプレーイベントのそれぞれによって示される前記複数のユーザのプレーを前記モーションの特徴に基づいて比較する、請求項1に記載の解析装置。
  6. 前記複数のユーザは、第1のユーザおよび第2のユーザを含み、
    前記解析機能は、前記プレーに関して第1のユーザに提供される情報を、前記比較の結果によって前記プレーが前記第1のユーザと類似していることが示される前記第2のユーザにも提供する、請求項に記載の解析装置。
  7. 前記プロセッサは、前記解析機能によって生成された情報をディスプレイに表示させる表示制御機能をさらに実現する、請求項1〜のいずれかに記載の解析装置。
  8. 前記解析機能は、前記抽出された複数のプレーイベントに対応する前記モーションの特徴を解析し、
    前記表示制御機能は、前記モーションの特徴を示す情報を表示させる、請求項に記載の解析装置。
  9. 前記抽出された複数のプレーイベントは、複数のユーザのプレーイベントを含み、
    前記表示制御機能は、前記複数のユーザの前記モーションの特徴を2次元平面および3次元空間の少なくともいずれかにおいて示す情報を表示させる、請求項に記載の解析装置。
  10. スポーツのプレーに応じたユーザのモーションの検出結果に対応付けて定義されたプレーイベントの時系列を示すデータを取得する取得機能と、
    前記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出する抽出機能と、
    前記抽出された複数のプレーイベントに対応する前記モーションの特徴を抽出し、当該特徴の分散に基づきプレーの安定度を前記種類ごとに算出し、前記種類ごとに当該安定度の時間的な変化を検出する解析機能と
    をコンピュータに実現させるためのプログラムが格納された記録媒体。
  11. 前記解析機能は、前記モーションの特徴を多次元の特徴ベクトルとして抽出し、当該特徴ベクトルの分散に基づきプレーの安定度を前記種類ごとに算出する、請求項10に記載の記録媒体。
  12. 前記抽出された複数のプレーイベントは、単一のユーザのプレーイベントであり、
    前記解析機能は、前記抽出された複数のプレーイベントによって示される前記単一のユーザのプレーを前記特徴に基づいて評価する、請求項10または11に記載の記録媒体。
  13. 前記解析機能は、前記単一のユーザのプレーの習熟度を前記安定度に基づいて判定する、請求項12に記載の記録媒体。
  14. 前記抽出された複数のプレーイベントは、複数のユーザのプレーイベントを含み、
    前記解析機能は、前記抽出された複数のプレーイベントのそれぞれによって示される前記複数のユーザのプレーを前記モーションの特徴に基づいて比較する、請求項10に記載の記録媒体。
  15. 前記複数のユーザは、第1のユーザおよび第2のユーザを含み、
    前記解析機能は、前記プレーに関して第1のユーザに提供される情報を、前記比較の結果によって前記プレーが前記第1のユーザと類似していることが示される前記第2のユーザにも提供する、請求項14に記載の記録媒体。
  16. 前記解析機能によって生成された情報をディスプレイに表示させる表示制御機能がさらにコンピュータに実現させる、請求項10〜15のいずれかに記載の記録媒体。
  17. 前記解析機能は、前記抽出された複数のプレーイベントに対応する前記モーションの特徴を解析し、
    前記表示制御機能は、前記モーションの特徴を示す情報を表示させる、請求項16に記載の記録媒体。
  18. 前記抽出された複数のプレーイベントは、複数のユーザのプレーイベントを含み、
    前記表示制御機能は、前記複数のユーザの前記モーションの特徴を2次元平面および3次元空間の少なくともいずれかにおいて示す情報を表示させる、請求項17に記載の記録媒体。
  19. スポーツのプレーに応じたユーザのモーションの検出結果に対応付けて定義されたプレーイベントの時系列を示すデータを取得することと、
    前記プレーイベントの中から同じ種類に分類される複数のプレーイベントを抽出することと、
    前記抽出された複数のプレーイベントに対応する前記モーションの特徴を抽出し、当該特徴の分散に基づきプレーの安定度を前記種類ごとに算出し、前記種類ごとに当該安定度の時間的な変化を検出することと
    を含む解析方法。
JP2015554651A 2013-12-27 2014-11-06 解析装置、記録媒体および解析方法 Active JP6458739B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013273516 2013-12-27
JP2013273516 2013-12-27
PCT/JP2014/079389 WO2015098304A1 (ja) 2013-12-27 2014-11-06 解析装置、記録媒体および解析方法

Publications (2)

Publication Number Publication Date
JPWO2015098304A1 JPWO2015098304A1 (ja) 2017-03-23
JP6458739B2 true JP6458739B2 (ja) 2019-01-30

Family

ID=53478182

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015554651A Active JP6458739B2 (ja) 2013-12-27 2014-11-06 解析装置、記録媒体および解析方法

Country Status (5)

Country Link
US (2) US10558854B2 (ja)
EP (1) EP3088058A4 (ja)
JP (1) JP6458739B2 (ja)
CN (1) CN105828894A (ja)
WO (1) WO2015098304A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6248635B2 (ja) * 2011-11-08 2017-12-20 ソニー株式会社 センサ装置、解析装置および記憶媒体
US20150352404A1 (en) * 2014-06-06 2015-12-10 Head Technology Gmbh Swing analysis system
US10706740B2 (en) * 2014-12-24 2020-07-07 Sony Corporation System and method for processing sensor data
JP6828265B2 (ja) * 2016-04-15 2021-02-10 セイコーエプソン株式会社 表示方法、スイング解析装置、スイング解析システム、スイング解析プログラム、および記録媒体
JP2017189490A (ja) * 2016-04-15 2017-10-19 セイコーエプソン株式会社 表示方法、スイング解析装置、スイング解析システム、スイング解析プログラム、および記録媒体
JP2018093979A (ja) * 2016-12-09 2018-06-21 セイコーエプソン株式会社 運動診断装置、運動診断システム、プログラム、記録媒体及び運動診断方法
JP7385826B2 (ja) * 2019-11-08 2023-11-24 オムロン株式会社 動作分析装置、動作分析方法及び動作分析プログラム
US12053671B1 (en) * 2020-10-30 2024-08-06 Diamond Kinetics, Inc. Method and system for sports swing training

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0581232A (ja) * 1991-09-19 1993-04-02 Fujitsu Ltd スウイング動作時の運動解析方式
US20060025229A1 (en) * 2003-12-19 2006-02-02 Satayan Mahajan Motion tracking and analysis apparatus and method and system implementations thereof
US9229540B2 (en) * 2004-01-30 2016-01-05 Electronic Scripting Products, Inc. Deriving input from six degrees of freedom interfaces
US20060084516A1 (en) * 2004-07-28 2006-04-20 Smartswing, Inc. Method and system for defining and using a reference swing for a sports training system
US7219033B2 (en) * 2005-02-15 2007-05-15 Magneto Inertial Sensing Technology, Inc. Single/multiple axes six degrees of freedom (6 DOF) inertial motion capture system with initial orientation determination capability
US20070105664A1 (en) * 2005-11-07 2007-05-10 Fun Racquets, Inc. Racquet with Entertainment and Performance Feedback
US20070135225A1 (en) * 2005-12-12 2007-06-14 Nieminen Heikki V Sport movement analyzer and training device
US7536033B2 (en) * 2006-03-03 2009-05-19 Richard Albert Kirby Portable swing analyzer
US20080200287A1 (en) * 2007-01-10 2008-08-21 Pillar Vision Corporation Trajectory detection and feedfack system for tennis
US9283464B2 (en) * 2007-08-03 2016-03-15 Lynqs, Inc. Golf gaming systems and methods
US9623284B2 (en) * 2008-02-20 2017-04-18 Karsten Manufacturing Corporation Systems and methods for storing and analyzing golf data, including community and individual golf data collection and storage at a central hub
US8622795B2 (en) * 2008-12-04 2014-01-07 Home Box Office, Inc. System and method for gathering and analyzing objective motion data
US20110021280A1 (en) * 2009-07-27 2011-01-27 Vladimir Boroda Hitting technique by identifying ball impact points
DE202010018140U1 (de) * 2009-09-25 2014-05-13 Head Technology Gmbh Vorrichtung zur Leistungssteigerung bei Schlägersportarten
JP2011232445A (ja) * 2010-04-26 2011-11-17 Sony Corp 情報処理装置、出題傾向設定方法及びプログラム
US8941723B2 (en) * 2010-08-26 2015-01-27 Blast Motion Inc. Portable wireless mobile device motion capture and analysis system and method
US9626554B2 (en) * 2010-08-26 2017-04-18 Blast Motion Inc. Motion capture system that combines sensors with different measurement ranges
JP2012228351A (ja) * 2011-04-26 2012-11-22 Dunlop Sports Co Ltd 打感の評価方法
CN102221369B (zh) * 2011-04-29 2012-10-10 闫文闻 一种球类运动的动作识别方法、装置和动作辅助设备
JP5761505B2 (ja) 2011-06-09 2015-08-12 セイコーエプソン株式会社 スイング分析装置、スイング分析システム、スイング分析方法、スイング分析プログラム、および記録媒体
JP5273214B2 (ja) * 2011-06-30 2013-08-28 株式会社デンソー 近距離無線通信装置
US8419560B2 (en) * 2011-07-14 2013-04-16 Alexander Andre Amini System and method for adaptive delivery of game balls based on player-specific performance data analysis
US20130018494A1 (en) * 2011-07-14 2013-01-17 Alexander Andre Amini System and method for motion analysis and feedback with ongoing dynamic training orientation determination
US8944940B2 (en) * 2011-08-29 2015-02-03 Icuemotion, Llc Racket sport inertial sensor motion tracking analysis
US9327177B2 (en) * 2011-10-14 2016-05-03 Dunlop Sports Co. Ltd. Tennis swing analysis method
EP2602779A3 (en) * 2011-10-14 2015-11-25 Dunlop Sports Co., Ltd. Device, method and computer-program for fitting tennis racket
US9311727B2 (en) * 2011-10-14 2016-04-12 Dunlop Sports Co. Ltd. Device, system, method and computer-readable storage medium for analyzing tennis swing motion
US9101812B2 (en) * 2011-10-25 2015-08-11 Aquimo, Llc Method and system to analyze sports motions using motion sensors of a mobile device
FR2991080B1 (fr) * 2012-05-23 2016-01-22 Babolat Vs Methode de calcul d'un indice de repetabilite lors de l'utilisation d'une raquette de tennis
US9161708B2 (en) * 2013-02-14 2015-10-20 P3 Analytics, Inc. Generation of personalized training regimens from motion capture data

Also Published As

Publication number Publication date
US20200134303A1 (en) 2020-04-30
EP3088058A1 (en) 2016-11-02
US20160253553A1 (en) 2016-09-01
US11042731B2 (en) 2021-06-22
EP3088058A4 (en) 2017-09-06
US10558854B2 (en) 2020-02-11
WO2015098304A1 (ja) 2015-07-02
JPWO2015098304A1 (ja) 2017-03-23
CN105828894A (zh) 2016-08-03

Similar Documents

Publication Publication Date Title
JP6458739B2 (ja) 解析装置、記録媒体および解析方法
US10769796B2 (en) Information processing apparatus, information processing method and recording medium
AU2017331639A1 (en) A system and method to analyze and improve sports performance using monitoring devices
WO2012063560A1 (ja) 画像処理システム、画像処理方法、及び画像処理プログラムを記憶した記憶媒体
US20160346612A1 (en) Enhancing Exercise Through Augmented Reality
CN111698564B (zh) 信息推荐方法、装置、设备及存储介质
JP7116097B2 (ja) ターゲット画像の検出による拡張現実経験のロック解除
US20180161624A1 (en) Frameworks and methodologies configured to enable gamification via sensor-based monitoring of physically performed skills, including location-specific gamification
JP6447515B2 (ja) 情報処理装置、記録媒体および情報処理方法
CN114513694B (zh) 评分确定方法、装置、电子设备和存储介质
KR20210067875A (ko) 경기 영상에 대한 이벤트의 태깅을 위한 전자 장치 및 그의 동작 방법
JP6432523B2 (ja) 解析装置、記録媒体および解析方法
US11004356B2 (en) Providing workout recap
JP6459979B2 (ja) 解析装置、記録媒体および解析方法
JP2016010714A (ja) 情報処理装置、情報処理システムおよび記録媒体
WO2015098303A1 (ja) 解析装置、記録媒体および解析方法
JP2022075741A (ja) アニメーション生成装置、アニメーション生成方法及びプログラム
US20130225294A1 (en) Detecting illegal moves in a game using inertial sensors
US20230129718A1 (en) Biometric feedback captured during viewing of displayed content
WO2015098301A1 (ja) 解析装置、記録媒体および解析方法
CN117752998A (zh) 一种数据处理方法、装置、设备及介质

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170927

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170927

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180619

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180809

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181009

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181127

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181210

R151 Written notification of patent or utility model registration

Ref document number: 6458739

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190208

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20190214