JP2023022265A - 情報処理装置、情報処理方法、及び、プログラム - Google Patents
情報処理装置、情報処理方法、及び、プログラム Download PDFInfo
- Publication number
- JP2023022265A JP2023022265A JP2022193967A JP2022193967A JP2023022265A JP 2023022265 A JP2023022265 A JP 2023022265A JP 2022193967 A JP2022193967 A JP 2022193967A JP 2022193967 A JP2022193967 A JP 2022193967A JP 2023022265 A JP2023022265 A JP 2023022265A
- Authority
- JP
- Japan
- Prior art keywords
- motion
- user
- rhythm
- unit
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 30
- 238000003672 processing method Methods 0.000 title claims description 6
- 230000033001 locomotion Effects 0.000 claims abstract description 594
- 230000033764 rhythmic process Effects 0.000 claims abstract description 390
- 238000001514 detection method Methods 0.000 claims abstract description 144
- 238000000034 method Methods 0.000 claims abstract description 103
- 238000004458 analytical method Methods 0.000 claims description 83
- 230000008569 process Effects 0.000 claims description 78
- 230000000694 effects Effects 0.000 claims description 71
- 238000003384 imaging method Methods 0.000 claims description 65
- 230000001133 acceleration Effects 0.000 claims description 63
- 230000008859 change Effects 0.000 claims description 12
- 238000013528 artificial neural network Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 description 106
- 238000004891 communication Methods 0.000 description 68
- 238000005516 engineering process Methods 0.000 description 36
- 238000004519 manufacturing process Methods 0.000 description 28
- 230000009471 action Effects 0.000 description 25
- 238000010586 diagram Methods 0.000 description 23
- 230000005540 biological transmission Effects 0.000 description 18
- 230000001020 rhythmical effect Effects 0.000 description 15
- 230000006870 function Effects 0.000 description 14
- 238000003860 storage Methods 0.000 description 14
- 238000005070 sampling Methods 0.000 description 13
- 238000011156 evaluation Methods 0.000 description 12
- 210000002683 foot Anatomy 0.000 description 10
- 210000004247 hand Anatomy 0.000 description 9
- 230000009182 swimming Effects 0.000 description 9
- 239000000284 extract Substances 0.000 description 8
- 238000012986 modification Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 210000003423 ankle Anatomy 0.000 description 6
- 238000012937 correction Methods 0.000 description 6
- 238000005286 illumination Methods 0.000 description 6
- 239000002245 particle Substances 0.000 description 6
- 210000000707 wrist Anatomy 0.000 description 6
- 238000010304 firing Methods 0.000 description 5
- 210000001624 hip Anatomy 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 5
- 230000002123 temporal effect Effects 0.000 description 5
- 230000009183 running Effects 0.000 description 4
- 230000001351 cycling effect Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 230000009191 jumping Effects 0.000 description 3
- 230000000737 periodic effect Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 206010019191 Head banging Diseases 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000012854 evaluation process Methods 0.000 description 2
- 210000003414 extremity Anatomy 0.000 description 2
- 210000002414 leg Anatomy 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000005096 rolling process Methods 0.000 description 2
- 208000013623 stereotypic movement disease Diseases 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 235000002017 Zea mays subsp mays Nutrition 0.000 description 1
- 241000482268 Zea mays subsp. mays Species 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000009194 climbing Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000036461 convulsion Effects 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 230000009189 diving Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 210000003739 neck Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000005019 pattern of movement Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000009184 walking Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
- G09B19/003—Repetitive work cycles; Sequence of movements
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
- G09B19/003—Repetitive work cycles; Sequence of movements
- G09B19/0038—Sports
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B2071/0647—Visualisation of executed movements
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/05—Image processing for measuring physical parameters
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/80—Special sensors, transducers or devices therefor
- A63B2220/83—Special sensors, transducers or devices therefor characterised by the position of the sensor
- A63B2220/836—Sensors arranged on the body of the user
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
- G09B19/0015—Dancing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Multimedia (AREA)
- Entrepreneurship & Innovation (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Human Computer Interaction (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
1.第1の実施の形態(演出システム)
2.第2の実施の形態(シンク評価システム)
3.第3の実施の形態(撮影システム)
4.第4の実施の形態(撮影システム)
5.第5の実施の形態(楽曲推薦システム)
6.変形例
7.その他
まず、図1乃至図18を参照して、本技術の第1の実施の形態について説明する。
図1は、本技術を適用した演出システム100のハードウエアの構成例を示している。
図2及び図3は、各ウエアラブルセンサ101の装着位置(検出ポイント)の例を模式的に示している。
図4は、演出システム100の機能の構成例を示している。
図5は、図1のウエアラブルセンサ101の構成例を示している。また、図6は、ウエアラブルセンサ101の各センサの仕様の例を示している。
次に、図7乃至図18を参照して、演出システム100の処理について説明する。
まず、図7のフローチャートを参照して、ウエアラブルセンサ101の処理について説明する。
次に、図10のフローチャートを参照して、図7のウエアラブルセンサ101の処理に対応してモーション解析部153により実行されるモーション解析処理について説明する。
・一時静止してポーズをとる。
・首、手、又は、足の運動方向を素早く切り替える。
・ターンする。
・手を周期的に動かす。
・ステップを踏む。
・ヘッドバンギングを行う。
・指を鳴らす。
・指でカウントをとる。
・急な動きをとる。
次に、図17のフローチャートを参照して、図10のモーション解析処理に対応して演出制御部154により実行される演出制御処理について説明する。
以上の説明では、1人のユーザによるパフォーマンスの演出を行う例を示したが、本技術は、複数のユーザによるパフォーマンスの演出を行う場合にも適用できる。
次に、図19乃至図23を参照して、本技術の第2の実施の形態について説明する。
図19は、本技術を適用したシンク評価システム300の機能の構成例を示している。なお、図中、図4と対応する部分には、同じ符号を付してあり、その説明は適宜省略する。
次に、図20のフローチャートを参照して、シンク評価システム300により実行されるシンク評価処理について説明する。
Rhythm_B=[0.322, 0.839, 1.458,・・・]
例えば、各ユーザの部位(例えば、頭、手、足、腰等)毎にモーションリズムを認識し、複数のユーザの部位間のモーションリズムのシンク度を検出するようにしてもよい。
次に、図24乃至図30を参照して、本技術の第3の実施の形態について説明する。
図24は、本技術を適用した撮影システム400のハードウエアの構成例を示している。なお、図中、図1と対応する部分には同じ符号を付してあり、その説明は適宜省略する。
図25は、撮影システム400の機能の構成例を示している。
次に、図26乃至図30を参照して、撮影システム400の処理について説明する。
まず、図26のフローチャートを参照して、撮影システム400により実行される撮影制御処理について説明する。
次に、図27のフローチャートを参照して、撮影システム400により実行される表示制御処理について説明する。
例えば、第1の実施の形態に、第3の実施の形態を適用することにより、ユーザがパフォーマンスを行っている最中に、ユーザがモーションリズムをとるごとにユーザを撮影することができる。そして、例えば、撮影した一連の画像をアルバムにまとめて、ユーザに配信することができる。
次に、図31乃至図36を参照して、本技術の第4の実施の形態について説明する。
図31は、本技術を適用した撮影システム600の機能の構成例を示している。なお、図中、図19及び図25と対応する部分には同じ符号を付してあり、その説明は適宜省略する。
次に、図32乃至図36を参照して、撮影システム600の処理について説明する。
まず、図32のフローチャートを参照して、撮影システム600により実行される撮影制御処理について説明する。
次に、図33のフローチャートを参照して、撮影システム600により実行される表示制御処理について説明する。
次に、図37及び図38を参照して、本技術の第5の実施の形態について説明する。
図37は、本技術を適用した楽曲推薦システム700の機能の構成例を示している。なお、図中、図4と対応する部分には同じ符号を付してあり、その説明は適宜省略する。
次に、図38のフローチャートを参照して、楽曲推薦システム700により実行される楽曲推薦処理について説明する。
以上の説明では、ユーザのモーションBPMと一致又は類似するBPMをもつ楽曲の中から推薦する楽曲を選択する例を示したが、BPMを用いずに、楽器毎のリズムだけを用いて、推薦する楽曲を選択するようにしてもよい。
以下、上述した本技術の実施の形態の変形例について説明する。
<コンピュータの構成例>
上述した一連の処理は、ハードウエアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
本技術は、以下のような構成をとることもできる。
少なくともユーザの体幹上の1カ所を含む1以上の検出位置においてセンサ装置により検出された前記検出位置の動きを示す検出データに基づいて、前記ユーザの動きのリズムを示すモーションリズムを認識するモーションリズム認識部を
備える情報処理装置。
(2)
前記モーションリズムは、前記ユーザの動きのアクセントにより表される
前記(1)に記載の情報処理装置。
(3)
前記動きのアクセントは、前記ユーザの動きの向き、スピード、及び、パターンの変化により表される
前記(2)に記載の情報処理装置。
(4)
前記モーションリズムに基づいて、前記ユーザのパフォーマンスの演出を制御する演出制御部を
さらに備える前記(1)乃至(3)のいずれかに記載の情報処理装置。
(5)
前記検出データに基づいて、前記ユーザの動きの基本周波数であるモーションBPMを認識するモーションBPM認識部を
さらに備え、
前記演出制御部は、さらに前記モーションBPMに基づいて、前記演出を制御する
前記(4)に記載の情報処理装置。
(6)
前記検出データに基づいて、前記ユーザの行動を構成する動きの単位であるモーションを認識するモーション認識部を
さらに備え、
前記演出制御部は、さらに認識された前記モーションに基づいて、前記演出を制御する
前記(4)又は(5)に記載の情報処理装置。
(7)
前記モーションリズム認識部は、複数のユーザの前記モーションリズムを認識し、
各前記ユーザ間の前記モーションリズムの一致度を示すシンク度を検出するシンク度検出部を
さらに備える前記(1)乃至(6)のいずれかに記載の情報処理装置。
(8)
前記シンク度に基づいて、前記複数のユーザが参加するパフォーマンスの演出を制御する演出制御部を
さらに備える前記(7)に記載の情報処理装置。
(9)
前記モーションリズム認識部は、各前記ユーザの前記モーションリズムの強さを示すリズム度を検出し、
前記シンク度検出部は、各前記ユーザのリズム度に基づいて、前記シンク度を検出する
前記(7)又は(8)に記載の情報処理装置。
(10)
前記シンク度に基づいて、各前記ユーザの撮影を制御する撮影制御部と、
前記シンク度に基づいて、各前記ユーザの画像の表示を制御する表示制御部と
のうち少なくとも1つをさらに備える前記(7)乃至(9)のいずれかに記載の情報処理装置。
(11)
前記モーションリズムに基づいて、前記ユーザの撮影を制御する撮影制御部と、
前記モーションリズムに基づいて、前記ユーザの画像の表示を制御する表示制御部と
のうち少なくとも1つをさらに備える前記(1)乃至(9)のいずれかに記載の情報処理装置。
(12)
前記モーションリズム認識部は、前記モーションリズムの強さを示すリズム度を検出し、
前記表示制御部は、さらに前記リズム度に基づいて、前記ユーザの画像の表示を制御する
前記(11)に記載の情報処理装置。
(13)
前記モーションリズムと楽曲のリズムとを比較した結果に基づいて、推薦する楽曲を選択する推薦部を
さらに備える前記(1)乃至(4)及び(7)乃至(12)のいずれかに記載の情報処理装置。
(14)
前記検出データに基づいて、前記ユーザの動きの基本周波数であるモーションBPMを認識するモーションBPM認識部を
さらに備え、
前記推薦部は、さらに前記モーションBPMと楽曲のBPMとを比較した結果に基づいて、推薦する楽曲を選択する
前記(13)に記載の情報処理装置。
(15)
前記モーションリズム認識部は、前記モーションリズムの強さを示すリズム度を検出する
前記(1)乃至(8)及び(10)乃至(14)のいずれかに記載の情報処理装置。
(16)
前記モーションリズム認識部は、複数のユーザの前記リズム度を検出し、
前記複数のユーザの前記リズム度に基づいて、前記複数のユーザが参加するパフォーマンスの演出を制御する演出制御部を
さらに備える前記(15)に記載の情報処理装置。
(17)
前記検出データに基づいて、前記ユーザの動きの基本周波数であるモーションBPMを認識するモーションBPM認識部を
さらに備える前記(1)乃至(4)、(7)乃至(13)、(15)及び(16)のいずれかに記載の情報処理装置。
(18)
前記検出位置は、前記ユーザの両手及び両足のうちの少なくとも1カ所をさらに含む
前記(1)乃至(17)のいずれかに記載の情報処理装置。
(19)
情報処理装置が、
少なくともユーザの体幹上の1カ所を含む1以上の検出位置においてセンサ装置により検出された前記検出位置の動きを示す検出データに基づいて、前記ユーザの動きのリズムを示すモーションリズムを認識する
情報処理方法。
(20)
少なくともユーザの体幹上の1カ所を含む1以上の検出位置においてセンサ装置により検出された前記検出位置の動きを示す検出データに基づいて、前記ユーザの動きのリズムを示すモーションリズムを認識する
処理をコンピュータに実行させるためのプログラム。
Claims (17)
- コンピュータを、
ユーザの少なくとも1以上の検出位置に装着されたセンサ装置により検出された前記検出位置のセンサデータに基づいて、前記ユーザのモーションを解析するモーション解析部と、
前記モーション解析部により得られるモーションリズムを含むモーション解析結果に基づいて、前記ユーザの画像の表示を制御する表示制御部と
として機能させるためのプログラム。 - 前記モーションは、前記ユーザの全身の動き又は前記ユーザの体の一部の動きである
請求項1に記載のプログラム。 - 前記モーション解析部は、ディープニューラルネットワークを用いた学習によって得られる認識モデルを用いて、前記ユーザのモーションを認識する
請求項1に記載のプログラム。 - 前記モーション解析部は、前記認識モデルを用いて、認識結果の信頼度も出力する
請求項3に記載のプログラム。 - 前記モーション解析部は、前記モーションの、リズムの強さ、リズムのタイミング、及び、リズムの変化のうち少なくとも1つを認識する
請求項1に記載のプログラム。 - 前記表示制御部は、前記モーション解析結果に基づいて、前記画像に対してエフェクトをかける
請求項1に記載のプログラム。 - 前記表示制御部は、前記モーション解析結果に含まれる前記モーションのリズム、種類、及び、強さのうち少なくとも1つに応じて、前記エフェクトの種類及び強さのうち少なくとも1つを調整する
請求項6に記載のプログラム。 - 前記表示制御部は、前記モーション解析結果に基づいて、前記ユーザに対応するアバターに前記モーションと関連性のあるアニメーションを割り当てる
請求項1に記載のプログラム。 - 前記表示制御部は、前記モーション解析結果に基づいて、前記ユーザに対応するアバターに前記モーションをさせる
請求項1に記載のプログラム。 - 前記モーション解析部は、複数のユーザの前記センサデータに基づいて、前記複数のユーザのモーションを解析し、
前記コンピュータを、
前記複数のユーザのモーションリズムのシンク度を検出するシンク検出部として
さらに機能させるための請求項1に記載のプログラム。 - 前記モーション解析部は、前記モーションのリズム度を検出し、
前記表示制御部は、前記リズム度に応じて、前記画像を加工する
請求項1に記載のプログラム。 - 前記センサ装置は、モーションセンサ装置である
請求項1に記載のプログラム。 - 前記モーションセンサ装置は、加速度センサ、ジャイロセンサ、地磁気センサ、歪みセンサ、及び、気圧センサのうち少なくとも1つを備える
請求項12に記載のプログラム。 - 前記ユーザの画像は、撮影部において撮影された前記ユーザの画像である
請求項1に記載のプログラム。 - 前記コンピュータを、
前記モーション解析結果に基づいて、前記撮影部の撮影タイミングを制御する撮影制御部として
さらに機能させるための請求項14に記載のプログラム。 - ユーザの少なくとも1以上の検出位置に装着されたセンサ装置において検出された前記検出位置のセンサデータに基づいて、前記ユーザのモーションを解析するモーション解析部と、
前記モーション解析部により得られるモーションリズムを含むモーション解析結果に基づいて、前記ユーザの画像の表示を制御する表示制御部と
を備える情報処理装置。 - 情報処理装置が、
ユーザの少なくとも1以上の検出位置に装着されたセンサ装置において検出された前記検出位置のセンサデータに基づいて、前記ユーザのモーションを解析し、
モーションリズムを含むモーション解析結果に基づいて、前記ユーザの画像の表示を制御する
情報処理方法。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017242674 | 2017-12-19 | ||
JP2017242674 | 2017-12-19 | ||
PCT/JP2018/044640 WO2019124069A1 (ja) | 2017-12-19 | 2018-12-05 | 情報処理装置、情報処理方法、及び、プログラム |
JP2019560940A JP7192794B2 (ja) | 2017-12-19 | 2018-12-05 | 情報処理装置、情報処理方法、及び、プログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019560940A Division JP7192794B2 (ja) | 2017-12-19 | 2018-12-05 | 情報処理装置、情報処理方法、及び、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023022265A true JP2023022265A (ja) | 2023-02-14 |
JP7424456B2 JP7424456B2 (ja) | 2024-01-30 |
Family
ID=66994647
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019560940A Active JP7192794B2 (ja) | 2017-12-19 | 2018-12-05 | 情報処理装置、情報処理方法、及び、プログラム |
JP2022193967A Active JP7424456B2 (ja) | 2017-12-19 | 2022-12-05 | 情報処理装置、情報処理方法、及び、プログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019560940A Active JP7192794B2 (ja) | 2017-12-19 | 2018-12-05 | 情報処理装置、情報処理方法、及び、プログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20200388190A1 (ja) |
EP (1) | EP3730196A4 (ja) |
JP (2) | JP7192794B2 (ja) |
CN (1) | CN111315453B (ja) |
WO (1) | WO2019124069A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019009084A1 (ja) * | 2017-07-05 | 2019-01-10 | ソニー株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
CN112100436B (zh) * | 2020-09-29 | 2021-07-06 | 新东方教育科技集团有限公司 | 舞蹈片段识别方法、舞蹈片段识别装置和存储介质 |
KR102490769B1 (ko) * | 2021-04-22 | 2023-01-20 | 국민대학교산학협력단 | 음악적 요소를 이용한 인공지능 기반의 발레동작 평가 방법 및 장치 |
US20220385748A1 (en) * | 2021-05-27 | 2022-12-01 | Qualcomm Incorporated | Conveying motion data via media packets |
WO2023189649A1 (ja) * | 2022-03-30 | 2023-10-05 | ソニーグループ株式会社 | 情報処理システム、プログラムおよび情報処理方法 |
US12052113B2 (en) | 2022-05-27 | 2024-07-30 | Ricoh Company, Ltd. | Information processing apparatus, information processing system, method for providing rhythm, and non-transitory recording medium |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000325666A (ja) * | 2000-01-01 | 2000-11-28 | Konami Co Ltd | ダンスゲーム装置 |
JP2004248830A (ja) * | 2003-02-19 | 2004-09-09 | Kato Seisakusho:Kk | 弦楽器を用いたリズムゲーム装置 |
JP2006505167A (ja) * | 2002-11-01 | 2006-02-09 | シンクロ アーツ リミテッド | 画像と自動同期させるサウンド置換に使用する方法及び装置 |
JP2008299631A (ja) * | 2007-05-31 | 2008-12-11 | Sony Ericsson Mobilecommunications Japan Inc | コンテンツ検索装置、コンテンツ検索方法およびコンテンツ検索プログラム |
JP2010046471A (ja) * | 2008-07-23 | 2010-03-04 | Sega Corp | ゲーム装置及びゲーム制御方法、ゲームを制御するプログラム、プログラムを記憶したコンピュータ読み取り可能な記録媒体 |
JP2011087794A (ja) * | 2009-10-23 | 2011-05-06 | Sony Corp | 動作関連演算装置、動作関連演算方法、プログラム、動作関連再生システム |
JP2011239937A (ja) * | 2010-05-18 | 2011-12-01 | Konami Digital Entertainment Co Ltd | ゲーム装置、ゲーム処理方法、ならびに、プログラム |
WO2014150457A2 (en) * | 2013-03-15 | 2014-09-25 | Nike, Inc. | Feedback signals from image data of athletic performance |
JP2015066107A (ja) * | 2013-09-27 | 2015-04-13 | ブラザー工業株式会社 | 情報処理装置及びプログラム |
US20150290495A1 (en) * | 2007-04-19 | 2015-10-15 | Nike, Inc. | Footwork Training System and Method |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5344323A (en) * | 1993-02-16 | 1994-09-06 | Les Burns | Teaching recognition of body movement errors in dancing |
US6266623B1 (en) * | 1994-11-21 | 2001-07-24 | Phatrat Technology, Inc. | Sport monitoring apparatus for determining loft time, speed, power absorbed and other factors such as height |
JP2001517115A (ja) * | 1997-03-12 | 2001-10-02 | ニューロコム・インターナショナル・インク | 訓練のプログラムを監視するシステムと方法 |
US6018705A (en) * | 1997-10-02 | 2000-01-25 | Personal Electronic Devices, Inc. | Measuring foot contact time and foot loft time of a person in locomotion |
US6778866B1 (en) * | 2000-03-16 | 2004-08-17 | Ted S. Bettwy | Method and apparatus for learning specific body motion |
US20040219498A1 (en) * | 2002-04-09 | 2004-11-04 | Davidson Lance Samuel | Training apparatus and methods |
US20070006489A1 (en) * | 2005-07-11 | 2007-01-11 | Nike, Inc. | Control systems and foot-receiving device products containing such systems |
US7827000B2 (en) * | 2006-03-03 | 2010-11-02 | Garmin Switzerland Gmbh | Method and apparatus for estimating a motion parameter |
JP2007292847A (ja) * | 2006-04-21 | 2007-11-08 | Victor Co Of Japan Ltd | 楽曲編集・再生装置 |
KR100784075B1 (ko) * | 2007-02-13 | 2007-12-10 | 강태구 | 온라인 작곡을 위한 시스템, 방법 및 컴퓨터 판독 가능한기록 매체 |
WO2009152456A2 (en) * | 2008-06-13 | 2009-12-17 | Nike, Inc. | Footwear having sensor system |
US20100152619A1 (en) * | 2008-12-16 | 2010-06-17 | 24/8 Llc | System, method, and computer-program product for measuring pressure points |
EP3042485B1 (en) * | 2013-09-05 | 2020-03-11 | NIKE Innovate C.V. | Conducting sessions with captured image data of physical activity and uploading using token-verifiable proxy uploader |
JP2019004927A (ja) * | 2017-06-20 | 2019-01-17 | カシオ計算機株式会社 | 電子機器、リズム情報報知方法及びプログラム |
-
2018
- 2018-12-05 CN CN201880071450.6A patent/CN111315453B/zh active Active
- 2018-12-05 WO PCT/JP2018/044640 patent/WO2019124069A1/ja unknown
- 2018-12-05 US US16/772,475 patent/US20200388190A1/en not_active Abandoned
- 2018-12-05 JP JP2019560940A patent/JP7192794B2/ja active Active
- 2018-12-05 EP EP18890236.5A patent/EP3730196A4/en not_active Withdrawn
-
2022
- 2022-12-05 JP JP2022193967A patent/JP7424456B2/ja active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000325666A (ja) * | 2000-01-01 | 2000-11-28 | Konami Co Ltd | ダンスゲーム装置 |
JP2006505167A (ja) * | 2002-11-01 | 2006-02-09 | シンクロ アーツ リミテッド | 画像と自動同期させるサウンド置換に使用する方法及び装置 |
JP2004248830A (ja) * | 2003-02-19 | 2004-09-09 | Kato Seisakusho:Kk | 弦楽器を用いたリズムゲーム装置 |
US20150290495A1 (en) * | 2007-04-19 | 2015-10-15 | Nike, Inc. | Footwork Training System and Method |
JP2008299631A (ja) * | 2007-05-31 | 2008-12-11 | Sony Ericsson Mobilecommunications Japan Inc | コンテンツ検索装置、コンテンツ検索方法およびコンテンツ検索プログラム |
JP2010046471A (ja) * | 2008-07-23 | 2010-03-04 | Sega Corp | ゲーム装置及びゲーム制御方法、ゲームを制御するプログラム、プログラムを記憶したコンピュータ読み取り可能な記録媒体 |
JP2011087794A (ja) * | 2009-10-23 | 2011-05-06 | Sony Corp | 動作関連演算装置、動作関連演算方法、プログラム、動作関連再生システム |
US9079058B2 (en) * | 2009-10-23 | 2015-07-14 | Sony Corporation | Motion coordination operation device and method, program, and motion coordination reproduction system |
JP2011239937A (ja) * | 2010-05-18 | 2011-12-01 | Konami Digital Entertainment Co Ltd | ゲーム装置、ゲーム処理方法、ならびに、プログラム |
WO2014150457A2 (en) * | 2013-03-15 | 2014-09-25 | Nike, Inc. | Feedback signals from image data of athletic performance |
JP2015066107A (ja) * | 2013-09-27 | 2015-04-13 | ブラザー工業株式会社 | 情報処理装置及びプログラム |
Non-Patent Citations (2)
Title |
---|
GODBOUT,ANDREW; BOYD,JEFFREY EDWIN: ""RhythmicSonic Feed back for Speed Skating by Real-Time MovementSynchronization"", INTERNATIONALJOURNAL OF COMPUTER SCIENCE IN SPORT, vol. 第11巻,第3号, JPN6023044680, 2012, AT, pages 37 - 51, ISSN: 0005186983 * |
GODBOUT,ANDREW; THORNTON,CHRIS; BOYD,JEFFREY EDWIN: ""MO BILE SONIFICATION[SYNCHRONIZATION] FOR ATHLETES:A CASESTUDYIN COMMERCIAL IZATION OF SONIFICATION", (INPROCEEDINGS OF)THE 20TH INTERNATIO NAL CONFERENCE ON AUDITORYDISPLAY(ICAD-2014), JPN6023044681, June 2014 (2014-06-01), US, pages 1 - 8, ISSN: 0005186984 * |
Also Published As
Publication number | Publication date |
---|---|
US20200388190A1 (en) | 2020-12-10 |
JP7192794B2 (ja) | 2022-12-20 |
JPWO2019124069A1 (ja) | 2020-12-10 |
EP3730196A4 (en) | 2021-06-09 |
CN111315453A (zh) | 2020-06-19 |
CN111315453B (zh) | 2022-04-19 |
EP3730196A1 (en) | 2020-10-28 |
JP7424456B2 (ja) | 2024-01-30 |
WO2019124069A1 (ja) | 2019-06-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7192794B2 (ja) | 情報処理装置、情報処理方法、及び、プログラム | |
US20200237264A1 (en) | Information processor, information processing method, and program | |
US8979710B2 (en) | Adaptable exercise system and method | |
JP5867432B2 (ja) | 情報処理装置、記録媒体および情報処理システム | |
US20220279890A1 (en) | Apparel based dynamic movement scoring | |
US20150262503A1 (en) | Motion coordination operation device and method, program, and motion coordination reproduction system | |
US11682157B2 (en) | Motion-based online interactive platform | |
JP6830829B2 (ja) | プログラム、表示装置、表示方法、放送システム及び放送方法 | |
JP4919467B2 (ja) | 活動支援装置 | |
CN114303142A (zh) | 影像生成装置 | |
EP4306192A1 (en) | Information processing device, information processing terminal, information processing method, and program | |
JP7307447B2 (ja) | モーションキャプチャーシステム、モーションキャプチャープログラム及びモーションキャプチャー方法 | |
CN114253393A (zh) | 信息处理设备、终端、方法以及计算机可读记录介质 | |
US20220111283A9 (en) | Adaptable exercise system and method | |
JP5928279B2 (ja) | 運動支援装置及びプログラム | |
JP2019033868A (ja) | 通信装置及び通信方法 | |
JP2019103728A (ja) | プログラム及びゲームシステム | |
WO2022132840A1 (en) | Interactive mixed reality audio technology | |
Menache | Motion capture primer | |
CN112818786B (zh) | 一种基于体感的互动式影像动作匹配方法及系统 | |
US20240135617A1 (en) | Online interactive platform with motion detection | |
JP2019103729A (ja) | プログラム及びゲームシステム | |
Suzuki et al. | Beat playing system based on rhythmic human motions | |
JP2016015780A (ja) | 情報処理装置、記録媒体および情報処理システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221206 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230926 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231012 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231031 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231121 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240101 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7424456 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |