JP2020130946A - Information processing device and information processing system - Google Patents

Information processing device and information processing system Download PDF

Info

Publication number
JP2020130946A
JP2020130946A JP2019032652A JP2019032652A JP2020130946A JP 2020130946 A JP2020130946 A JP 2020130946A JP 2019032652 A JP2019032652 A JP 2019032652A JP 2019032652 A JP2019032652 A JP 2019032652A JP 2020130946 A JP2020130946 A JP 2020130946A
Authority
JP
Japan
Prior art keywords
content
information
unit
information processing
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019032652A
Other languages
Japanese (ja)
Other versions
JP7347937B2 (en
Inventor
哲二 川上
Tetsuji Kawakami
哲二 川上
麻未 大場
Mami Oba
麻未 大場
上島　拓
Hiroshi Uejima
拓 上島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tomy Co Ltd
Original Assignee
Tomy Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tomy Co Ltd filed Critical Tomy Co Ltd
Priority to JP2019032652A priority Critical patent/JP7347937B2/en
Publication of JP2020130946A publication Critical patent/JP2020130946A/en
Application granted granted Critical
Publication of JP7347937B2 publication Critical patent/JP7347937B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To evaluate movement of an evaluation object person performed in accordance with progress of reproduction of content with a simple configuration.SOLUTION: An information processing device includes a notification information reception unit 430 for receiving information sound carrying notification information, an acceleration sensor unit 475 for detecting information on a three-dimensional position of the information processing device, a storage unit 420 for storing movement information of a prescribed part to be performed in according to the progress of reproduction of content designated by the notification information, and a processing unit 480 having a timing mechanism. When the notification information is a content reproduction start notification that designates the content, the processing unit 480 evaluates motion of the prescribed part on the basis of a timing result by the timing mechanism, a detection result by an acceleration sensor unit 475, and movement information stored in the storage unit 420 and corresponding to the content designated in the notification information received by the notification information reception unit 430.SELECTED DRAWING: Figure 4

Description

本発明は、情報処理装置及び情報処理システムに関する。 The present invention relates to an information processing device and an information processing system.

従来から、楽曲等の音コンテンツの再生音に合わせて行われる評価対象者のダンス等の動作が、当該リズムにどの程度合っているかを評価する装置の技術が提案されている。こうした提案技術の一つとして、再生楽曲のリズムに乗りながら行われるプレイヤの動作（ダンス等）が、どの程度リズムに合った動作であるかを評価するゲーム装置がある（特許文献１参照；以下、「従来例」という）。 Conventionally, there has been proposed a technique of a device for evaluating to what extent the movement of the evaluation target person, such as dance, performed in accordance with the reproduced sound of sound content such as music, matches the rhythm. As one of such proposed technologies, there is a game device that evaluates to what extent the player's movements (dance, etc.) performed while riding the rhythm of the reproduced music match the rhythm (see Patent Document 1; below). , "Conventional example").

従来例の技術では、ゲーム装置が、楽曲コンテンツを再生するとともに、位置情報取得部が取得したプレイヤの部位の位置の時間的変化に基づいて、プレイヤの動作がどの程度リズムに合った動作であるかを評価するようになっている。なお、当該位置情報取得部は、撮影部を備えており、当該撮影部による撮影結果を画像解析して、プレイヤの部位の各時点の位置を取得するようになっている。 In the conventional technique, the game device reproduces the music content, and the movement of the player is based on the temporal change of the position of the part of the player acquired by the position information acquisition unit. It is supposed to evaluate. The position information acquisition unit is provided with a photographing unit, and the image analysis result of the photographing unit is used to acquire the position of the player's portion at each time point.

特開２０１３−１５４１２４号公報Japanese Unexamined Patent Publication No. 2013-154124

上述した従来例の技術では、ゲーム装置が、撮影部を備えるとともに、楽曲コンテンツの再生処理を行いつつ画像解析処理を並行して実行することが必要であった。このため、ゲーム装置を専用機として構成することが必要であった。 In the above-mentioned conventional technique, it is necessary for the game device to include a shooting unit and to execute image analysis processing in parallel while performing music content reproduction processing. Therefore, it was necessary to configure the game device as a dedicated machine.

ところで、楽曲コンテンツの再生処理のみであれば、一般的に販売されているＡＶ機器により行うことができる。そして、近年において、当該ＡＶ機器では、処理負荷が軽いプログラムであれば追加的に実行することができるようになっている。このため、一般的に販売されているＡＶ機器の機能を有効活用することができれば、従来例の技術の機能を、簡易にかつ廉価に実現することができる。 By the way, if only the reproduction processing of the music content is performed, it can be performed by an AV device that is generally sold. In recent years, the AV device can additionally execute a program having a light processing load. Therefore, if the functions of the generally sold AV equipment can be effectively utilized, the functions of the conventional technology can be realized easily and inexpensively.

本発明は、上記の事情を鑑みてなされたものであり、コンテンツの再生の進行に応じて行われる評価対象者の動作を簡易な構成で評価することができる新たな情報処理装置及び情報処理システムを提供することを目的とする。 The present invention has been made in view of the above circumstances, and is a new information processing device and information processing system capable of evaluating the operation of an evaluation target person performed according to the progress of content reproduction with a simple configuration. The purpose is to provide.

第１の手段は、
通知情報を担った情報音を受信する受信部と、
人体の動きを検出するセンサと、
前記通知情報により指定されるコンテンツの再生の進行に応じて行われるべき前記人体の動作情報が記憶された記憶部と、
計時機構を有する処理部と、を備え、
前記通知情報が、コンテンツを指定したコンテンツ再生開始通知であった場合、前記処理部が、
前記計時機構による計時結果、前記センサによる検出結果、及び、前記記憶部に記憶されている、前記受信部が受信した通知情報において指定されたコンテンツに対応する動作情報に基づいて、前記所定部位の運動の評価を行う、
ことを特徴とする情報処理装置である。 The first means is
A receiver that receives the information sound that carries the notification information,
Sensors that detect the movement of the human body and
A storage unit that stores the motion information of the human body that should be performed according to the progress of playback of the content specified by the notification information, and
It is equipped with a processing unit having a timekeeping mechanism.
When the notification information is a content playback start notification for which content is specified, the processing unit
Based on the timekeeping result by the timekeeping mechanism, the detection result by the sensor, and the operation information corresponding to the content specified in the notification information received by the receiving unit, which is stored in the storage unit, the predetermined portion Evaluate exercise,
It is an information processing device characterized by this.

第２の手段は、第１の手段であって、前記情報処理装置は前記人体の所定部位の動きに連動して移動可能であり、前記センサは、前記人体の動作情報として前記所定部位の３次元位置を検出する位置センサであることを特徴とする。 The second means is the first means, and the information processing device can move in conjunction with the movement of the predetermined part of the human body, and the sensor can use the sensor as the motion information of the human body at 3 of the predetermined part. It is a position sensor that detects a dimensional position.

第３の手段は、第１の手段又は第２の手段であって、前記処理部による制御のもとで、情報を外部へ送信する送信部を更に備え、前記処理部は、前記評価の結果を、前記送信部に送信させる制御を行うことを特徴とする。 The third means is a first means or a second means, further including a transmitting unit that transmits information to the outside under the control of the processing unit, and the processing unit is the result of the evaluation. Is controlled to be transmitted to the transmission unit.

第４の手段は、第１の手段〜第３の手段のいずれか一の手段であって、前記コンテンツには音コンテンツが含まれることを特徴とする。 The fourth means is any one of the first means to the third means, and is characterized in that the content includes sound content.

第５の手段は、
第２の手段の情報処理装置と、
利用者により指定されたコンテンツを再生して提示するコンテンツ提示装置と、を備え、
前記コンテンツ提示装置は、前記指定されたコンテンツの再生処理を行う処理制御部と、
前記処理制御部による制御のもとで、前記指定されたコンテンツに対応して前記情報処理装置における評価が行われる場合に、前記指定されたコンテンツの再生に先立って、前記指定されたコンテンツを指定したコンテンツ再生開始通知を前記通知情報として、前記情報音の形態で前記情報処理装置へ送信する通知情報送信部と、
を備えることを特徴とする情報処理システムである。 The fifth means is
The information processing device of the second means and
It is equipped with a content presentation device that reproduces and presents the content specified by the user.
The content presenting device includes a processing control unit that performs playback processing of the designated content, and
When the information processing apparatus evaluates the specified content under the control of the processing control unit, the designated content is designated prior to the reproduction of the designated content. A notification information transmission unit that transmits the content playback start notification to the information processing apparatus in the form of the information sound as the notification information.
It is an information processing system characterized by being equipped with.

第６の手段は、第５の手段であって、前記コンテンツ提示装置は、前記情報処理装置から送信された評価の結果を受信する評価結果受信部を更に備え、前記処理制御部は、前記評価結果受信部により受信された評価結果に応じて、次に再生するコンテンツを決定することを特徴とする。 The sixth means is a fifth means, wherein the content presenting device further includes an evaluation result receiving unit that receives the evaluation result transmitted from the information processing device, and the processing control unit further includes the evaluation result receiving unit. The result is characterized in that the content to be played next is determined according to the evaluation result received by the result receiving unit.

第７の手段は、第６の手段であって、前記情報処理装置から送信される評価の結果の信号形態は、前記コンテンツ提示装置が固有に備える操作入力部が出力する操作入力信号と同様の信号形態であることを特徴とする。 The seventh means is the sixth means, and the signal form of the evaluation result transmitted from the information processing device is the same as the operation input signal output by the operation input unit uniquely provided in the content presenting device. It is characterized in that it is in the form of a signal.

第８の手段は、第５の手段〜第７の手段のいずれか一の手段であって、前記記憶部は、一定期間の間、前記センサからの入力を累積的に記憶すると共に特別なコンテンツの再生の進行に応じて行われるべき前記人体の動作情報を記憶し、前記処理部は、前記センサからの入力の累積値が基準値に達したときに前記特別なコンテンツを再生可能とする再生可能信号を前記送信部に送信させ、前記コンテンツ提示装置は、前記再生可能信号を受信する再生可能信号受信部を更に備え、前記処理制御部は、前記再生可能信号を前記再生信号受信部が受信したとき前記特別なコンテンツの再生処理を可能とすることを特徴とする。 The eighth means is any one of the fifth to seventh means, and the storage unit cumulatively stores the input from the sensor for a certain period of time and has special content. The processing unit stores the motion information of the human body to be performed according to the progress of the reproduction of the sensor, and makes the special content reproducible when the cumulative value of the input from the sensor reaches the reference value. The content presenting device further includes a reproducible signal receiving unit for transmitting a enable signal to the transmitting unit, and the processing control unit receives the reproducible signal from the reproducible signal receiving unit. When this is done, the special content can be reproduced.

第１の手段及び第２の手段によれば、受信部が、通知情報を担った情報音を受信する。当該通知情報が、コンテンツを指定したコンテンツ再生開始通知であった場合に、処理部が、計時機構による計時結果、センサによる検出結果、及び、指定されたコンテンツに対応して記憶部に記憶されている動作情報に基づいて、所定部位の運動の評価を行う。 According to the first means and the second means, the receiving unit receives the information sound carrying the notification information. When the notification information is a content playback start notification for which the content is specified, the processing unit stores the timekeeping result by the timekeeping mechanism, the detection result by the sensor, and the storage unit corresponding to the specified content. Based on the motion information, the motion of a predetermined part is evaluated.

なお、情報音は、可聴音信号であってもよいし、非可聴音信号であってもよい。 The information sound may be an audible sound signal or a non-audible sound signal.

したがって、第１の手段及び第２の手段によれば、コンテンツの再生の進行に応じて行われる評価対象者の動作を簡易な構成で評価することができる。 Therefore, according to the first means and the second means, it is possible to evaluate the operation of the evaluation target person performed according to the progress of the reproduction of the content with a simple configuration.

また、コンテンツ再生開始通知を受けてコンテンツ再生と共に計時を行うので次のような効果を期待できる。
例えば、情報処理装置から指定してコンテンツをＡＶ機器で画面表示すると共に、情報処理装置で、その指定と同時に計時を開始し、その計時結果、センサによる検出結果、及び、記憶されている動作情報に基づいて、所定部位の運動の評価を行うこととすれば、ＡＶ機器の種類により表示画面と計時のずれが生じるが、コンテンツ再生開始通知を受けてコンテンツ再生と共に計時を行うこととすれば、表示画面と計時のずれが解消され、的確な評価が可能となる。 In addition, since the content playback start notification is received and the time is measured together with the content playback, the following effects can be expected.
For example, the information processing device specifies and the content is displayed on the screen on the AV device, and the information processing device starts timing at the same time as the designation, the timing result, the detection result by the sensor, and the stored operation information. If the movement of a predetermined part is evaluated based on the above, the time timing may deviate from the display screen depending on the type of AV device. However, if the time is measured together with the content playback in response to the content playback start notification, The gap between the display screen and the timekeeping is eliminated, enabling accurate evaluation.

第３の手段によれば、処理部による制御のもとで、情報を外部へ送信する送信部を更に備え、処理部が、評価の結果を、送信部に送信させる制御を行う構成とした場合には、当該評価の結果に応じた処理を行う送信先の装置に対して、次に行うべき処理の決定のための情報を提供することができる。 According to the third means, under the control of the processing unit, a transmission unit for transmitting information to the outside is further provided, and the processing unit controls the transmission unit to transmit the evaluation result. Can provide information for determining the next process to be performed to the destination device that performs the process according to the result of the evaluation.

第４の手段によれば、コンテンツに音コンテンツが含まれる構成としたので、当該音コンテンツの再生の進行に応じた評価対象者のダンス等の動作の当該再生の進行に対する適合度を評価することができる。例えば、音コンテンツが楽曲コンテンツであった場合には、評価対象者の動作が、楽曲コンテンツのリズム等にどの程度適合した動作であるかを評価することができる。 According to the fourth means, since the content includes the sound content, the goodness of fit of the movement of the evaluation target person such as dance according to the progress of the reproduction of the sound content to the progress of the reproduction is evaluated. Can be done. For example, when the sound content is a musical piece content, it is possible to evaluate how much the action of the evaluation target person matches the rhythm of the musical piece content or the like.

第５の手段によれば、コンテンツ提示装置の処理制御部が、再生指定されたコンテンツの再生処理を行う。ここで、処理制御部は、当該再生指定されたコンテンツに対応して情報処理装置における評価が行われる場合に、当該指定されたコンテンツの再生に先立ち、通知情報送信部を利用し、当該指定されたコンテンツを指定したコンテンツ再生開始通知を通知情報として、情報音の形態で情報処理装置へ送信する。 According to the fifth means, the processing control unit of the content presenting device performs the reproduction processing of the content designated for reproduction. Here, when the information processing apparatus evaluates the content specified for reproduction, the processing control unit uses the notification information transmission unit to specify the content prior to the reproduction of the specified content. The content playback start notification that specifies the specified content is transmitted to the information processing device in the form of information sound as notification information.

したがって、第５の手段によれば、情報処理装置とコンテンツ提示装置とが処理を合理的に分担しつつ協働することにより、簡易な構成で、コンテンツの再生の進行に応じて行われる評価対象者の動作を簡易な構成で評価することができる。 Therefore, according to the fifth means, the information processing device and the content presenting device cooperate with each other while rationally sharing the processing, so that the evaluation target is performed according to the progress of the reproduction of the content with a simple configuration. It is possible to evaluate the movement of a person with a simple configuration.

第６の手段によれば、コンテンツ提示装置が、情報処理装置から送信された評価の結果を受信する評価結果受信部を更に備え、処理制御部が、評価結果受信部により受信された評価結果に応じて、次に再生するコンテンツを決定する構成とした場合には、コンテンツの再生順が、評価結果に応じて動的に変化するので、評価対象者等の利用者の楽しみを増加させることができる。 According to the sixth means, the content presenting device further includes an evaluation result receiving unit for receiving the evaluation result transmitted from the information processing device, and the processing control unit receives the evaluation result received by the evaluation result receiving unit. If the configuration is such that the content to be played next is determined accordingly, the playback order of the content changes dynamically according to the evaluation result, so that the enjoyment of the user such as the evaluation target can be increased. it can.

第７の手段によれば、情報処理装置から送信される評価の結果の信号形態は、コンテンツ提示装置が固有に備える操作入力部が出力する操作入力信号と同様の信号形態とする構成とした場合には、コンテンツ提示装置の機種に応じた信号形態を情報処理装置に登録させることにより、コンテンツ提示装置の機種を変更したとしても、コンテンツ提示装置に対する大きな改造を加える必要を回避することができる。 According to the seventh means, the signal form of the evaluation result transmitted from the information processing device is configured to be the same signal form as the operation input signal output by the operation input unit uniquely provided in the content presenting device. By registering the signal form corresponding to the model of the content presenting device in the information processing device, it is possible to avoid the need to make a major modification to the content presenting device even if the model of the content presenting device is changed.

第８の手段によれば、センサからの入力の累積値が基準値に達したときに特別なコンテンツを再生可能とする再生可能信号を送信部に送信させ、この再生可能信号を受信したコンテンツ提示装置の処理制御部は、特別なコンテンツの再生処理を可能とするので、より興趣性の高い情報処理システムが実現できる。 According to the eighth means, when the cumulative value of the input from the sensor reaches the reference value, a reproducible signal that enables reproducibility of special content is transmitted to the transmitter, and the content presentation that has received this reproducible signal. Since the processing control unit of the device enables the reproduction processing of special contents, a more interesting information processing system can be realized.

本発明の一実施形態に係る情報処理システムの概略的な構成を示す図である。It is a figure which shows the schematic structure of the information processing system which concerns on one Embodiment of this invention. 図１のコンテンツ提示装置における処理制御装置の構成を説明するためのブロック図である。It is a block diagram for demonstrating the structure of the processing control apparatus in the content presenting apparatus of FIG. 図１の情報処理装置の外観構成を説明するための図である。It is a figure for demonstrating the appearance structure of the information processing apparatus of FIG. 図３の本体部の構成を説明するためのブロック図である。It is a block diagram for demonstrating the structure of the main body part of FIG. 信号形態登録処理を説明するためのシーケンス図である。It is a sequence diagram for demonstrating the signal form registration process. 動作評価処理を説明するためのフローチャートである。It is a flowchart for demonstrating operation evaluation process.

以下、本発明の一実施形態を、図１〜図６を参照して説明する。なお、以下の説明及び図においては、同一の要素には同一の符号を付し、重複する説明を省略する。 Hereinafter, an embodiment of the present invention will be described with reference to FIGS. 1 to 6. In the following description and figures, the same elements are designated by the same reference numerals, and duplicate description will be omitted.

［構成］
図１には、一実施形態に係る情報処理システム１００の概略的な構成が示されている。図１に示されるように、情報処理システム１００は、コンテンツ提示装置２００と、固有リモコン３００と、情報処理装置４００とを備えている。 [Constitution]
FIG. 1 shows a schematic configuration of an information processing system 100 according to an embodiment. As shown in FIG. 1, the information processing system 100 includes a content presentation device 200, a unique remote controller 300, and an information processing device 400.

上記のコンテンツ提示装置２００は、コンテンツ提示部２１０と、処理制御装置２２０とを備えている。また、コンテンツ提示装置２００は、記録媒体読取装置２３０を備えている。 The content presentation device 200 includes a content presentation unit 210 and a processing control device 220. In addition, the content presentation device 200 includes a recording medium reading device 230.

上記のコンテンツ提示部２１０は、表示ユニット２１１と、音出力ユニット２１２とを備えている。ここで、表示ユニット２１１は、液晶表示パネル等の表示デバイスを有しており、処理制御装置２２０による制御のもとで、表示デバイスに画像を表示する。また、音出力ユニット２１２は、スピーカ等の音出力デバイスを有しており、処理制御装置２２０による制御のもとで、楽曲音等のコンテンツ音としての可聴音ＳＤＳや、通知情報を担った情報音信号としての音透かし信号ＳＴＳを出力する。なお、本実施形態では、情報音は非可聴音となっている。 The content presentation unit 210 includes a display unit 211 and a sound output unit 212. Here, the display unit 211 has a display device such as a liquid crystal display panel, and displays an image on the display device under the control of the processing control device 220. Further, the sound output unit 212 has a sound output device such as a speaker, and under the control of the processing control device 220, the audible sound SDS as the content sound such as the music sound and the information carrying the notification information. The sound watermark signal STS as a sound signal is output. In the present embodiment, the information sound is an inaudible sound.

上記の処理制御装置２２０は、コンテンツ提示装置２００を統括制御する。なお、処理制御装置２２０の構成の詳細については、後述する。 The processing control device 220 controls the content presentation device 200 in an integrated manner. The details of the configuration of the processing control device 220 will be described later.

上記の記録媒体読取装置２３０は、処理制御装置２２０による制御のもとで、装填されたＤＶＤ（Digital Versatile Disk）等の記録媒体からコンテンツを読み取る。記録媒体読取装置２３０による読取結果は、コンテンツデータＣＳＤとして、処理制御装置２２０へ送られる。 The recording medium reading device 230 reads the content from a loaded recording medium such as a DVD (Digital Versatile Disk) under the control of the processing control device 220. The reading result by the recording medium reading device 230 is sent to the processing control device 220 as content data CSD.

上記の固有リモコン３００は、コンテンツ提示装置２００に固有に付属している操作入力装置である。この固有リモコン３００には、固有個別操作入力部としてのキー等３１０j（ｊ＝１，２，…）が配置されている。ここで、キー等３１０jには、「上」キー、「下」キー、「右」キー、「左」キー、「決定」キー等が含まれるようになっている。 The unique remote controller 300 is an operation input device uniquely attached to the content presenting device 200. A key or the like 310 j (j = 1, 2, ...) As a unique individual operation input unit is arranged on the unique remote controller 300. Here, the keys and the like 310 j include an "up" key, a "down" key, a "right" key, a "left" key, a "decision" key, and the like.

キー等３１０jのいずれかが操作されると、操作されたキー等に対応する信号形態の操作信号ＯＰ１が、固有リモコン３００から送信されるようになっている。ここで、本実施形態では、操作信号ＯＰ１は、赤外線無線信号となっている。 When any one of the keys or the like 310 j is operated, the operation signal OP1 in the signal form corresponding to the operated keys or the like is transmitted from the unique remote controller 300. Here, in the present embodiment, the operation signal OP1 is an infrared radio signal.

なお、処理制御装置２２０は、内部に、キー等３１０jのそれぞれと、操作信号ＯＰ１の信号形態との関係が保持している。このため、処理制御装置２２０は、固有リモコン３００からの操作信号ＯＰ１を受信した場合に、キー等３１０jのいずれが操作されたかを判別できるようになっている。 The processing control device 220 internally retains the relationship between each of the keys and the like 310 j and the signal form of the operation signal OP1. Therefore, when the processing control device 220 receives the operation signal OP1 from the unique remote controller 300, it can determine which of the keys and the like 310 j is operated.

上記の情報処理装置４００は、本実施形態では、利用者（評価対象者）の手首に装着可能となっている。なお、情報処理装置４００の構成の詳細については、後述する。 In the present embodiment, the information processing device 400 can be worn on the wrist of a user (evaluation target person). The details of the configuration of the information processing device 400 will be described later.

＜処理制御装置２２０の構成＞
次に、上述した処理制御装置２２０の構成について説明する。 <Configuration of processing control device 220>
Next, the configuration of the processing control device 220 described above will be described.

処理制御装置２２０は、図２に示されるように、処理制御ユニット２２１と、記憶ユニット２２２とを備えている。また、処理制御装置２２０は、信号受信部２２３を備えている。 As shown in FIG. 2, the processing control device 220 includes a processing control unit 221 and a storage unit 222. Further, the processing control device 220 includes a signal receiving unit 223.

上記の処理制御ユニット２２１は、中央処理装置（ＣＰＵ：Central Processing Unit）及び周辺回路を備えて構成されている。そして、処理制御ユニット２２１は、様々なプログラムを実行することにより、様々な機能を果たすようになっている。 The processing control unit 221 is configured to include a central processing unit (CPU) and peripheral circuits. The processing control unit 221 fulfills various functions by executing various programs.

こうした機能には、記録媒体読取装置２３０から送られたコンテンツデータＣＳＤの受信、及び、受信したコンテンツデータＣＳＤに含まれるゲーム等のコンテンツの進行処理、並びに、表示ユニット２１１への当該コンテンツの進行に応じた表示画像データＩＭＤの送信、音出力ユニット２１２への当該コンテンツの進行に応じた音声データＳＤＤの送信が含まれる。 Such functions include receiving the content data CSD sent from the recording medium reading device 230, processing the progress of content such as a game included in the received content data CSD, and progressing the content to the display unit 211. The transmission of the corresponding display image data IMD and the transmission of the audio data SDD according to the progress of the content to the sound output unit 212 are included.

なお、コンテンツの進行指令や切換指令は、固有リモコン３００から送信される操作信号ＯＰ１又は情報処理装置４００から送信される赤外線信号である信号ＯＰ２により行われるようになっている。 The content progress command and switching command are issued by the operation signal OP1 transmitted from the unique remote controller 300 or the signal OP2 which is an infrared signal transmitted from the information processing device 400.

また、記録媒体に記録された情報処理装置４００に対応するコンテンツの記録媒体読取装置２３０による読取結果として、記録媒体読取装置２３０から送られたコンテンツデータＣＳＤを受けた後、信号形態の登録処理の開始指令がなされた場合には、処理制御ユニット２２１は、情報処理装置４００における後述する処理ユニット４８０と協働して、信号形態登録処理を実行する。かかる信号形態登録処理の詳細については、後述する。 Further, after receiving the content data CSD sent from the recording medium reading device 230 as the reading result of the content corresponding to the information processing device 400 recorded on the recording medium by the recording medium reading device 230, the signal form registration process is performed. When the start command is given, the processing control unit 221 executes the signal form registration process in cooperation with the processing unit 480 described later in the information processing apparatus 400. Details of such signal form registration processing will be described later.

上記の記憶ユニット２２２は、固定ディスク装置等の不揮発性の記憶デバイスを備えて構成されている。この記憶ユニット２２２には、処理制御装置２２０で利用される様々な情報データが記憶される。記憶ユニット２２２には、処理制御ユニット２２１がアクセス可能となっている。 The storage unit 222 is configured to include a non-volatile storage device such as a fixed disk device. Various information data used by the processing control device 220 is stored in the storage unit 222. The processing control unit 221 is accessible to the storage unit 222.

上記の信号受信部２２３は、赤外線無線信号を電気信号に変換する赤外線受光器を備えて構成されている。信号受信部２２３は、固有リモコン３００からの操作信号ＯＰ１又は情報処理装置４００からの信号ＯＰ２を受信し、電気信号に変換する。こうして得られた電気信号は、処理制御ユニット２２１へ送られる。 The signal receiving unit 223 is configured to include an infrared receiver that converts an infrared wireless signal into an electric signal. The signal receiving unit 223 receives the operation signal OP1 from the unique remote controller 300 or the signal OP2 from the information processing device 400 and converts it into an electric signal. The electric signal thus obtained is sent to the processing control unit 221.

＜情報処理装置４００の構成＞
次いで、情報処理装置４００の構成について説明する。 <Configuration of information processing device 400>
Next, the configuration of the information processing device 400 will be described.

情報処理装置４００は、図３の外観構成に示されるように、本体部４１０と、本体部４１０に接続された第１バンド部４９１と、本体部４１０に接続された第２バンド部４９２とを備えている。第１バンド部４９１及び第２バンド部４９２を利用することにより、評価対象者の手首に情報処理装置４００を装着できるようになっている。かかる装着を行うと、情報処理装置４００は、評価対象者の手首の動きに連動して移動するようになる。 As shown in the external configuration of FIG. 3, the information processing apparatus 400 includes a main body portion 410, a first band portion 491 connected to the main body portion 410, and a second band portion 492 connected to the main body portion 410. I have. By using the first band portion 491 and the second band portion 492, the information processing device 400 can be attached to the wrist of the evaluation target person. When such mounting is performed, the information processing device 400 moves in conjunction with the movement of the wrist of the evaluation target person.

また、本体部４１０の表面には、押下ボタン４６１，４６２が配置されている。なお、押下ボタン４６１，４６２により、操作入力ユニット４６０が構成されている。 Further, the pressing buttons 461 and 462 are arranged on the surface of the main body 410. The operation input unit 460 is configured by the pressing buttons 461 and 462.

さらに、本体部４１０には、音出力ユニット４７０が組み込まれている。この音出力ユニット４７０は、スピーカデバイスを備えて構成されている。 Further, the sound output unit 470 is incorporated in the main body 410. The sound output unit 470 is configured to include a speaker device.

＜本体部４１０の構成＞
次に、本体部４１０の構成について説明する。 <Structure of main body 410>
Next, the configuration of the main body 410 will be described.

本体部４１０は、図４に示されるように、上述した操作入力ユニット４６０及び音出力ユニット４７０に加えて、記憶ユニット４２０と、通知情報受信部４３０と、操作信号受信部４４０と、信号送信部４５０とを備えている。また、情報処理装置４００は、加速度センサユニット４７５と、処理ユニット４８０とを備えている。 As shown in FIG. 4, the main body 410 includes a storage unit 420, a notification information receiving unit 430, an operation signal receiving unit 440, and a signal transmitting unit, in addition to the operation input unit 460 and the sound output unit 470 described above. It is equipped with 450. Further, the information processing device 400 includes an acceleration sensor unit 475 and a processing unit 480.

上記の記憶ユニット４２０は、不揮発性の記憶素子を備えて構成されている。この記憶ユニット４２０は、情報処理装置４００において利用される様々な情報データを記憶する。こうした情報データには、処理ユニットが可聴音である案内音のデータ、情報音が担った通知情報により指定されるコンテンツの再生の進行に応じて行われるべき手首の動作情報等が含まれている。当該記憶ユニット４２０には、処理ユニット４８０がアクセス可能となっている。 The storage unit 420 is configured to include a non-volatile storage element. The storage unit 420 stores various information data used in the information processing device 400. Such information data includes guide sound data that is an audible sound of the processing unit, wrist movement information that should be performed according to the progress of playback of the content specified by the notification information carried by the information sound, and the like. .. The processing unit 480 is accessible to the storage unit 420.

上記の通知情報受信部４３０は、音透かし信号をデジタル電気信号に変換する変換部を備えて構成されている。この通知情報受信部４３０は、コンテンツ提示装置２００（より詳しくは、音出力ユニット２１２）から送信された情報音である音透かし信号ＳＴＳを受信し、デジタル電気信号に変換する。こうした得られたデジタル電気信号は、処理ユニット４８０へ送られる。 The notification information receiving unit 430 is configured to include a conversion unit that converts a sound watermark signal into a digital electric signal. The notification information receiving unit 430 receives the sound watermark signal STS, which is the information sound transmitted from the content presenting device 200 (more specifically, the sound output unit 212), and converts it into a digital electric signal. The obtained digital electric signal is sent to the processing unit 480.

上記の操作信号受信部４４０は、赤外線無線信号を電気信号に変換する赤外線受光器を備えて構成されている。操作信号受信部４４０は、固有リモコン３００から送信された操作信号ＯＰ１を受信し、電気信号に変換する。こうして得られた電気信号は、処理ユニット４８０へ送られる。 The operation signal receiving unit 440 is configured to include an infrared receiver that converts an infrared wireless signal into an electric signal. The operation signal receiving unit 440 receives the operation signal OP1 transmitted from the unique remote controller 300 and converts it into an electric signal. The electric signal thus obtained is sent to the processing unit 480.

上記の信号送信部４５０は、電気信号を赤外線無線信号に変換する赤外線送光器を備えて構成されている。この信号送信部４５０は、処理ユニット４８０から送られた電気信号の態様の信号を受ける。そして、信号送信部４５０は、当該電気信号の態様の操作信号を赤外線無線信号に変換し、信号ＯＰ２として、コンテンツ提示装置２００へ送信する。 The signal transmission unit 450 is configured to include an infrared transmitter that converts an electric signal into an infrared radio signal. The signal transmission unit 450 receives a signal in the form of an electric signal sent from the processing unit 480. Then, the signal transmission unit 450 converts the operation signal of the mode of the electric signal into an infrared radio signal and transmits it as the signal OP2 to the content presenting device 200.

上記の操作入力ユニット４６０は、上述したように押下ボタン４６１，４６２を備えている。そして、押下ボタン４６１又は押下ボタン４６２が押下されると、押下されたボタンに対応する電気信号を処理ユニット４８０へ送る。 The operation input unit 460 is provided with push buttons 461 and 462 as described above. Then, when the press button 461 or the press button 462 is pressed, an electric signal corresponding to the pressed button is sent to the processing unit 480.

上記の音出力ユニット４７０は、処理ユニット４８０から送られた音データを受ける。そして、音出力ユニット４７０は、当該音データに対応する可聴音を出力する。 The sound output unit 470 receives the sound data sent from the processing unit 480. Then, the sound output unit 470 outputs an audible sound corresponding to the sound data.

上記の加速度センサユニット４７５は、情報処理装置４００の移動の際の３次元加速度を検出する。加速度センサユニット４７５による検出結果は、処理ユニット４８０へ送られる。このため、処理ユニット４８０は、加速度センサユニット４７５による検出結果、及び、後述する計時機構による計時結果に基づいて、情報処理装置４００の３次元位置の時間変化を把握できるようになっている。 The acceleration sensor unit 475 detects the three-dimensional acceleration when the information processing apparatus 400 moves. The detection result by the acceleration sensor unit 475 is sent to the processing unit 480. Therefore, the processing unit 480 can grasp the time change of the three-dimensional position of the information processing apparatus 400 based on the detection result by the acceleration sensor unit 475 and the timekeeping result by the timekeeping mechanism described later.

上記の処理ユニット４８０は、計時機構を有しており、ＣＰＵ及び周辺回路を備えて構成されている。そして、処理ユニット４８０は、プログラムを実行することにより、情報処理装置４００の全体を統括制御する。処理ユニット４８０が実行する処理には、上述した処理制御ユニット２２１と協働して行われる信号形態登録処理、及び、評価対象者の動作評価処理が含まれている。これらの処理の詳細については、後述する。 The processing unit 480 has a timekeeping mechanism, and is configured to include a CPU and peripheral circuits. Then, the processing unit 480 controls the entire information processing apparatus 400 by executing the program. The processing executed by the processing unit 480 includes a signal form registration processing performed in cooperation with the processing control unit 221 described above, and an operation evaluation processing of the evaluation target person. Details of these processes will be described later.

［動作］
次に、上記のように構成された情報処理システム１００の動作について、コンテンツ提示装置２００における処理制御ユニット２２１と情報処理装置４００における処理ユニット４８０とが協働して行う信号形態登録処理、及び、情報処理装置４００における処理ユニット４８０が実行する動作評価処理に主に着目して説明する。 [motion]
Next, regarding the operation of the information processing system 100 configured as described above, the signal form registration process performed by the processing control unit 221 in the content presentation device 200 and the processing unit 480 in the information processing device 400 in cooperation with each other, and The operation evaluation process executed by the processing unit 480 in the information processing apparatus 400 will be mainly described.

＜信号形態登録処理＞
まず、信号形態登録処理について説明する。なお、当該信号形態登録処理は、コンテンツ提示装置２００が新たな機種となるごとに実行させる。 <Signal form registration process>
First, the signal form registration process will be described. The signal form registration process is executed every time the content presenting device 200 becomes a new model.

信号形態登録処理では、図５に示されるように、まず、コンテンツ提示装置２００（より詳しくは、音出力ユニット２１２）が、通知情報としての登録対象の信号形態に対応する固有リモコン３００におけるキーの指定を、音透かし信号ＳＴＳにより、情報処理装置４００に送信する。また、コンテンツ提示装置２００が、可聴音ＳＤＳにより、情報処理装置４００における登録対象の信号形態に対応する固有リモコン３００のキーの指定を利用者に報知する In the signal form registration process, as shown in FIG. 5, first, the content presenting device 200 (more specifically, the sound output unit 212) of the key in the unique remote controller 300 corresponding to the signal form to be registered as notification information. The designation is transmitted to the information processing apparatus 400 by the sound watermark signal STS. Further, the content presenting device 200 notifies the user of the designation of the key of the unique remote controller 300 corresponding to the signal form to be registered in the information processing device 400 by the audible sound SDS.

固有リモコン３００のキーの指定の報知を受けた利用者が、指定された固有リモコン３００のキーを操作すると、操作されたキーに対応する信号形態の操作信号ＯＰ１が、固有リモコン３００から送信される。 When the user who has been notified of the designation of the key of the unique remote controller 300 operates the key of the designated unique remote controller 300, the operation signal OP1 in the signal form corresponding to the operated key is transmitted from the unique remote controller 300. ..

当該操作信号ＯＰ１を受信すると、情報処理装置４００では、当該操作信号ＯＰ１の信号形態を、処理ユニット４８０が、操作された固有リモコン３００におけるキーに対応する登録対象の信号形態として、記憶ユニット４２０内に仮登録する。引き続き、処理ユニット４８０が、信号送信部４５０を利用して、出力当該仮登録された信号形態の操作信号ＯＰ２を送信する。 When the operation signal OP1 is received, the information processing apparatus 400 sets the signal form of the operation signal OP1 in the storage unit 420 as a signal form to be registered corresponding to the key in the unique remote controller 300 operated by the processing unit 480. Temporarily register with. Subsequently, the processing unit 480 uses the signal transmission unit 450 to transmit the operation signal OP2 in the output temporarily registered signal form.

当該操作信号ＯＰ２を受信すると、コンテンツ提示装置２００（より詳しくは、処理制御装置２２０）は、当該操作信号ＯＰ２の信号形態と、先に指定した固有リモコンのキーに対応する信号形態との同一性の認証を行う。そして、コンテンツ提示装置２００（より詳しくは、音出力ユニット２１２）は、通知情報としての認証結果を担った音透かし信号ＳＴＳにより、情報処理装置４００へ送信する。また、コンテンツ提示装置２００は、可聴音ＳＤＳにより、認証結果を利用者に報知する。 Upon receiving the operation signal OP2, the content presenting device 200 (more specifically, the processing control device 220) has the same signal form of the operation signal OP2 and the signal form corresponding to the key of the unique remote controller specified earlier. Authenticate. Then, the content presenting device 200 (more specifically, the sound output unit 212) transmits to the information processing device 400 by the sound watermark signal STS carrying the authentication result as the notification information. Further, the content presenting device 200 notifies the user of the authentication result by the audible sound SDS.

認証結果が肯定的であった場合には、処理ユニット４８０は、仮登録を本登録に切り替える。一方、認証結果が否定的であった場合には、同一の登録対象に関する信号形態登録処理が再実行される。 If the authentication result is positive, the processing unit 480 switches the temporary registration to the main registration. On the other hand, if the authentication result is negative, the signal form registration process for the same registration target is re-executed.

以上の個別の登録対象の信号形態に関する信号形態登録処理が、登録対象の信号形態ごとに行われる。なお、本実施形態においては、登録対象の信号形態は、固有リモコン３００における「右」キー、「左」キー及び「決定」キーのそれぞれに対応する信号形態となっている。そして、処理ユニット４８０は、押下ボタン４６１が押下された場合に情報処理装置４００から送信される信号ＯＰ２の信号形態を、固有リモコン３００における「決定」キーに対応する信号形態に設定する。また、処理ユニット４８０は、押下ボタン４６２が押下された場合に情報処理装置４００から送信される信号ＯＰ２の信号形態を、固有リモコン３００における「右」キーに対応する信号形態に設定する。 The signal form registration process relating to the signal form of the individual registration target is performed for each signal form to be registered. In the present embodiment, the signal form to be registered is a signal form corresponding to each of the "right" key, the "left" key, and the "decision" key in the unique remote controller 300. Then, the processing unit 480 sets the signal form of the signal OP2 transmitted from the information processing device 400 when the pressing button 461 is pressed to the signal form corresponding to the "decision" key in the unique remote controller 300. Further, the processing unit 480 sets the signal form of the signal OP2 transmitted from the information processing device 400 when the pressing button 462 is pressed to the signal form corresponding to the "right" key on the unique remote controller 300.

＜動作評価処理＞
次に、処理ユニット４８０が実行する動作評価処理について説明する。 <Operation evaluation process>
Next, the operation evaluation process executed by the processing unit 480 will be described.

動作評価処理に際しては、図６に示されるように、まず、ステップＳ１１において、処理ユニット４８０が、コンテンツ提示装置２００から送信された音透かし信号ＳＴＳによるコンテンツ再生開始通知を受信したか否かを判定する。ステップＳ１１における判定の結果が否定的であった場合（ステップＳ１１：Ｎ）には、ステップＳ１１の処理が繰り返される。 In the operation evaluation process, as shown in FIG. 6, first, in step S11, it is determined whether or not the processing unit 480 has received the content reproduction start notification by the sound watermark signal STS transmitted from the content presenting device 200. To do. If the result of the determination in step S11 is negative (step S11: N), the process of step S11 is repeated.

本実施形態では、表示ユニット２１１に表示された再生コンテツ候補の中から、評価対象者が、押下ボタン（「右」ボタン）４６２の操作により、再生希望の再生コンテツ候補の仮選択コンテンツに設定した後、押下ボタン（「決定」ボタン）４６２を押下すると、選択されたコンテンツの再生が開始される。ここで、選択されたコンテンツが、評価対象者の動作が評価対象となるコンテンツである場合に、コンテンツ提示装置２００から音透かし信号ＳＴＳによるコンテンツ再生開始通知が送信されるようになっている。 In the present embodiment, from the reproduction content candidates displayed on the display unit 211, the evaluation target person sets the tentative selection content of the reproduction content candidate to be reproduced by operating the press button (“right” button) 462. After that, when the press button (“OK” button) 462 is pressed, the playback of the selected content is started. Here, when the selected content is the content whose action of the evaluation target person is the evaluation target, the content presentation device 200 transmits the content reproduction start notification by the sound watermark signal STS.

なお、本実施形態では、評価対象者の動作が評価対象となるコンテンツについては、動画像及び楽曲音が再生されるようになっている。 In the present embodiment, the moving image and the music sound are reproduced for the content whose motion of the evaluation target person is the evaluation target.

また、上述したように、コンテンツ再生開始通知には、再生コンテンツの指定が含まれるようになっている。 Further, as described above, the content reproduction start notification includes the designation of the reproduced content.

コンテンツ提示装置２００から送信されたコンテンツ再生開始通知を受信し、ステップＳ１１における判定の結果が肯定的となると（ステップＳ１１：Ｙ）、処理はステップＳ１２へ進む。このステップＳ１２では、処理ユニット４８０が、評価に際しての初期処理を行う。かかる初期処理では、処理ユニット４８０は、内部の計時機構による計時の開始処理、及び、加速度センサユニット４７５による検出結果の収集開始処理を実行する。 When the content reproduction start notification transmitted from the content presenting device 200 is received and the result of the determination in step S11 becomes affirmative (step S11: Y), the process proceeds to step S12. In this step S12, the processing unit 480 performs the initial processing at the time of evaluation. In such an initial process, the processing unit 480 executes a time timing start process by the internal time measurement mechanism and a collection start process of the detection result by the acceleration sensor unit 475.

次に、ステップＳ１３において、処理ユニット４８０が、コンテンツ提示装置２００から送信された音透かし信号ＳＴＳによる評価結果要求を受信したか否かを判定する。なお、評価対象者の動作が評価対象となったコンテンツの再生が終了すると、コンテンツ提示装置２００から評価結果要求が送信されるようになっている。 Next, in step S13, it is determined whether or not the processing unit 480 has received the evaluation result request by the sound watermark signal STS transmitted from the content presenting device 200. When the reproduction of the content whose motion is the evaluation target is completed, the content presentation device 200 transmits the evaluation result request.

ステップＳ１３における判定の結果が否定的であった場合（ステップＳ１３：Ｎ）には、処理はステップＳ１４へ進む。このステップＳ１４では、処理ユニット４８０が、計時機構による計時結果と、再生中のコンテンツに対応して記憶ユニット４２０に記憶されている、当該コンテンツの再生の進行に応じて行われるべき手首の動作情報に基づいて、特徴的なタイミングとなったか否かを判定する。ここで、特徴的なタイミングには、ジャンプすべきタイミング等の特徴的な動作を行うべきタイミングが含まれる。なお、本実施形態では、特徴的なタイミングには、コンテンツ再生開始タイミング、コンテンツ再生終了間近タイミング等が含まれるようになっている。 If the result of the determination in step S13 is negative (step S13: N), the process proceeds to step S14. In step S14, the processing unit 480 has the timekeeping result by the timekeeping mechanism and the wrist motion information stored in the storage unit 420 corresponding to the content being played, which should be performed according to the progress of the reproduction of the content. Based on, it is determined whether or not the timing is characteristic. Here, the characteristic timing includes a timing for performing a characteristic operation such as a timing for jumping. In the present embodiment, the characteristic timings include the content playback start timing, the content playback end timing, and the like.

ステップＳ１４における判定の結果が否定的であった場合（ステップＳ１４：Ｎ）には、処理はステップＳ１３に戻る。そして、ステップＳ１３又はステップＳ１４における判定の結果が肯定的となるまで、ステップＳ１３，Ｓ１４の処理が繰り返される。 If the result of the determination in step S14 is negative (step S14: N), the process returns to step S13. Then, the processes of steps S13 and S14 are repeated until the result of the determination in step S13 or step S14 becomes affirmative.

特徴的なタイミングとなり、ステップＳ１４における判定の結果が肯定的となると（ステップＳ１４：Ｙ）、処理はステップＳ１５へ進む。このステップＳ１５では、処理ユニット４８０が、音出力ユニット４７０を利用して、案内音声を出力する。 When the timing becomes characteristic and the result of the determination in step S14 becomes positive (step S14: Y), the process proceeds to step S15. In this step S15, the processing unit 480 uses the sound output unit 470 to output the guidance voice.

本実施形態では、特徴的なタイミングがコンテンツ再生開始タイミングの場合には、「１曲目行くよ。レッツダンス！」を案内音声としている。また、特徴的なタイミングがジャンプのタイミングの場合には、「ここで、ジャンプ！」を案内音声としている。また、特徴的なタイミングがコンテンツ再生終了間近タイミングの場合には、「あと少し！」を案内音声としている。 In the present embodiment, when the characteristic timing is the content playback start timing, "I'm going to the first song. Let's dance!" Is used as the guidance voice. When the characteristic timing is the jump timing, "Here, jump!" Is used as the guidance voice. In addition, when the characteristic timing is near the end of content playback, "a little more!" Is used as the guidance voice.

ステップＳ１５の処理が終了すると、処理はステップＳ１３に戻る。そして、ステップＳ１３における判定の結果が肯定的となるまで、ステップＳ１３〜Ｓ１５の処理が繰り返される。 When the process of step S15 is completed, the process returns to step S13. Then, the processes of steps S13 to S15 are repeated until the result of the determination in step S13 becomes positive.

評価結果要求を受信し、ステップＳ１３における判定の結果が肯定的となると（ステップＳ１３：Ｙ）、処理はステップＳ１６へ進む。このステップＳ１６では、処理ユニット４８０が、評価処理を行う。 When the evaluation result request is received and the result of the determination in step S13 becomes affirmative (step S13: Y), the process proceeds to step S16. In this step S16, the processing unit 480 performs the evaluation process.

かかる評価処理に際して、処理ユニット４８０は、まず、内部の計時機構による計時の停止処理、及び、加速度センサユニット４７５による検出結果の収集停止処理を実行する。引き続き、処理ユニット４８０は、今回の動作評価処理において収集した対応した加速度センサユニット４７５による検出結果の時間変化に基づいて、情報処理装置４００の３次元位置（すなわち、情報処理装置４００が装着された手首の３次元位置）の時間変化を把握する。 In such an evaluation process, the processing unit 480 first executes a time timing stop process by the internal time measurement mechanism and a collection stop process of the detection result by the acceleration sensor unit 475. Subsequently, the processing unit 480 was fitted with the three-dimensional position of the information processing device 400 (that is, the information processing device 400) based on the time change of the detection result by the corresponding acceleration sensor unit 475 collected in the current operation evaluation process. Grasp the time change of the three-dimensional position of the wrist).

次に、処理ユニット４８０は、当該手首の３次元位置の時間変化、及び、今回再生されたコンテンツに対応して記憶ユニット４２０に記憶されている、当該コンテンツの再生の進行に応じて行われるべき手首の動作情報に基づいて、評価対象者の動作の採点を行う。ここで、採点の結果である今回の採点値は、当該動作情報と、手首の３次元位置の時間変化との適合度が高いほど、高くなる。 Next, the processing unit 480 should be performed according to the time change of the three-dimensional position of the wrist and the progress of the reproduction of the content stored in the storage unit 420 corresponding to the content reproduced this time. The movement of the evaluation target person is scored based on the movement information of the wrist. Here, the current scoring value, which is the result of scoring, becomes higher as the degree of conformity between the motion information and the time change of the three-dimensional position of the wrist is higher.

そして、処理ユニット４８０は、採点値に応じて、今回の評価結果を決定する。本実施形態では、評価結果は評価１〜４のいずれかに分類されるようになっている。ここで、評価１は「プロダンサ級」、評価２は「セミプロダンサ級」、評価３は「アマチュアダンサ級」、評価４は「見習いダンサ級」となっている。 Then, the processing unit 480 determines the evaluation result of this time according to the score value. In the present embodiment, the evaluation results are classified into any of evaluations 1 to 4. Here, evaluation 1 is "Prodancer grade", evaluation 2 is "semi-prodancer grade", evaluation 3 is "amateur dancer grade", and evaluation 4 is "apprentice dancer grade".

次いで、処理ユニット４８０は、信号送信部４５０を利用して、評価結果を信号ＯＰ２に反映させて、コンテンツ提示装置２００へ送信する。なお、本実施形態では、評価１は、「右」キー、「右」キー及び「決定」キーを連続操作した場合の信号形態の信号ＯＰ２として送信される。また、評価２は、「右」キー、「左」キー及び「決定」キーを連続操作した場合の信号形態の信号ＯＰ２として送信される。また、評価３は、「左」キー、「右」キー及び「決定」キーを連続操作した場合の信号形態の信号ＯＰ２として送信される。また、評価４は、「左」キー、「左」キー及び「決定」キーを連続操作した場合の信号形態の信号ＯＰ２として送信される。 Next, the processing unit 480 uses the signal transmission unit 450 to reflect the evaluation result in the signal OP2 and transmit it to the content presenting device 200. In the present embodiment, the evaluation 1 is transmitted as the signal OP2 in the signal form when the "right" key, the "right" key, and the "decision" key are continuously operated. Further, the evaluation 2 is transmitted as a signal OP2 in the signal form when the "right" key, the "left" key, and the "decision" key are continuously operated. Further, the evaluation 3 is transmitted as a signal OP2 in the signal form when the "left" key, the "right" key and the "decision" key are continuously operated. Further, the evaluation 4 is transmitted as a signal OP2 in the signal form when the "left" key, the "left" key, and the "decision" key are continuously operated.

こうしてステップＳ１６の処理が終了すると、処理はステップＳ１１へ戻る。以後、ステップＳ１１〜Ｓ１６の処理が繰り返される。 When the process of step S16 is completed in this way, the process returns to step S11. After that, the processes of steps S11 to S16 are repeated.

評価結果を受信したコンテンツ提示装置２００では、処理制御ユニット２２１が、受信した評価結果に応じたコンテンツ（本実施形態では、画像及び音）を提示する。 In the content presenting device 200 that has received the evaluation result, the processing control unit 221 presents the content (image and sound in the present embodiment) according to the received evaluation result.

以上説明したように、本実施形態の情報処理装置４００では、通知情報受信部４３０が、通知情報を担った音透かし信号ＳＴＳを受信する。当該通知情報が、コンテンツを指定したコンテンツ再生開始通知であった場合に、処理ユニット４８０が、計時機構による計時結果、加速度センサユニット４７５による検出結果、及び、指定されたコンテンツに対応して記憶ユニット４２０に記憶されている動作情報に基づいて、情報処理装置４００が装着された手首の運動の評価を行う。 As described above, in the information processing apparatus 400 of the present embodiment, the notification information receiving unit 430 receives the sound watermark signal STS carrying the notification information. When the notification information is a content playback start notification for which content is specified, the processing unit 480 stores the time measurement result by the time measurement mechanism, the detection result by the acceleration sensor unit 475, and the storage unit corresponding to the specified content. Based on the motion information stored in the 420, the motion of the wrist to which the information processing device 400 is attached is evaluated.

したがって、本実施形態の情報処理装置４００によれば、コンテンツの再生の進行に応じて行われる評価対象者の動作を簡易な構成で評価することができる。 Therefore, according to the information processing apparatus 400 of the present embodiment, it is possible to evaluate the operation of the evaluation target person performed according to the progress of the reproduction of the content with a simple configuration.

また、本実施形態の情報処理装置４００では、処理ユニット４１０が、信号送信部４５０を利用して、評価の結果をコンテンツ提示装置２００へ送信する。このため、当該評価の結果に応じた処理を行うコンテンツ提示装置２００に対して、次に行うべき処理の決定のための情報を提供することができる。 Further, in the information processing device 400 of the present embodiment, the processing unit 410 uses the signal transmission unit 450 to transmit the evaluation result to the content presentation device 200. Therefore, it is possible to provide the content presenting device 200, which performs processing according to the result of the evaluation, with information for determining the processing to be performed next.

また、本実施形態の情報処理装置４００では、コンテンツに音コンテンツが含まれる構成を採用している。このため、当該音コンテンツの再生の進行に応じた評価対象者のダンス等の動作の当該再生の進行に対する適合度を評価することができる。 Further, the information processing device 400 of the present embodiment adopts a configuration in which sound content is included in the content. Therefore, it is possible to evaluate the goodness of fit of the movement of the evaluation target person such as dance according to the progress of the reproduction of the sound content to the progress of the reproduction.

本実施形態の情報処理システム１００では、コンテンツ提示装置２００の処理制御ユニット２２１が、再生指定されたコンテンツの再生処理を行う。また、処理制御ユニット２２１は、当該再生指定されたコンテンツに対応して情報処理装置４００における評価が行われる場合に、当該再生指定されたコンテンツの再生に先立ち、音出力ユニット２１２を利用し、当該指定されたコンテンツを指定したコンテンツ再生開始通知を音透かし信号ＳＴＳの形態で情報処理装置４００へ送信する。 In the information processing system 100 of the present embodiment, the processing control unit 221 of the content presentation device 200 performs the reproduction processing of the content designated for reproduction. Further, when the information processing apparatus 400 evaluates the content specified for reproduction, the processing control unit 221 uses the sound output unit 212 prior to the reproduction of the content specified for reproduction. A content reproduction start notification with the specified content is transmitted to the information processing device 400 in the form of a sound watermark signal STS.

したがって、本実施形態の情報処理システムに１００よれば、情報処理装置４００とコンテンツ提示装置２００とが処理を合理的に分担しつつ協働することにより、簡易な構成で、コンテンツの再生の進行に応じて行われる評価対象者の動作を簡易な構成で評価することができる Therefore, according to the information processing system of the present embodiment 100, the information processing device 400 and the content presenting device 200 cooperate with each other while rationally sharing the processing, so that the content can be reproduced with a simple configuration. It is possible to evaluate the actions of the evaluation target person performed in response with a simple configuration.

また、本実施形態の情報処理システム１００では、処理制御ユニット２２１が、信号受信部２２３により受信された評価結果に応じて、次に再生するコンテンツを決定する。このため、次に再生するコンテンツの再生内容が、評価結果に応じて動的に変化するので、評価対象者等の利用者の楽しみを増加させることができる。 Further, in the information processing system 100 of the present embodiment, the processing control unit 221 determines the content to be reproduced next according to the evaluation result received by the signal receiving unit 223. Therefore, since the reproduced content of the content to be reproduced next dynamically changes according to the evaluation result, it is possible to increase the enjoyment of the user such as the evaluation target person.

また、本実施形態の情報処理システム１００では、情報処理装置４００から送信される評価の結果の信号形態は、コンテンツ提示装置２００に対応する固有リモコン３００が出力する操作入力信号と同様の信号形態とする。このため、コンテンツ提示装置２００の機種に応じた信号形態を情報処理装置４００に登録することにより、コンテンツ提示装置２００の機種を変更したとしても、コンテンツ提示装置２００に対する大きな改造を加える必要を回避することができる。 Further, in the information processing system 100 of the present embodiment, the signal form of the evaluation result transmitted from the information processing device 400 has the same signal form as the operation input signal output by the unique remote control 300 corresponding to the content presenting device 200. To do. Therefore, by registering the signal form corresponding to the model of the content presentation device 200 in the information processing device 400, even if the model of the content presentation device 200 is changed, it is necessary to make a major modification to the content presentation device 200. be able to.

［実施形態の変形］
本発明は上記の実施形態に限定されるものではなく、様々な変形が可能である。 [Modification of Embodiment]
The present invention is not limited to the above embodiment, and various modifications are possible.

例えば、上記の実施形態では、情報処理装置が手首に装着されるようにしたが、手首以外の所定部位に装着されるようにしてもよい。さらに、ドラムスティックのように手で保持されるようにしてもよい。さらに、情報処理装置がぬいぐるみや据置き型のものであってもよい。要は、情報処理装置が人体の動き等を検知できるものであればよい。また、センサとして、３次元位置を検出する位置センサに代えて、赤外線受信やボールスイッチその他の手段を用いて動きを検知することができる。 For example, in the above embodiment, the information processing device is attached to the wrist, but it may be attached to a predetermined portion other than the wrist. Further, it may be held by hand like a drum stick. Further, the information processing device may be a stuffed animal or a stationary type. In short, the information processing device may be capable of detecting the movement of the human body. Further, as the sensor, instead of the position sensor that detects the three-dimensional position, the movement can be detected by using infrared reception, a ball switch, or other means.

また、上記の実施形態では、音透かし音を非可聴音としたが、音透かし音として可聴音を採用してもよい。 Further, in the above embodiment, the sound watermark sound is set as an inaudible sound, but an audible sound may be adopted as the sound watermark sound.

また、上記の実施形態では、固有リモコンにおける３種のキーに対する信号形態を情報処理装置に登録するようにした。これに対し、固有リモコンにおける任意の数の種類のキーに対する信号形態を情報処理装置に登録するようにしてもよい。さらに、上記の実施形態で示した信号形態の登録対象となる固有リモコンにおけるキーの種類は例示であり、任意の種類のキーに対する信号形態を情報処理装置に登録するようにしてもよい。 Further, in the above embodiment, the signal forms for the three types of keys in the unique remote controller are registered in the information processing device. On the other hand, the signal form for any number of types of keys in the unique remote controller may be registered in the information processing device. Further, the type of the key in the unique remote controller to which the signal form to be registered shown in the above embodiment is registered is an example, and the signal form for any kind of key may be registered in the information processing device.

また、上記の実施形態では、評価対象者の動作が評価対象となるコンテンツについては、動画像及び楽曲音が再生されるようしたが、動画像及び楽曲音の一方のみが再生されるようにしてもよい。 Further, in the above embodiment, the moving image and the music sound are reproduced for the content whose movement is the evaluation target, but only one of the moving image and the music sound is reproduced. May be good.

また、上記の実施形態では、動画像及び楽曲音に合わせて行われるダンス動作を評価するようにしたが、例えば、画面中の鬼の視線から逃げる「かくれんぼ」ゲーム、「縄跳び」ゲーム等のミニゲーム中における評価対象者の動作の評価を併せて行うようにしてもよい。 Further, in the above embodiment, the dance motion performed according to the moving image and the music sound is evaluated, but for example, a mini game such as a "hide and seek" game or a "skipping rope" game that escapes from the line of sight of the demon on the screen. The movement of the evaluation target person in the game may also be evaluated.

また、上記の実施形態では、評価対象者の動作が評価対象となるコンテンツを直接的に選択するようにしたが、複数のコンテンツが順次再生されるストーリ再生中における評価対象者の動作が評価対象となるコンテンツとなった場合に、評価を行うようにしてもよい。 Further, in the above embodiment, the action of the evaluation target person directly selects the content to be evaluated, but the action of the evaluation target person during story playback in which a plurality of contents are sequentially played is the evaluation target. When the content becomes, the evaluation may be performed.

また、上記の実施形態では、情報処理装置からの評価結果の送信を、１回のコンテンツ再生ごとに行うようにした。これに対し、同一のコンテンツに関する評価回数値（或いはセンサからの入力回数）や累積採点値を併せて送信するようにし、当該評価回数値（或いはセンサからの入力（回数）；例えばプレイ回数）又は当該累積採点値が予め定められた基準値に達したときに又は達する度に、それまで再生できなかった特別のコンテンツを自動的に又は利用者の指定により再生できるようにしてもよい。具体的には、チャプタ付きコンテンツにおいて隠しコンテンツ（特別なコンテンツ）を開けるようにしてもよい。
なお、この場合、同一のコンテンツに関する場合だけでなく、特定の範囲のコンテンツに関するものとしてもよいし、コンテンツ全体としもよい。 Further, in the above embodiment, the evaluation result is transmitted from the information processing device for each content reproduction. On the other hand, the evaluation count value (or the number of inputs from the sensor) and the cumulative scoring value for the same content are also transmitted, and the evaluation count value (or the number of inputs (number of times) from the sensor; for example, the number of plays) or When or each time the cumulative scoring value reaches a predetermined reference value, special content that could not be played up to that point may be automatically played back or specified by the user. Specifically, hidden content (special content) may be opened in the content with chapters.
In this case, not only the same content but also a specific range of content may be used, or the entire content may be used.

１００ 情報処理システム
２００ コンテンツ提示装置
２１２ 音出力ユニット（通知情報送信部）
２２１ 処理制御ユニット（処理制御部）
２２３ 信号受信部（評価結果受信部）
３００ 固有リモコン（操作入力部）
４００ 情報処理装置
４２０ 記憶ユニット（記憶部）
４３０ 通知情報受信部（受信部）
４５０ 信号送信部（送信部）
４７５ 加速度センサユニット（位置検出部）
４８０ 処理ユニット（処理部） 100 Information processing system 200 Content presentation device 212 Sound output unit (notification information transmitter)
221 Processing control unit (processing control unit)
223 Signal receiver (evaluation result receiver)
300 Unique remote controller (operation input unit)
400 Information processing device 420 Storage unit (storage unit)
430 Notification information receiver (receiver)
450 Signal transmitter (transmitter)
475 Acceleration sensor unit (position detection unit)
480 processing unit (processing unit)

Claims (8)

通知情報を担った情報音を受信する受信部と、
人体の動きを検出するセンサと、
前記通知情報により指定されるコンテンツの再生の進行に応じて行われるべき前記人体の動作情報が記憶された記憶部と、
計時機構を有する処理部と、を備え、
前記通知情報が、コンテンツを指定したコンテンツ再生開始通知であった場合、前記処理部が、
前記計時機構による計時結果、前記センサによる検出結果、及び、前記記憶部に記憶されている、前記受信部が受信した通知情報において指定されたコンテンツに対応する動作情報に基づいて、前記所定部位の運動の評価を行う、
ことを特徴とする情報処理装置。 A receiver that receives the information sound that carries the notification information,
Sensors that detect the movement of the human body and
A storage unit that stores the motion information of the human body that should be performed according to the progress of playback of the content specified by the notification information, and
It is equipped with a processing unit having a timekeeping mechanism.
When the notification information is a content playback start notification for which content is specified, the processing unit
Based on the timing result by the timing mechanism, the detection result by the sensor, and the operation information corresponding to the content specified in the notification information received by the receiving unit, which is stored in the storage unit, the predetermined portion Evaluate exercise,
An information processing device characterized by this. 前記情報処理装置は前記人体の所定部位の動きに連動して移動可能であり、前記センサは、前記人体の動作情報として前記所定部位の３次元位置を検出する位置センサであることを特徴とする請求項１に記載の情報処理装置。 The information processing device is movable in conjunction with the movement of a predetermined portion of the human body, and the sensor is a position sensor that detects a three-dimensional position of the predetermined portion as motion information of the human body. The information processing device according to claim 1. 前記処理部による制御のもとで、情報を外部へ送信する送信部を更に備え、前記処理部は、前記評価の結果を、前記送信部に送信させる制御を行うことを特徴とする請求項１又は請求項２に記載の情報処理装置。 Claim 1 is characterized in that, under the control of the processing unit, a transmitting unit for transmitting information to the outside is further provided, and the processing unit controls to transmit the evaluation result to the transmitting unit. Alternatively, the information processing device according to claim 2. 前記コンテンツには音コンテンツが含まれることを特徴とする請求項１〜請求項３のいずれか一項に記載の情報処理装置。 The information processing device according to any one of claims 1 to 3, wherein the content includes sound content. 請求項２記載の情報処理装置と、
利用者により指定されたコンテンツを再生して提示するコンテンツ提示装置と、を備え、
前記コンテンツ提示装置は、前記指定されたコンテンツの再生処理を行う処理制御部と、
前記処理制御部による制御のもとで、前記指定されたコンテンツに対応して前記情報処理装置における評価が行われる場合に、前記指定されたコンテンツの再生に先立って、前記指定されたコンテンツを指定したコンテンツ再生開始通知を前記通知情報として、前記情報音の形態で前記情報処理装置へ送信する通知情報送信部と、
を備えることを特徴とする情報処理システム。 The information processing device according to claim 2 and
It is equipped with a content presentation device that reproduces and presents the content specified by the user.
The content presenting device includes a processing control unit that performs playback processing of the designated content, and
When the information processing apparatus evaluates the specified content under the control of the processing control unit, the designated content is designated prior to the reproduction of the designated content. A notification information transmission unit that transmits the content playback start notification to the information processing apparatus in the form of the information sound as the notification information.
An information processing system characterized by being equipped with. 前記コンテンツ提示装置は、前記情報処理装置から送信された評価の結果を受信する評価結果受信部を更に備え、前記処理制御部は、前記評価結果受信部により受信された評価結果に応じて、次に再生するコンテンツを決定することを特徴とする請求項５に記載の情報処理システム。 The content presenting device further includes an evaluation result receiving unit that receives the evaluation result transmitted from the information processing device, and the processing control unit is next according to the evaluation result received by the evaluation result receiving unit. The information processing system according to claim 5, wherein the content to be reproduced is determined. 前記情報処理装置から送信される評価の結果の信号形態は、前記コンテンツ提示装置が固有に備える操作入力部が出力する操作入力信号と同様の信号形態であることを特徴とする請求項６に記載の情報処理システム。 The sixth aspect of claim 6, wherein the signal form of the evaluation result transmitted from the information processing device is the same signal form as the operation input signal output by the operation input unit uniquely provided in the content presenting device. Information processing system. 前記記憶部は、一定期間の間、前記センサからの入力を累積的に記憶すると共に特別なコンテンツの再生の進行に応じて行われるべき前記人体の動作情報を記憶し、前記処理部は、前記センサからの入力の累積値が基準値に達したときに前記特別なコンテンツを再生可能とする再生可能信号を前記送信部に送信させ、前記コンテンツ提示装置は、前記再生可能信号を受信する再生可能信号受信部を更に備え、前記処理制御部は、前記再生可能信号を前記再生信号受信部が受信したとき前記特別なコンテンツの再生処理を可能とすることを特徴とする請求項５〜請求項７のいずれか一項に記載の情報処理システム。 The storage unit cumulatively stores the input from the sensor for a certain period of time, and stores the motion information of the human body that should be performed in response to the progress of reproduction of the special content, and the processing unit stores the operation information of the human body. When the cumulative value of the input from the sensor reaches the reference value, the transmitter is made to transmit a reproducible signal that enables the special content to be reproducible, and the content presenting device receives the reproducible signal. Claims 5 to 7 further include a signal receiving unit, and the processing control unit enables reproduction processing of the special content when the reproduction signal receiving unit receives the reproducible signal. The information processing system according to any one of the above.
JP2019032652A 2019-02-26 2019-02-26 Information processing equipment and information processing system Active JP7347937B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019032652A JP7347937B2 (en) 2019-02-26 2019-02-26 Information processing equipment and information processing system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019032652A JP7347937B2 (en) 2019-02-26 2019-02-26 Information processing equipment and information processing system

Publications (2)

Publication Number Publication Date
JP2020130946A true JP2020130946A (en) 2020-08-31
JP7347937B2 JP7347937B2 (en) 2023-09-20

Family

ID=72277060

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019032652A Active JP7347937B2 (en) 2019-02-26 2019-02-26 Information processing equipment and information processing system

Country Status (1)

Country Link
JP (1) JP7347937B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022025131A1 (en) 2020-07-31 2022-02-03 Tanita Corporation Health level determination system, health level determination program, and health level detemination server

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005205224A (en) * 1999-10-01 2005-08-04 Konami Co Ltd Dance game device, play control method of dance game, and computer-readable recording medium having play control program recorded
JP2017136142A (en) * 2016-02-02 2017-08-10 セイコーエプソン株式会社 Information terminal, motion evaluation system, motion evaluation method, motion evaluation program, and recording medium
JP2017144217A (en) * 2016-02-19 2017-08-24 株式会社コーエーテクモゲームス Game system, game device, information processor, and control program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005205224A (en) * 1999-10-01 2005-08-04 Konami Co Ltd Dance game device, play control method of dance game, and computer-readable recording medium having play control program recorded
JP2017136142A (en) * 2016-02-02 2017-08-10 セイコーエプソン株式会社 Information terminal, motion evaluation system, motion evaluation method, motion evaluation program, and recording medium
JP2017144217A (en) * 2016-02-19 2017-08-24 株式会社コーエーテクモゲームス Game system, game device, information processor, and control program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022025131A1 (en) 2020-07-31 2022-02-03 Tanita Corporation Health level determination system, health level determination program, and health level detemination server

Also Published As

Publication number Publication date
JP7347937B2 (en) 2023-09-20

Similar Documents

Publication Publication Date Title
CN100506151C (en) Movement supporting method and apparatus
JP4307193B2 (en) Program, information storage medium, and game system
US9405363B2 (en) Audio, video, simulation, and user interface paradigms
US8696456B2 (en) Music-based video game with user physical performance
JP4403415B2 (en) Content reproduction method and content reproduction apparatus
JP5792131B2 (en) Game machine, control method used therefor, and computer program
JP2006337505A (en) Musical player and processing control method
JP4206332B2 (en) Input device, game system, program, and information storage medium
KR100708411B1 (en) Apparatus and method for analyzing movement of portable production
JP5731734B2 (en) GAME PROGRAM, GAME DEVICE, GAME SYSTEM, AND GAME PROCESSING METHOD
US20030031062A1 (en) Evaluating program, recording medium thereof, timing evaluating apparatus, and timing evaluating system
WO2007086376A1 (en) Audio reproducing device, audio reproducing method, and audio reproducing program
JP2002000936A (en) Game system and storage medium used therefor
CN109756784A (en) Method for playing music, device, terminal and storage medium
WO2014082986A1 (en) Device for monitoring use accuracy of percussion instruments
JP2011120644A (en) Rotation movement analyzer and program
JP2016221130A (en) Device and program
JP2006255072A (en) Program, information storage medium and game system
JP2020130946A (en) Information processing device and information processing system
CN112791365A (en) Electronic device, evaluation result output method, and recording medium
JP5702585B2 (en) Input determination program, information processing apparatus, system, and information processing method
JP2001232060A (en) Game device and information storage medium
KR101953964B1 (en) A Smart Digital Frame and Contents Providing System Using this
CN115346553A (en) Method and device for detecting user action based on music beat
KR101380159B1 (en) instrument playing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211201

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230320

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230727

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230815

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230907

R150 Certificate of patent or registration of utility model

Ref document number: 7347937

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150