JP5055548B2 - Exercise support apparatus and computer program - Google Patents

Exercise support apparatus and computer program Download PDF

Info

Publication number
JP5055548B2
JP5055548B2 JP2007062236A JP2007062236A JP5055548B2 JP 5055548 B2 JP5055548 B2 JP 5055548B2 JP 2007062236 A JP2007062236 A JP 2007062236A JP 2007062236 A JP2007062236 A JP 2007062236A JP 5055548 B2 JP5055548 B2 JP 5055548B2
Authority
JP
Japan
Prior art keywords
reflector
multimedia processor
vertical
player
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007062236A
Other languages
Japanese (ja)
Other versions
JP2008220582A (en
Inventor
拓 上島
恵一 安村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SSD Co Ltd
Original Assignee
SSD Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SSD Co Ltd filed Critical SSD Co Ltd
Priority to JP2007062236A priority Critical patent/JP5055548B2/en
Publication of JP2008220582A publication Critical patent/JP2008220582A/en
Application granted granted Critical
Publication of JP5055548B2 publication Critical patent/JP5055548B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、足踏み運動を支援する運動支援装置及びその関連技術に関する。   The present invention relates to an exercise support device that supports a stepping exercise and related technology.

特許文献1には、ユーザが左足置き及び右足置きにそれぞれ左足及び右足をおいて、左右交互に足を踏み込むことによって、ユーザに運動を行わせるステッパが開示されている。このようなステッパによる足踏み運動は、単調なものであり、長期間にわたって継続的に行うには、相当の努力を要する。この点、サイクリングマシンによる運動についても同様である。   Patent Document 1 discloses a stepper that allows a user to exercise by placing a left foot and a right foot on a left footrest and a right footrest, respectively, and stepping on the left and right alternately. Such stepping exercise by a stepper is monotonous, and considerable effort is required to perform it continuously over a long period of time. The same applies to exercises by cycling machines.

このため、特許文献2では、サイクリングマシン及びモニタを専用のコンピュータによって結合し、このコンピュータによって、ペダルの動きに応じた映像をモニタに表示させることで、ユーザが、継続的に運動を行えるように支援する運動支援装置を提案している。   For this reason, in Patent Document 2, the cycling machine and the monitor are combined by a dedicated computer, and the computer displays a video according to the movement of the pedal so that the user can continuously exercise. We have proposed an exercise support device to assist.

特開平6−91018号公報JP-A-6-91018 特開2003−205051号公報JP 2003-205051 A

しかしながら、特許文献2の運動支援装置では、サイクリングマシンや専用のコンピュータが必要であり、ユーザは、これらを購入しなければならない。このため、ユーザの経済的負担が大きいばかりでなく、比較的広い設置場所も必要となる。   However, the exercise support device of Patent Document 2 requires a cycling machine and a dedicated computer, and the user must purchase them. For this reason, not only a user's economical burden is large, but a comparatively wide installation place is also required.

そこで、本発明の目的は、ユーザの経済的負担の軽減及び省スペースの実現を図りながらも、足踏み運動の継続を支援できる運動支援装置及びその関連技術を提供することである。   Accordingly, an object of the present invention is to provide an exercise support device and related technology that can support the continuation of the stepping exercise while reducing the economic burden on the user and realizing space saving.

本発明の観点によれば、運動支援装置は、プレイヤに対して足踏みをガイドする映像を生成する映像生成手段と、プレイヤの左足に装着された第1反射体及び右足に装着された第2反射体を撮像する撮像手段と、前記撮像手段による撮像の結果に基づいて、前記第1反射体及び前記第2反射体を検出する検出手段と、前記検出手段による検出の結果に基づいて、前記第1反射体の動き及び前記第2反射体の動きを解析する解析手段と、前記解析手段による解析の結果に応じた情報処理を実行して映像に反映する処理手段と、を備える。   According to an aspect of the present invention, the exercise support device includes an image generation unit that generates an image for guiding a player to step, a first reflector mounted on the player's left foot, and a second reflection mounted on the right foot. An imaging means for imaging a body, a detection means for detecting the first reflector and the second reflector based on a result of imaging by the imaging means, and a result of detection by the detection means. Analyzing means for analyzing the motion of one reflector and the motion of the second reflector, and processing means for executing information processing according to the result of the analysis by the analyzing means and reflecting it in the video.

この構成によれば、足踏みのガイドだけでなく、第1反射体及び第2反射体の動き、つまり、プレイヤの両足の動きが映像に反映されるので、インタラクティブな運動支援装置を提供できる。従って、足踏みに対して反応が返ってくるので、単調な足踏みに面白みを付加でき、その結果、足踏み運動の継続を支援できる。しかも、特別な運動器具は不要であり、第1反射体及び第2反射体を足に装着するだけでよいので、ユーザの経済的負担の軽減及び省スペースを実現できる。   According to this configuration, not only the stepping guide but also the movements of the first reflector and the second reflector, that is, the movements of both feet of the player are reflected in the video, so that an interactive exercise support device can be provided. Therefore, since a response is returned to the stepping, it is possible to add interest to the monotonous stepping, and as a result, it is possible to support the continuation of the stepping exercise. In addition, no special exercise equipment is required, and it is only necessary to attach the first reflector and the second reflector to the foot, so that it is possible to reduce the user's economic burden and save space.

また、第1反射体及び第2反射体をプレイヤが装着して、両足の動きそれぞれを解析するので、片足の動きのみを解析する場合と比較して、より多くの運動課目の提供が可能になる。例えば、片足の動きのみを解析する場合、ステップの検知は可能であるがジャンプの検知ができない。一方、両足の動きを解析する場合は、ステップだけでなく、ジャンプの検知が可能である。それ故、プレイヤにジャンプさせる課目を加えることができる。   In addition, since the player wears the first reflector and the second reflector and analyzes the movements of both feet, it is possible to provide more exercise items compared to the case of analyzing only the movement of one foot. Become. For example, when analyzing only the movement of one leg, it is possible to detect a step but not a jump. On the other hand, when analyzing the movements of both feet, it is possible to detect not only steps but also jumps. Therefore, it is possible to add an item that causes the player to jump.

上記運動支援装置において、前記映像生成手段は、前記プレイヤに対してジャンプすることをガイドする映像を生成する。   In the exercise support apparatus, the video generation means generates a video that guides the player to jump.

上記運動支援装置において、前記第1反射体及び前記第2反射体は、受けた光を再帰反射する。   In the exercise support apparatus, the first reflector and the second reflector retroreflect the received light.

上記運動支援装置において、光を間欠的に発光する発光手段をさらに備え、前記撮像手段は、前記第1反射体及び前記第2反射体を前記発光手段の発光時と消灯時とに撮像し、前記検出手段は、発光時の撮像により得られた画像と消灯時の撮像により得られた画像との差分に基づいて、前記第1反射体及び前記第2反射体を検出する。   The exercise support apparatus further includes a light emitting unit that intermittently emits light, and the imaging unit images the first reflector and the second reflector when the light emitting unit emits light and when the light turns off. The detection means detects the first reflector and the second reflector based on a difference between an image obtained by imaging at the time of light emission and an image obtained by imaging at the time of extinction.

上記運動支援装置において、前記撮像手段は、前記プレイヤの左膝の直下に装着された前記第1反射体を撮像し、かつ、前記プレイヤの右膝の直下に装着された前記第2反射体を撮像する。   In the exercise support apparatus, the imaging unit images the first reflector mounted immediately below the player's left knee, and the second reflector mounted directly below the player's right knee. Take an image.

この構成によれば、撮像手段を床面に載置した場合において、プレイヤが足踏みをしたときに、どの状態においても第1反射体及び第2反射体をより確実に撮像することが可能になる。   According to this configuration, when the imaging unit is placed on the floor surface, the first reflector and the second reflector can be more reliably imaged in any state when the player steps on. .

図1は、本発明の実施の形態による運動支援システムの全体構成を示す図である。図1に示すように、この運動支援システムは、プレイヤ100の左右の足に装着される入力装置5、撮像ユニット17を搭載したカートリッジ1、キャンセルキー28を有するアダプタ3、及びテレビジョンモニタ7を備える。アダプタ3には、カートリッジ1が電気的に装着される。また、アダプタ3は、AVケーブル9により、テレビジョンモニタ7に接続される。   FIG. 1 is a diagram showing an overall configuration of an exercise support system according to an embodiment of the present invention. As shown in FIG. 1, this exercise support system includes an input device 5 to be worn on the left and right feet of a player 100, a cartridge 1 having an imaging unit 17, an adapter 3 having a cancel key 28, and a television monitor 7. Prepare. The cartridge 1 is electrically attached to the adapter 3. The adapter 3 is connected to the television monitor 7 by an AV cable 9.

図2は、図1のカートリッジ1の斜視図である。図2に示すように、カートリッジ1は、平たい直方体状の本体および撮像ユニット17からなる。カートリッジ1の本体上面には、撮像ユニット17が取付けられる。この場合、撮像ユニット17の表面が、カートリッジ1の表面に対して所定角度(例えば40度)傾斜するように取り付けられる。撮像ユニット17の表面中央部には、円形の赤外線フィルタ13が取り付けられ、それを取り囲むように、4個の赤外発光ダイオード15が配置される。赤外線フィルタ13の背面側に後述のイメージセンサ32が配置される。   FIG. 2 is a perspective view of the cartridge 1 of FIG. As shown in FIG. 2, the cartridge 1 includes a flat rectangular parallelepiped main body and an imaging unit 17. An imaging unit 17 is attached to the upper surface of the main body of the cartridge 1. In this case, the imaging unit 17 is attached so that the surface thereof is inclined at a predetermined angle (for example, 40 degrees) with respect to the surface of the cartridge 1. A circular infrared filter 13 is attached to the center of the surface of the imaging unit 17, and four infrared light emitting diodes 15 are arranged so as to surround it. An image sensor 32 described later is disposed on the back side of the infrared filter 13.

図3は、図1の入力装置5の装着状態を示す図である。図3に示すように、入力装置5は、帯状のものであり、例えば、ナイロン製である。また、入力装置5には、矩形状の再帰反射シート11が取り付けられる。プレイヤ100は、膝の直下に入力装置5を装着する。この場合、再帰反射シート11が撮像ユニット17の方を向くように装着する。入力装置5には、ベルクロ(登録商標)テープが取り付けられているので、これにより、プレイヤは容易に装着することができる。なお、カートリッジ1を装着したアダプタ3は、再帰反射シート11が撮像ユニット17の撮像範囲内に入る位置に載置される。   FIG. 3 is a diagram illustrating a mounting state of the input device 5 of FIG. As shown in FIG. 3, the input device 5 has a belt shape, and is made of, for example, nylon. A rectangular retroreflective sheet 11 is attached to the input device 5. The player 100 wears the input device 5 directly below the knee. In this case, the retroreflective sheet 11 is mounted so as to face the imaging unit 17. Since a Velcro (registered trademark) tape is attached to the input device 5, the player can easily wear it. The adapter 3 to which the cartridge 1 is attached is placed at a position where the retroreflective sheet 11 falls within the imaging range of the imaging unit 17.

図4は、図1のカートリッジ1の電気的構成を示す図である。図4に示すように、カートリッジ1は、マルチメディアプロセッサ21、イメージセンサ32、赤外発光ダイオード15、外部メモリ23、EEPROM(electrically erasable programmable read only memory)27、RTC(real time clock)29、及びバス25を含む。   FIG. 4 is a diagram showing an electrical configuration of the cartridge 1 of FIG. 4, the cartridge 1 includes a multimedia processor 21, an image sensor 32, an infrared light emitting diode 15, an external memory 23, an EEPROM (electrically erasable programmable only memory) 27, an RTC (real time clock) 29, and A bus 25 is included.

マルチメディアプロセッサ21は、バス25を通じて、外部メモリ23にアクセスできる。従って、マルチメディアプロセッサ21は、外部メモリ23に格納されたプログラムを実行でき、また、外部メモリ23に格納されたデータをリードして処理することができる。この外部メモリ23に、後述のフローチャートで示される各処理を行うプログラム、画像データ、及び音声データ等が予め格納される。なお、外部メモリ23は、ROM、RAM、及び/又はフラッシュメモリなど、システムの仕様に応じて、必要なものを備える。   The multimedia processor 21 can access the external memory 23 through the bus 25. Therefore, the multimedia processor 21 can execute a program stored in the external memory 23 and can read and process data stored in the external memory 23. In the external memory 23, a program for performing each process shown in a flowchart described later, image data, audio data, and the like are stored in advance. Note that the external memory 23 includes necessary components such as a ROM, a RAM, and / or a flash memory according to the system specifications.

マルチメディアプロセッサ21は、図示しないが、中央演算処理装置(以下、「CPU」と呼ぶ。)、グラフィックスプロセシングユニット(以下、「GPU」と呼ぶ。)、サウンドプロセシングユニット(以下、「SPU」と呼ぶ。)、ジオメトリエンジン(以下、「GE」と呼ぶ。)、外部インタフェースブロック、メインRAM、及びA/Dコンバータ(以下、「ADC」と呼ぶ。)などを具備する。   Although not shown, the multimedia processor 21 is a central processing unit (hereinafter referred to as “CPU”), a graphics processing unit (hereinafter referred to as “GPU”), a sound processing unit (hereinafter referred to as “SPU”). ), A geometry engine (hereinafter referred to as “GE”), an external interface block, a main RAM, an A / D converter (hereinafter referred to as “ADC”), and the like.

CPUは、外部メモリ23に格納されたプログラムを実行して、各種演算やシステム全体の制御を行う。グラフィックス処理に関するCPUの処理として、外部メモリ23に格納されたプログラムを実行して、各オブジェクトの拡大・縮小、回転、及び/又は平行移動のパラメータ、視点座標(カメラ座標)、並びに視線ベクトルの算出等を行う。ここで、1または複数のポリゴン又はスプライトから構成され、同じ拡大・縮小、回転、及び平行移動の変換が適用される単位を「オブジェクト」と呼ぶ。   The CPU executes programs stored in the external memory 23 to perform various calculations and control of the entire system. As processing of the CPU related to the graphics processing, a program stored in the external memory 23 is executed, and parameters for enlargement / reduction, rotation, and / or translation of each object, viewpoint coordinates (camera coordinates), and line-of-sight vector are calculated. Perform calculations. Here, a unit composed of one or a plurality of polygons or sprites and applied with the same transformation of enlargement / reduction, rotation, and translation is referred to as an “object”.

GPUは、ポリゴン及びスプライトから構成される三次元イメージをリアルタイムに生成し、アナログのコンポジットビデオ信号に変換する。SPUは、PCM(pulse code modulation)波形データ、アンプリチュードデータ、及びメインボリュームデータを生成し、これらをアナログ乗算して、アナログオーディオ信号を生成する。GEは、三次元イメージを表示するための幾何演算を実行する。具体的には、GEは、行列積、ベクトルアフィン変換、ベクトル直交変換、透視投影変換、頂点明度/ポリゴン明度計算(ベクトル内積)、及びポリゴン裏面カリング処理(ベクトル外積)などの演算を実行する。   The GPU generates a three-dimensional image composed of polygons and sprites in real time and converts it into an analog composite video signal. The SPU generates PCM (pulse code modulation) waveform data, amplitude data, and main volume data, and analog-multiplies them to generate an analog audio signal. The GE performs a geometric operation for displaying a three-dimensional image. Specifically, the GE performs operations such as matrix product, vector affine transformation, vector orthogonal transformation, perspective projection transformation, vertex brightness / polygon brightness calculation (vector inner product), and polygon back surface culling processing (vector outer product).

外部インタフェースブロックは、周辺装置(本実施の形態ではイメージセンサ32、赤外発光ダイオード15、EEPROM27、及びRTC29)とのインタフェースであり、24チャンネルのプログラマブルなデジタル入出力(I/O)ポートを含む。ADCは、4チャンネルのアナログ入力ポートに接続され、これらを介して、アナログ入力装置(本実施の形態ではイメージセンサ32)から入力されたアナログ信号をデジタル信号に変換する。メインRAMは、CPUのワーク領域、変数格納領域、および仮想記憶機構管理領域等として利用される。   The external interface block is an interface with peripheral devices (in this embodiment, the image sensor 32, the infrared light emitting diode 15, the EEPROM 27, and the RTC 29), and includes a 24-channel programmable digital input / output (I / O) port. . The ADC is connected to four-channel analog input ports, and converts analog signals input from the analog input device (in this embodiment, the image sensor 32) into digital signals via these ADCs. The main RAM is used as a CPU work area, a variable storage area, a virtual storage mechanism management area, and the like.

マルチメディアプロセッサ21は、ストロボ撮影を行うべく、4つの赤外発光ダイオード15を間欠的に駆動し、間欠的に赤外光を発光させる。赤外発光ダイオード15からの赤外光は、入力装置5に取り付けられた再帰反射シート11により反射され、赤外線フィルタ13を介してイメージセンサ32に入力される。したがって、イメージセンサ32からは再帰反射シート11を含む画像信号(赤外光点灯時)がマルチメディアプロセッサ21へ出力される。赤外発光ダイオード15は間欠的に駆動されるので、イメージセンサ32からは赤外光消灯時の画像信号も出力される。   The multimedia processor 21 intermittently drives the four infrared light emitting diodes 15 to perform strobe shooting, and intermittently emits infrared light. Infrared light from the infrared light emitting diode 15 is reflected by the retroreflective sheet 11 attached to the input device 5 and input to the image sensor 32 through the infrared filter 13. Therefore, the image sensor 32 outputs an image signal including the retroreflective sheet 11 (when the infrared light is lit) to the multimedia processor 21. Since the infrared light emitting diode 15 is driven intermittently, the image sensor 32 also outputs an image signal when the infrared light is turned off.

イメージセンサ32からのこれらのアナログ画像信号はマルチメディアプロセッサ21に内蔵されたADCによってデジタル画像信号に変換される。マルチメディアプロセッサ21は、赤外光点灯時のデジタル画像信号と消灯時のデジタル画像信号との差分を求めて、この差分信号DI(差分画像DI)を基に、再帰反射シート11を検出し、その動きを解析する。このように、差分を求めることで、再帰反射シート11からの反射光以外の光によるノイズを極力除去でき、精度良く再帰反射シート11を検出できる。   These analog image signals from the image sensor 32 are converted into digital image signals by an ADC built in the multimedia processor 21. The multimedia processor 21 obtains the difference between the digital image signal when the infrared light is turned on and the digital image signal when the infrared light is turned off, detects the retroreflective sheet 11 based on the difference signal DI (difference image DI), Analyze the movement. Thus, by obtaining the difference, noise due to light other than the reflected light from the retroreflective sheet 11 can be removed as much as possible, and the retroreflective sheet 11 can be detected with high accuracy.

マルチメディアプロセッサ21は、再帰反射シート11の動きの解析結果に基づいて、その他の演算、グラフィック処理、及びサウンド処理等を実行し、ビデオ信号VDおよびオーディオ信号AUを出力する。マルチメディアプロセッサ21が生成したビデオ信号VDおよびオーディオ信号AUは、アダプタ3及びAVケーブル9を介して、テレビジョンモニタ7に与えられ、応じて、テレビジョンモニタ7に映像が表示され、そのスピーカ(図示せず)から音声が出力される。なお、アダプタ3は、マルチメディアプロセッサ21が生成したビデオ信号VDをそのままAVケーブル9に与え、また、オーディオ信号AUを増幅してAVケーブル9に与える。   Based on the analysis result of the movement of the retroreflective sheet 11, the multimedia processor 21 performs other operations, graphic processing, sound processing, and the like, and outputs a video signal VD and an audio signal AU. The video signal VD and the audio signal AU generated by the multimedia processor 21 are given to the television monitor 7 via the adapter 3 and the AV cable 9, and accordingly, an image is displayed on the television monitor 7, and the speaker ( Audio is output from (not shown). The adapter 3 supplies the video signal VD generated by the multimedia processor 21 to the AV cable 9 as it is, and also amplifies the audio signal AU and supplies it to the AV cable 9.

EEPROM27は、マルチメディアプロセッサ21の外部インタフェースブロックに接続され、データの読み書きが行われる。RTC29は、水晶発信器(図示せず)に基づいて計時を行い、時刻情報を生成して、マルチメディアプロセッサ21に与える。   The EEPROM 27 is connected to the external interface block of the multimedia processor 21 and reads / writes data. The RTC 29 measures time based on a crystal oscillator (not shown), generates time information, and provides the time information to the multimedia processor 21.

図5は、図1のテレビジョンモニタ7に表示される運動支援画面の例示図である。図5を参照して、この運動支援画面は、その日のトータル運動時間を表示する時間表示部31、その日のトータルカロリーを表示するカロリー表示部33、その日のトータルステップ数を表示するステップ表示部35、この運動支援画面によりガイドされる運動課目の経過時間を表示する時間表示部41、これまでのスコアの最高値を表示するハイスコア表示部43、スコアを表示するスコア表示部45、プレイヤ100の動きに応じて、水平方向に移動する操作オブジェクト(図では籠の形態)47、及び、レーン51に沿って画面上端から下端に向かって下降する移動オブジェクト(図では果物の形態)49を含む。なお、レーン51は、実際には表示されない。   FIG. 5 is a view showing an example of an exercise support screen displayed on the television monitor 7 of FIG. Referring to FIG. 5, this exercise support screen includes a time display unit 31 that displays the total exercise time of the day, a calorie display unit 33 that displays the total calorie of the day, and a step display unit 35 that displays the total number of steps of the day. The time display unit 41 that displays the elapsed time of the exercise section guided by the exercise support screen, the high score display unit 43 that displays the highest score so far, the score display unit 45 that displays the score, and the player 100 An operation object 47 that moves in the horizontal direction according to the movement (in the figure, a cocoon form) 47 and a movement object 49 that moves down from the upper end of the screen toward the lower end along the lane 51 (a form of fruit) 49 are included. Note that the lane 51 is not actually displayed.

マルチメディアプロセッサ21は、プレイヤ100のジャンプを検知すると、ジャンプした方向(左又は右)に応じた方向(左又は右)に、操作オブジェクト47を移動させる。従って、プレイヤ100は、ジャンプをして操作オブジェクト47を操作して、下降してくる移動オブジェクト49をタイミング良くキャッチすることを試みる。マルチメディアプロセッサ21は、操作オブジェクト47の上端を中心に上下の一定範囲内に移動オブジェクト49が位置すればキャッチ成功と判定する。マルチメディアプロセッサ21は、キャッチ成功のときは、ポイントを付与し、スコア表示部45のポイントに積算する。マルチメディアプロセッサ21は、時間表示部41に表示された時間が所定時間に到達するまで、移動オブジェクト49を次々に出現させ下降させる。   When the multimedia processor 21 detects a jump of the player 100, the multimedia processor 21 moves the operation object 47 in a direction (left or right) corresponding to the jumped direction (left or right). Therefore, the player 100 jumps and operates the operation object 47 to try to catch the moving object 49 that descends with good timing. The multimedia processor 21 determines that the catch is successful if the moving object 49 is located within a certain range above and below the upper end of the operation object 47. The multimedia processor 21 gives points and accumulates the points on the score display unit 45 when the catch is successful. The multimedia processor 21 causes the moving objects 49 to appear and descend one after another until the time displayed on the time display unit 41 reaches a predetermined time.

ここで、本実施の形態において、プレイヤが行うステップとは、プレイヤ100が、床に置いた一方の足を上げ、それを下げて、再び床に置く動作のことである。従って、左右交互のステップの繰り返しが足踏みに相当する。一回のジャンプは、2ステップと換算されて、ステップ表示部35に積算される。また、ステップ数と、前もってプレイヤ100によって入力された身長及び体重と、あらかじめ記憶されている消費カロリー計算式とを用いて、プレイヤ100の消費カロリーが算出され、カロリー表示部33に積算される。さらに、プレイヤ100が運動を行っている時間が計測され、時間表示部31に積算される。   Here, in the present embodiment, the step performed by the player is an operation in which the player 100 raises one leg placed on the floor, lowers it, and places it again on the floor. Therefore, the repetition of the left and right alternating steps corresponds to stepping. One jump is converted into two steps and accumulated in the step display unit 35. Further, the calorie consumption of the player 100 is calculated using the number of steps, the height and weight input by the player 100 in advance, and the calorie consumption calculation formula stored in advance, and accumulated in the calorie display unit 33. Further, the time during which the player 100 is exercising is measured and accumulated in the time display unit 31.

図6は、図1のテレビジョンモニタ7に表示される運動支援画面の他の例示図である。図6を参照して、この運動支援画面は、時間表示部31、カロリー表示部33、ステップ表示部35、この運動支援画面によりガイドされる運動課目の残り時間を表示する時間表示部37、及び、この運動支援画面によりガイドされる運動課目でのステップ数を表示するステップ表示部39を含む。   FIG. 6 is another exemplary view of an exercise support screen displayed on the television monitor 7 of FIG. Referring to FIG. 6, this exercise support screen includes a time display unit 31, a calorie display unit 33, a step display unit 35, a time display unit 37 for displaying the remaining time of the exercise section guided by the exercise support screen, and A step display unit 39 for displaying the number of steps in the exercise section guided by the exercise support screen is included.

マルチメディアプロセッサ21は、10秒からのカウントダウンを行い、時間表示部37に表示する。プレイヤ100は、できるだけ速く足踏みすることを試みる。マルチメディアプロセッサ21は、プレイヤ100の足踏みを検知して、ステップ数をステップ表示部39に表示する。最終的に、ステップ表示部39には、10秒間で行われたプレイヤ100のステップ数が表示される。   The multimedia processor 21 counts down from 10 seconds and displays it on the time display unit 37. The player 100 tries to step on as fast as possible. The multimedia processor 21 detects the stepping of the player 100 and displays the number of steps on the step display unit 39. Finally, the step display unit 39 displays the number of steps of the player 100 performed for 10 seconds.

図7は、図1のテレビジョンモニタ7に表示される運動支援画面のさらに他の例示図である。図7を参照して、この運動支援画面は、時間表示部31、カロリー表示部33、ステップ表示部35、プレイヤ100のジャンプに応答してジャンプするプレイヤキャラクタ61、プレイヤキャラクタ61が行う縄跳びの縄63、縄跳びのトータル成功回数を表示するトータル回数表示部57、縄跳びの連続成功回数を表示する連続回数表示部59、この運動支援画面によりガイドされる運動課目の経過時間を表示する時間表示部53、及び、これまでのトータル成功回数の最高値を表示するベストレコード表示部55を含む。   FIG. 7 is a view showing still another example of the exercise support screen displayed on the television monitor 7 of FIG. Referring to FIG. 7, this exercise support screen includes a time display unit 31, a calorie display unit 33, a step display unit 35, a player character 61 that jumps in response to a jump of the player 100, and a rope skipping rope performed by the player character 61. 63, a total number display unit 57 for displaying the total number of successful jumping ropes, a continuous number display unit 59 for displaying the number of consecutive successful jumping ropes, and a time display unit 53 for displaying the elapsed time of the exercise section guided by the exercise support screen. And the best record display part 55 which displays the highest value of the total number of times until now is included.

マルチメディアプロセッサ21は、プレイヤ100のジャンプを検知すると、プレイヤキャラクタ61をジャンプさせる。また、マルチメディアプロセッサ21は、あたかも縄跳びの縄が回っているかの如く縄63を回転させる。そして、マルチメディアプロセッサ21は、縄63が最下点を中心とした一定範囲内に位置するときに、プレイヤキャラクタ61がジャンプすると、プレイヤキャラクタ61が縄63の上を巧く跳んだ映像を表示する。しかし、マルチメディアプロセッサ21は、それ以外のタイミングでプレイヤキャラクタ61がジャンプすると、縄跳びを失敗した映像を表示する。   When the multimedia processor 21 detects a jump of the player 100, the multimedia processor 21 causes the player character 61 to jump. In addition, the multimedia processor 21 rotates the rope 63 as if a skipping rope is turning. Then, when the player character 61 jumps when the rope 63 is located within a certain range centered on the lowest point, the multimedia processor 21 displays an image in which the player character 61 skillfully jumps over the rope 63. To do. However, if the player character 61 jumps at other timings, the multimedia processor 21 displays an image in which the skipping rope has failed.

以上のように、プレイヤ100のジャンプに同期してプレイヤキャラクタ61がジャンプするので、プレイヤ100は、縄63が最下点に到達するタイミングでジャンプして、プレイヤキャラクタ61をジャンプさせなければならない。マルチメディアプロセッサ21は、プレイヤキャラクタ61が行う縄跳びの連続成功回数を連続回数表示部59に表示し、この運動課目における、プレイヤキャラクタ61が行う縄跳びのトータル成功回数をトータル回数表示部57に表示する。マルチメディアプロセッサ21は、時間表示部53が表示する時間が所定時間に到達するまで、上記の処理を繰り返す。   As described above, since the player character 61 jumps in synchronization with the jump of the player 100, the player 100 must jump at the timing when the rope 63 reaches the lowest point to cause the player character 61 to jump. The multimedia processor 21 displays the continuous success number of jumping ropes performed by the player character 61 on the continuous number display unit 59, and displays the total successful number of jumping ropes performed by the player character 61 in this exercise section on the total number display unit 57. . The multimedia processor 21 repeats the above processing until the time displayed by the time display unit 53 reaches a predetermined time.

図8は、図1のテレビジョンモニタ7に表示される運動支援画面のさらに他の例示図である。図8を参照して、この運動支援画面は、時間表示部31、カロリー表示部33、ステップ表示部35、評価表示部65、左マーク69L、右マーク69R、及び音楽が全体のどのくらいまで進んだかを示すゲージ67を含む。左マーク69L及び右マーク69Rを包括してマーク69と表記する。   FIG. 8 is still another example of an exercise support screen displayed on the television monitor 7 of FIG. Referring to FIG. 8, this exercise support screen has a time display unit 31, a calorie display unit 33, a step display unit 35, an evaluation display unit 65, a left mark 69L, a right mark 69R, and how far the music has progressed. A gauge 67 is included. The left mark 69L and the right mark 69R are collectively referred to as a mark 69.

マルチメディアプロセッサ21は、音楽を再生する。この場合、マルチメディアプロセッサ21は、マーク69を囲む大きな輪71を表示し、この輪71をマーク69に向かって収縮させる。プレイヤ100は、輪71がマーク69の縁に重なるタイミングで、そのマーク69が示す足でステップすることを試みる。この場合、左マーク69Lは、左足によるステップを示し、右マーク69Rは、右足によるステップを示す。   The multimedia processor 21 reproduces music. In this case, the multimedia processor 21 displays a large ring 71 surrounding the mark 69 and contracts the ring 71 toward the mark 69. The player 100 tries to step with the foot indicated by the mark 69 at the timing when the wheel 71 overlaps the edge of the mark 69. In this case, the left mark 69L indicates a step with the left foot, and the right mark 69R indicates a step with the right foot.

マルチメディアプロセッサ21は、マーク69の縁(円)を中心とした第1所定範囲に輪71が位置する時に、マーク69が示す足のステップを検知したときは、「エクセレント」評価を与え、第1所定範囲を中心とした第2所定範囲に輪71が位置する時に、マーク69が示す足のステップを検知したときは、「グッド」評価を与える。マルチメディアプロセッサ21は、それぞれの評価の回数を評価表示部65に表示する。   The multimedia processor 21 gives an “excellent” evaluation when it detects the step of the foot indicated by the mark 69 when the wheel 71 is located in the first predetermined range centered on the edge (circle) of the mark 69, When the wheel 71 is located in the second predetermined range centered on one predetermined range and the step of the foot indicated by the mark 69 is detected, a “good” evaluation is given. The multimedia processor 21 displays the number of evaluations on the evaluation display unit 65.

マルチメディアプロセッサ21は、輪71がマーク69の縁(円)に到達するタイミングでプレイヤ100が対応する足のステップを行うと、音楽に合った足踏みができるように、輪71を出現させる。マルチメディアプロセッサ21は、音楽が終了するまで、上記の処理を繰り返す。   When the player 100 performs the corresponding foot step at the timing when the wheel 71 reaches the edge (circle) of the mark 69, the multimedia processor 21 causes the wheel 71 to appear so that the player can step on the music. The multimedia processor 21 repeats the above processing until the music ends.

図9は、図1のテレビジョンモニタ7に表示される運動支援画面のさらに他の例示図である。図9を参照して、この運動支援画面は、時間表示部31、カロリー表示部33、ステップ表示部35、失敗ライン73、及び移動オブジェクトグループ75を含む。移動オブジェクトグループ75は、水平方向に並んだ複数のマーク77を含む。マーク77の種類として、左足のステップを指示するマーク77L、右足のステップを指示するマーク77R(図示せず)、及びジャンプすることを指示するマーク77Jが用意される。図の例では、移動オブジェクトグループ75は、水平方向に並んだ3個のマーク77L,77L,77Jを含む。   FIG. 9 is still another example of an exercise support screen displayed on the television monitor 7 of FIG. Referring to FIG. 9, the exercise support screen includes a time display unit 31, a calorie display unit 33, a step display unit 35, a failure line 73, and a moving object group 75. The moving object group 75 includes a plurality of marks 77 arranged in the horizontal direction. As types of the mark 77, a mark 77L for instructing the step of the left foot, a mark 77R (not shown) for instructing the step of the right foot, and a mark 77J instructing to jump are prepared. In the illustrated example, the moving object group 75 includes three marks 77L, 77L, and 77J arranged in the horizontal direction.

マルチメディアプロセッサ21は、移動オブジェクトグループ75を上から下に失敗ライン73に向かって移動させる。そして、マルチメディアプロセッサ21は、移動オブジェクトグループ75が失敗ラインに到達したら失敗と判断し、この課目を終了する。一方、マルチメディアプロセッサ21は、移動オブジェクトグループ75が失敗ライン73に到達する前に、移動オブジェクトグループ75に含まれるマーク77が示す動作を左から順番にプレイヤ100が行ったことを検知すると、成功と判断し、その移動オブジェクトグループ75を消滅させる。成功と判断した場合は、マルチメディアプロセッサ21は、マーク77を1つ増やした移動オブジェクトグループ75を出現させ、失敗ライン73に向かって下降させる。なお、移動オブジェクトグループ75において、複数行にわたるマークを表示することも可能である。図では1行3個の例である。   The multimedia processor 21 moves the moving object group 75 from the top to the bottom toward the failure line 73. Then, when the moving object group 75 reaches the failure line, the multimedia processor 21 determines that the failure has occurred and ends this item. On the other hand, when the multimedia processor 21 detects that the player 100 has performed the action indicated by the mark 77 included in the moving object group 75 in order from the left before the moving object group 75 reaches the failure line 73, the multimedia processor 21 succeeds. The moving object group 75 is extinguished. If it is determined to be successful, the multimedia processor 21 causes the moving object group 75 with one mark 77 added to appear and moves down toward the failure line 73. In the moving object group 75, a mark extending over a plurality of lines can be displayed. In the figure, there are three examples in one row.

マルチメディアプロセッサ21は、プレイヤ100がマーク77が示す動作を左から順番に行わなかったことを検知した場合は未達成と判断し、移動オブジェクトグループ75の下降を継続する。マルチメディアプロセッサ21は、未達成と判断した場合は、プレイヤ100が再び左から順番に動作を行うまで、成功とは判断しない。   If the multimedia processor 21 detects that the player 100 has not performed the action indicated by the mark 77 in order from the left, the multimedia processor 21 determines that it has not been achieved, and continues to lower the moving object group 75. If the multimedia processor 21 determines that it has not been achieved, the multimedia processor 21 does not determine that the player 100 has succeeded until the player 100 performs an action in order from the left again.

図10は、図4のマルチメディアプロセッサ21による全体処理の流れの一例を示すフローチャートである。図10に示すように、ステップS1にて、マルチメディアプロセッサ21は、各種変数(フラグやカウンタを含む。)の初期化等、システムの初期設定を実行する。ステップS3にて、マルチメディアプロセッサ21は、外部メモリ23に格納されたアプリケーションプログラムに従った処理を実行する。ステップS5にて、マルチメディアプロセッサ21は、ビデオ同期信号による割り込みが発生するまで待機する。つまり、マルチメディアプロセッサ21は、ビデオ同期信号による割り込みが発生していない場合は、同じステップS5に戻り、ビデオ同期信号による割り込みが発生した場合は、ステップS7に進む。例えば、ビデオ同期信号による割り込みは、1/60秒ごとに発生する。この割り込みに同期して、ステップS7及びステップS9にて、マルチメディアプロセッサ21は、テレビジョンモニタ7に表示する画像を更新すると共に、音声の再生を行う。そして、マルチメディアプロセッサ21は、ステップS3に戻る。   FIG. 10 is a flowchart showing an example of the overall processing flow by the multimedia processor 21 of FIG. As shown in FIG. 10, in step S1, the multimedia processor 21 performs initial setting of the system such as initialization of various variables (including flags and counters). In step S <b> 3, the multimedia processor 21 executes processing according to the application program stored in the external memory 23. In step S5, the multimedia processor 21 stands by until an interrupt due to the video synchronization signal occurs. That is, the multimedia processor 21 returns to the same step S5 when the interrupt due to the video synchronization signal has not occurred, and proceeds to step S7 when the interrupt due to the video synchronization signal has occurred. For example, the interruption by the video synchronization signal occurs every 1/60 seconds. In synchronization with this interruption, in step S7 and step S9, the multimedia processor 21 updates the image displayed on the television monitor 7 and reproduces the sound. Then, the multimedia processor 21 returns to step S3.

ステップS3の処理を制御するアプリケーションプログラムは、複数のプログラムを含む。この複数のプログラムに、再帰反射シート11の撮影処理を実行するためのプログラム、撮影画像上の再帰反射シート11の注目点の抽出処理を実行するためのプログラム、検出された2つの注目点に左右を割り当てる左右決定処理を実行するためのプログラム、プレイヤ100がステップを行ったか否かを判定するプログラム、プレイヤ100がジャンプを行ったか否かを判定するプログラム、及び運動支援画面を生成するためのプログラム等が含まれる。以下、これらの処理をフローチャートを用いて説明する。   The application program that controls the processing in step S3 includes a plurality of programs. A program for executing the photographing process of the retroreflective sheet 11, a program for executing a process of extracting the attention point of the retroreflective sheet 11 on the photographed image, and two detected attention points , A program for determining whether or not the player 100 has performed a step, a program for determining whether or not the player 100 has performed a jump, and a program for generating an exercise support screen Etc. are included. Hereinafter, these processes will be described with reference to flowcharts.

図11は、図10のステップS3のアプリケーションプログラムが実行する処理の1つである撮影処理の流れを示すフローチャートである。図11に示すように、ステップS21において、マルチメディアプロセッサ21は、赤外発光ダイオード15を点灯する。ステップS23で、マルチメディアプロセッサ21は、イメージセンサ32から、赤外光点灯時の画像データを取得して、メインRAMに格納する。   FIG. 11 is a flowchart showing the flow of a photographing process which is one of the processes executed by the application program in step S3 of FIG. As shown in FIG. 11, in step S <b> 21, the multimedia processor 21 lights up the infrared light emitting diode 15. In step S23, the multimedia processor 21 acquires image data when the infrared light is lit from the image sensor 32, and stores it in the main RAM.

ここで、本実施の形態では、イメージセンサ32の例として、32ピクセル×32ピクセルのCMOSイメージセンサを使用する。従って、イメージセンサ32からは、画像データとして、32ピクセル×32ピクセルのピクセルデータが出力される。このピクセルデータは、A/Dコンバータにより、デジタルデータに変換されて、メインRAM上の二次元配列P1[X][Y]の要素として格納される。   Here, in the present embodiment, a CMOS image sensor of 32 pixels × 32 pixels is used as an example of the image sensor 32. Therefore, pixel data of 32 pixels × 32 pixels is output from the image sensor 32 as image data. This pixel data is converted into digital data by an A / D converter and stored as an element of a two-dimensional array P1 [X] [Y] on the main RAM.

ステップS25で、マルチメディアプロセッサ21は、赤外発光ダイオード15を消灯する。ステップS27にて、マルチメディアプロセッサ21は、イメージセンサ32から、赤外光消灯時の画像データ(32ピクセル×32ピクセルのピクセルデータ)を取得して、メインRAMに格納する。この場合、このピクセルデータは、メインRAM上の二次元配列P2[X][Y]の要素として格納される。   In step S25, the multimedia processor 21 turns off the infrared light emitting diode 15. In step S27, the multimedia processor 21 acquires image data (32 pixel × 32 pixel data) when the infrared light is extinguished from the image sensor 32, and stores it in the main RAM. In this case, the pixel data is stored as an element of a two-dimensional array P2 [X] [Y] on the main RAM.

以上のようにして、ストロボ撮影が行われる。ここで、イメージセンサ32による画像を構成する各ピクセルの位置を表す二次元座標系では、水平方向をX軸、垂直方向をY軸とする。また、原点Oを画像の左上角とする。本実施の形態では、32ピクセル×32ピクセルのイメージセンサ32を用いているため、X=0〜31、Y=0〜31である。この点、差分画像DIについても同じである。また、ピクセルデータは輝度値である。   The flash photography is performed as described above. Here, in the two-dimensional coordinate system representing the position of each pixel constituting the image by the image sensor 32, the horizontal direction is the X axis and the vertical direction is the Y axis. The origin O is the upper left corner of the image. In this embodiment, since the image sensor 32 of 32 pixels × 32 pixels is used, X = 0 to 31 and Y = 0 to 31. This also applies to the difference image DI. The pixel data is a luminance value.

図12は、図10のステップS3のアプリケーションプログラムが実行する処理の1つである注目点抽出処理の流れを示すフローチャートである。図12に示すように、ステップS43にて、マルチメディアプロセッサ21は、赤外発光ダイオード15の点灯時のピクセルデータ(つまり配列P1[X][Y]の要素)と、赤外発光ダイオード15の消灯時のピクセルデータ(つまり配列P2[X][Y]の要素)と、の差分を算出して、差分ピクセルデータを二次元配列Dif[X][Y]の要素として格納する。   FIG. 12 is a flowchart showing the flow of attention point extraction processing which is one of the processing executed by the application program in step S3 of FIG. As shown in FIG. 12, in step S <b> 43, the multimedia processor 21 determines pixel data when the infrared light emitting diode 15 is turned on (that is, elements of the array P <b> 1 [X] [Y]) and the infrared light emitting diode 15. The difference between the pixel data at the time of extinction (that is, the elements of the array P2 [X] [Y]) is calculated, and the difference pixel data is stored as the elements of the two-dimensional array Dif [X] [Y].

ここで、配列P1[X][Y]の要素(つまり点灯時のピクセルデータ)をピクセルデータP1[X][Y]、配列P2[X][Y]の要素(つまり消灯時のピクセルデータ)をピクセルデータP2[X][Y]、及び配列Dif[X][Y]の要素(つまり差分ピクセルデータ)を差分ピクセルデータDif[X][Y]と表記することもある。   Here, the elements of the array P1 [X] [Y] (that is, pixel data at the time of lighting) are the pixel data P1 [X] [Y], and the elements of the array P2 [X] [Y] (that is, pixel data at the time of turning off). May be expressed as pixel data P2 [X] [Y], and an element of the array Dif [X] [Y] (that is, difference pixel data) may be expressed as difference pixel data Dif [X] [Y].

ステップS45にて、マルチメディアプロセッサ21は、変数nに「0」を代入する。ステップS47にて、マルチメディアプロセッサ21は、配列Dif[n][0]〜Dif[n][31]の要素をスキャンして、最大値を検出する。ステップS51にて、マルチメディアプロセッサ21は、検出した最大値が所定の閾値Thより大きいか否かを判断し、大きい場合はステップS53に進み、それ以外はステップS55に進む。   In step S45, the multimedia processor 21 substitutes “0” for the variable n. In step S47, the multimedia processor 21 scans elements of the array Dif [n] [0] to Dif [n] [31] to detect the maximum value. In step S51, the multimedia processor 21 determines whether or not the detected maximum value is greater than a predetermined threshold value Th, the process proceeds to step S53 if it is greater, otherwise the process proceeds to step S55.

ステップS53では、マルチメディアプロセッサ21は、配列max[n]に、所定の閾値Thを超えた最大値を代入する。一方、ステップS55では、マルチメディアプロセッサ21は、配列max[n]に「0」を代入する。   In step S53, the multimedia processor 21 substitutes the maximum value exceeding the predetermined threshold Th into the array max [n]. On the other hand, in step S55, the multimedia processor 21 assigns “0” to the array max [n].

ステップS53又はステップS55の後、ステップS57にて、マルチメディアプロセッサ21は、変数nを1つインクリメントする。ステップS59にて、マルチメディアプロセッサ21は、変数nが「32」になったか否かを判断し、NOを判断するとステップS47に進み、YESを判断するとステップS61に進む。このようにして、32ピクセル×32ピクセルのDif[X][Y]をスキャンして、列毎に最大値を求める。そして、ステップS61にて、マルチメディアプロセッサ21は、2つの再帰反射シート11のそれぞれの注目点の抽出処理、つまり、2点抽出処理を実行する。   After step S53 or step S55, in step S57, the multimedia processor 21 increments the variable n by one. In step S59, the multimedia processor 21 determines whether or not the variable n is “32”. If NO is determined, the process proceeds to step S47, and if YES is determined, the process proceeds to step S61. In this way, the 32 pixels × 32 pixels Dif [X] [Y] are scanned to obtain the maximum value for each column. In step S61, the multimedia processor 21 executes an attention point extraction process for each of the two retroreflective sheets 11, that is, a two-point extraction process.

図13は、図12のステップS61の2点抽出処理の流れを示すフローチャートである。図13を参照して、ステップS81にて、マルチメディアプロセッサ21は、配列max[0]〜max[31]の要素をスキャンし、最大値を検出する。ステップS83にて、マルチメディアプロセッサ21は、最大値を検出した場合は、ステップS85に進み、検出できなかった場合は、ステップS99に進む。   FIG. 13 is a flowchart showing the flow of the two-point extraction process in step S61 of FIG. Referring to FIG. 13, in step S81, multimedia processor 21 scans the elements of arrays max [0] to max [31] to detect the maximum value. In step S83, the multimedia processor 21 proceeds to step S85 when the maximum value is detected, and proceeds to step S99 when it cannot be detected.

ステップS85では、マルチメディアプロセッサ21は、検出した最大値の座標を第1注目点の座標として保存する。そして、ステップS87にて、マルチメディアプロセッサ21は、第1注目点が存在することを示す第1注目点フラグをオンにする。   In step S85, the multimedia processor 21 stores the detected coordinates of the maximum value as the coordinates of the first point of interest. In step S87, the multimedia processor 21 turns on a first attention point flag indicating that the first attention point exists.

ステップS89にて、マルチメディアプロセッサ21は、配列max[0]〜max[31]の要素のうち、ステップS81で検出した最大値を中心に所定の範囲をマスクする。そして、ステップS91にて、マルチメディアプロセッサ21は、配列max[0]〜max[31]の要素のうち、マスクされた所定範囲を除いてスキャンを実行し、最大値を検出する。   In step S89, the multimedia processor 21 masks a predetermined range around the maximum value detected in step S81 among the elements of the arrays max [0] to max [31]. Then, in step S91, the multimedia processor 21 performs a scan except for the masked predetermined range among the elements of the arrays max [0] to max [31], and detects the maximum value.

ステップS93にて、マルチメディアプロセッサ21は、最大値を検出した場合は、ステップS95に進み、検出できなかった場合は、ステップS103に進む。ステップS95では、マルチメディアプロセッサ21は、ステップS91で検出した最大値の座標を第2注目点の座標として保存する。そして、ステップS97にて、マルチメディアプロセッサ21は、第2注目点が存在することを示す第2注目点フラグをオンにする。   In step S93, the multimedia processor 21 proceeds to step S95 if the maximum value is detected, and proceeds to step S103 if it cannot be detected. In step S95, the multimedia processor 21 stores the coordinates of the maximum value detected in step S91 as the coordinates of the second attention point. In step S97, the multimedia processor 21 turns on the second attention point flag indicating that the second attention point exists.

一方、ステップS83でNOが判断された後、ステップS99にて、マルチメディアプロセッサ21は、(0,0)を第1注目点の座標として保存する。そして、ステップS101にて、マルチメディアプロセッサ21は、第1注目点フラグをオフにする。   On the other hand, after NO is determined in step S83, in step S99, the multimedia processor 21 stores (0, 0) as the coordinates of the first point of interest. In step S101, the multimedia processor 21 turns off the first attention point flag.

また、ステップS101の後、又は、ステップS93でNOが判断された後、ステップS103にて、マルチメディアプロセッサ21は、(0,0)を第2注目点の座標として保存する。そして、ステップS105にて、マルチメディアプロセッサ21は、第2注目点フラグをオフにする。   In addition, after step S101 or after NO is determined in step S93, in step S103, the multimedia processor 21 stores (0, 0) as the coordinates of the second attention point. In step S105, the multimedia processor 21 turns off the second attention point flag.

図13の2点抽出処理が終了した直後では、第1及び第2注目点のうち、どちらが左足の再帰反射シート11の注目点で、どちらが右足の再帰反射シート11の注目点であるか、判別できない。そこで、第1及び第2注目点に左右を割り当てるべく、次の左右決定処理が実行される。   Immediately after the two-point extraction process of FIG. 13 is completed, it is determined which of the first and second attention points is the attention point of the left-foot retroreflection sheet 11 and which is the attention point of the right-foot retroreflection sheet 11. Can not. Therefore, the following left / right determination process is executed to assign left / right to the first and second attention points.

図14は、図10のステップS3のアプリケーションプログラムが実行する処理の1つである左右決定処理の流れを示すフローチャートである。図14を参照して、ステップS121にて、マルチメディアプロセッサ21は、第1注目点フラグがオンか否かをチェックして、オンの場合第1注目点が存在するのでステップS123に進み、オフの場合第1注目点が存在しないためステップS145に進む。   FIG. 14 is a flowchart showing the flow of the left / right determination process which is one of the processes executed by the application program in step S3 of FIG. Referring to FIG. 14, in step S121, the multimedia processor 21 checks whether or not the first attention point flag is on. If the first attention point flag is on, the multimedia processor 21 proceeds to step S123 because the first attention point exists. In this case, since the first attention point does not exist, the process proceeds to step S145.

第1注目点が存在しない場合は第2注目点も存在しないので、マルチメディアプロセッサ21は、ステップS145で、第1及び第2注目点の座標をそれぞれ左及び右注目点の座標として保存し、ステップS147で、左注目点フラグ及び右注目点フラグをオフにする。ここで、左注目点とは、左足に装着された再帰反射シート11の注目点を意味し、右注目点とは、右足に装着された再帰反射シート11の注目点を意味する。また、左注目点フラグは左注目点が存在する場合にオンになるフラグであり、右注目点フラグは右注目点が存在する場合にオンになるフラグである。   If the first point of interest does not exist, the second point of interest also does not exist. Therefore, in step S145, the multimedia processor 21 stores the coordinates of the first and second points of interest as the coordinates of the left and right points of interest, respectively. In step S147, the left attention point flag and the right attention point flag are turned off. Here, the left attention point means the attention point of the retroreflection sheet 11 attached to the left foot, and the right attention point means the attention point of the retroreflection sheet 11 attached to the right foot. The left attention point flag is a flag that is turned on when a left attention point exists, and the right attention point flag is a flag that is turned on when a right attention point exists.

ステップS121でYESが判断された後、ステップS123にて、マルチメディアプロセッサ21は、第2注目点フラグがオンか否かをチェックして、オンの場合第2注目点が存在するのでステップS125に進み、オフの場合第2注目点が存在しないためステップS135に進む。   After YES is determined in step S121, in step S123, the multimedia processor 21 checks whether or not the second attention point flag is on. If the second attention point flag is on, there is a second attention point. In the case of OFF, since there is no second attention point, the process proceeds to step S135.

ステップS123でNOが判断された場合、第1注目点だけが存在することを意味するので、第1注目点が、左注目点か右注目点かを決定すべく、ステップS135にて、マルチメディアプロセッサ21は、第1注目点が撮影画像の左半分の領域に存在するか否かを判断する。第1注目点が撮影画像の左半分の領域に存在する場合は、第1注目点を左注目点とすべく、マルチメディアプロセッサ21は、ステップS137で、第1及び第2注目点の座標をそれぞれ左及び右注目点の座標として保存し、ステップS139で、左注目点フラグをオン、右注目点フラグをオフにする。一方、第1注目点が撮影画像の左半分の領域に存在しない場合、つまり、右半分の領域に存在する場合は、第1注目点を右注目点とすべく、マルチメディアプロセッサ21は、ステップS141で、第1及び第2注目点の座標をそれぞれ右及び左注目点の座標として保存し、ステップS143で、左注目点フラグをオフ、右注目点フラグをオンにする。   If NO is determined in step S123, it means that only the first point of interest exists. Therefore, in step S135, multimedia is determined in order to determine whether the first point of interest is the left point of interest or the right point of interest. The processor 21 determines whether or not the first attention point exists in the left half area of the captured image. If the first point of interest exists in the left half area of the captured image, the multimedia processor 21 sets the coordinates of the first and second points of interest in step S137 so that the first point of interest is the left point of interest. The coordinates are stored as the coordinates of the left and right attention points respectively, and in step S139, the left attention point flag is turned on and the right attention point flag is turned off. On the other hand, if the first attention point does not exist in the left half area of the captured image, that is, if it exists in the right half area, the multimedia processor 21 performs the step to set the first attention point as the right attention point. In S141, the coordinates of the first and second attention points are stored as the coordinates of the right and left attention points, respectively, and in step S143, the left attention point flag is turned off and the right attention point flag is turned on.

ステップS123でYESが判断された場合、第1注目点及び第2注目点が存在することを意味するので、どちらが左注目点でどちらが右注目点であるかを判定すべく、ステップS125にて、マルチメディアプロセッサ21は、第1注目点のX座標と第2注目点のX座標と、を比較する。   If YES is determined in step S123, it means that the first attention point and the second attention point exist. Therefore, in step S125, in order to determine which is the left attention point and which is the right attention point, The multimedia processor 21 compares the X coordinate of the first point of interest with the X coordinate of the second point of interest.

ステップS127にて、マルチメディアプロセッサ21は、第1注目点のX座標が第2注目点のX座標より小さい場合、つまり、第1注目点が第2注目点の左側に位置する場合、ステップS131に進み、それ以外、つまり、第1注目点が第2注目点の右側に位置する場合、ステップS129に進む。   In step S127, the multimedia processor 21 determines that the X coordinate of the first target point is smaller than the X coordinate of the second target point, that is, if the first target point is located on the left side of the second target point, step S131. Otherwise, that is, if the first point of interest is located to the right of the second point of interest, the process proceeds to step S129.

ステップS127でYESが判断された場合、第1注目点を左注目点、第2注目点を右注目点にすべく、マルチメディアプロセッサ21は、ステップS131で、第1及び第2注目点の座標をそれぞれ左及び右注目点の座標として保存し、ステップS133で、左注目点フラグ及び右注目点フラグをオンにする。   If YES is determined in step S127, the multimedia processor 21 determines the coordinates of the first and second attention points in step S131 so that the first attention point is the left attention point and the second attention point is the right attention point. Are stored as the coordinates of the left and right attention points, respectively, and the left attention point flag and the right attention point flag are turned on in step S133.

一方、ステップS127でNOが判断された場合、第1注目点を右注目点、第2注目点を左注目点にすべく、マルチメディアプロセッサ21は、ステップS129で、第1及び第2注目点の座標をそれぞれ右及び左注目点の座標として保存し、ステップS133で、左注目点フラグ及び右注目点フラグをオンにする。   On the other hand, if NO is determined in step S127, the multimedia processor 21 determines that the first attention point is the right attention point and the second attention point is the left attention point in step S129. Are stored as the coordinates of the right and left attention points, respectively, and the left attention point flag and the right attention point flag are turned on in step S133.

マルチメディアプロセッサ21は、図14の左右決定処理の後、プレイヤ100がステップを行ったか否かを判定すべく、次のステップ判定処理を実行する。   The multimedia processor 21 executes the next step determination process to determine whether or not the player 100 has performed a step after the left / right determination process of FIG.

図15は、図10のステップS3のアプリケーションプログラムが実行する処理の1つであるステップ判定処理の流れを示すフローチャートである。図15を参照して、ステップS161にて、マルチメディアプロセッサ21は、左入力フラグ及び右入力フラグをオフにする。左入力フラグは、左足のステップが検知されたときにオンにされるフラグであり、右入力フラグは、右足のステップが検知されたときにオンにされるフラグである。このステップS161により、これらのフラグはビデオフレームの更新の度にクリアされることになる。   FIG. 15 is a flowchart showing the flow of a step determination process that is one of the processes executed by the application program in step S3 of FIG. Referring to FIG. 15, in step S161, the multimedia processor 21 turns off the left input flag and the right input flag. The left input flag is a flag that is turned on when a left foot step is detected, and the right input flag is a flag that is turned on when a right foot step is detected. By this step S161, these flags are cleared each time the video frame is updated.

ステップS163にて、マルチメディアプロセッサ21は、左注目点フラグがオンか否かをチェックし、オンの場合、左ステップの有無を判定すべくステップS165に進み、オフの場合ステップS185に進む。ステップS165では、マルチメディアプロセッサ21は、今回と前回の左注目点のY座標から、左注目点のY軸方向の速度VyLを算出する。ステップS167にて、マルチメディアプロセッサ21は、左速度VyLが、所定値VC(>0)より大きいか否かを判断し、大きい場合はステップS169に進み、それ以外はステップS177に進む。ここで、Y軸の正方向は垂直下向きであるため、左速度VyLが、所定値VC(>0)より大きいということは、左足の再帰反射シート11が垂直下向きに移動したことになる。   In step S163, the multimedia processor 21 checks whether or not the left attention point flag is on. If it is on, the multimedia processor 21 proceeds to step S165 to determine whether or not there is a left step, and if off, proceeds to step S185. In step S165, the multimedia processor 21 calculates the velocity VyL of the left attention point in the Y-axis direction from the current and previous Y coordinates of the left attention point. In step S167, the multimedia processor 21 determines whether or not the left speed VyL is greater than a predetermined value VC (> 0). If larger, the process proceeds to step S169, otherwise proceeds to step S177. Here, since the positive direction of the Y-axis is vertically downward, the fact that the left speed VyL is larger than the predetermined value VC (> 0) means that the left foot retroreflective sheet 11 has moved vertically downward.

ステップS169にて、マルチメディアプロセッサ21は、左成功カウンタCsLを1つインクリメントする。ステップS171にて、マルチメディアプロセッサ21は、左失敗カウンタCfLをクリアする。そして、ステップS173にて、マルチメディアプロセッサ21は、左成功カウンタCsLが定数N0(2以上の整数)と等しくなったか否かを判断し、等しい場合ステップS175に進み、それ以外は、右ステップの有無を判定すべくステップS187に進む。   In step S169, the multimedia processor 21 increments the left success counter CsL by one. In step S171, the multimedia processor 21 clears the left failure counter CfL. In step S173, the multimedia processor 21 determines whether or not the left success counter CsL is equal to a constant N0 (an integer equal to or greater than 2). If equal, the process proceeds to step S175. Otherwise, the multimedia processor 21 proceeds to step S175. Proceed to step S187 to determine the presence or absence.

ステップS173でYESが判断された後、ステップS175にて、マルチメディアプロセッサ21は、左入力フラグをオンにして、ステップS187に進む。   After YES is determined in step S173, in step S175, the multimedia processor 21 turns on the left input flag and proceeds to step S187.

ステップS167でNOが判断された後、ステップS177にて、マルチメディアプロセッサ21は、左失敗カウンタCfLを1つインクリメントする。そして、ステップS179にて、マルチメディアプロセッサ21は、左失敗カウンタCfLが定数N1(2以上の整数)と等しくなったか否かを判断し、等しい場合ステップS181に進み、それ以外は、右ステップの有無を判定すべくステップS187に進む。ステップS181にて、マルチメディアプロセッサ21は、左成功カウンタCsLをクリアする。そして、ステップS183にて、マルチメディアプロセッサ21は、左失敗カウンタCfLをクリアしてステップS187に進む。   After NO is determined in step S167, in step S177, the multimedia processor 21 increments the left failure counter CfL by one. In step S179, the multimedia processor 21 determines whether or not the left failure counter CfL is equal to a constant N1 (an integer equal to or greater than 2). If equal, the process proceeds to step S181. Otherwise, the multimedia processor 21 proceeds to step S181. Proceed to step S187 to determine the presence or absence. In step S181, the multimedia processor 21 clears the left success counter CsL. In step S183, the multimedia processor 21 clears the left failure counter CfL and proceeds to step S187.

以上のように、左失敗カウンタCfLが定数N1に等しくなる前に(ステップSS179)、左成功カウンタCsLが定数N0に到達すれば(ステップSS173)、左ステップが行われたと判断される(ステップSS175)。従って、必ずしも連続してN0回、左速度VyLが所定値VCを超えていなくてもよい。ただし、連続してN1回、左速度VyLが所定値VC以下の場合は、左成功カウンタCsLがクリア(ステップS171、S181)。   As described above, if the left success counter CsL reaches the constant N0 (step SS173) before the left failure counter CfL becomes equal to the constant N1 (step SS179), it is determined that the left step has been performed (step SS175). ). Therefore, the left speed VyL does not necessarily exceed the predetermined value VC N0 times continuously. However, if the left speed VyL is not more than the predetermined value VC continuously N1 times, the left success counter CsL is cleared (steps S171 and S181).

ステップS163でNOが判断された後、ステップS185にて、マルチメディアプロセッサ21は、左成功カウンタCsL及び左失敗カウンタCfLをクリアして、右ステップの有無を判定すべくステップS187に進む。   After NO is determined in step S163, in step S185, the multimedia processor 21 clears the left success counter CsL and the left failure counter CfL, and proceeds to step S187 to determine whether there is a right step.

ステップS187にて、マルチメディアプロセッサ21は、右注目点フラグがオンか否かをチェックし、オンの場合ステップS189に進み、オフの場合ステップS209に進む。ステップS189では、マルチメディアプロセッサ21は、今回と前回の右注目点のY座標から、右注目点のY軸方向の速度VyRを算出する。ステップS191にて、マルチメディアプロセッサ21は、右速度VyRが、所定値VC(>0)より大きいか否かを判断し、大きい場合はステップS193に進み、それ以外はステップS201に進む。ここで、Y軸の正方向は垂直下向きであるため、右速度VyRが、所定値VC(>0)より大きいということは、右足の再帰反射シート11が垂直下向きに移動していることになる。   In step S187, the multimedia processor 21 checks whether or not the right attention point flag is on. If the flag is on, the multimedia processor 21 proceeds to step S189. If the flag is off, the multimedia processor 21 proceeds to step S209. In step S189, the multimedia processor 21 calculates the velocity VyR of the right attention point in the Y-axis direction from the current and previous Y coordinates of the right attention point. In step S191, the multimedia processor 21 determines whether or not the right speed VyR is greater than a predetermined value VC (> 0). If larger, the process proceeds to step S193, otherwise the process proceeds to step S201. Here, since the positive direction of the Y-axis is vertically downward, the right velocity VyR being greater than the predetermined value VC (> 0) means that the right foot retroreflective sheet 11 is moving vertically downward. .

ステップS193にて、マルチメディアプロセッサ21は、右成功カウンタCsRを1つインクリメントする。ステップS195にて、マルチメディアプロセッサ21は、右失敗カウンタCfRをクリアする。そして、ステップS197にて、マルチメディアプロセッサ21は、右成功カウンタCsRが定数N0(2以上の整数)と等しくなったか否かを判断し、等しい場合ステップS199に進み、それ以外はリターンする。   In step S193, the multimedia processor 21 increments the right success counter CsR by one. In step S195, the multimedia processor 21 clears the right failure counter CfR. In step S197, the multimedia processor 21 determines whether or not the right success counter CsR is equal to a constant N0 (an integer equal to or greater than 2). If equal, the process proceeds to step S199, and otherwise returns.

ステップS191でNOが判断された後、ステップS201にて、マルチメディアプロセッサ21は、右失敗カウンタCfRを1つインクリメントする。そして、ステップS203にて、マルチメディアプロセッサ21は、右失敗カウンタCfRが定数N1(2以上の整数)と等しくなったか否かを判断し、等しい場合ステップS205に進み、それ以外はリターンする。ステップS205にて、マルチメディアプロセッサ21は、右成功カウンタCsRをクリアする。そして、ステップS207にて、マルチメディアプロセッサ21は、右失敗カウンタCfRをクリアしてリターンする。   After NO is determined in step S191, in step S201, the multimedia processor 21 increments the right failure counter CfR by one. In step S203, the multimedia processor 21 determines whether or not the right failure counter CfR is equal to a constant N1 (an integer of 2 or more). If they are equal, the process proceeds to step S205, and otherwise returns. In step S205, the multimedia processor 21 clears the right success counter CsR. In step S207, the multimedia processor 21 clears the right failure counter CfR and returns.

以上のように、右失敗カウンタCfRが定数N1に等しくなる前に(ステップSS203)、右成功カウンタCsRが定数N0に到達すれば(ステップSS197)、右ステップが行われたと判断される(ステップSS199)。従って、必ずしも連続してN0回、右速度VyRが所定値VCを超えていなくてもよい。ただし、連続してN1回、右速度VyRが所定値VC以下の場合は、右成功カウンタCsRがクリア(ステップS195、S205)。   As described above, if the right success counter CsR reaches the constant N0 (step SS197) before the right failure counter CfR becomes equal to the constant N1 (step SS203), it is determined that the right step has been performed (step SS199). ). Therefore, the right speed VyR does not necessarily exceed the predetermined value VC N0 times continuously. However, if the right speed VyR is not more than the predetermined value VC N1 times continuously, the right success counter CsR is cleared (steps S195 and S205).

ステップS187でNOが判断された後、ステップS209にて、マルチメディアプロセッサ21は、右成功カウンタCsR及び右失敗カウンタCfRをクリアして、リターンする。   After NO is determined in step S187, in step S209, the multimedia processor 21 clears the right success counter CsR and the right failure counter CfR and returns.

マルチメディアプロセッサ21は、図15のステップ判定処理の後、プレイヤ100がジャンプを行ったか否かを判定すべく、次のジャンプ判定処理を実行する。   The multimedia processor 21 performs the next jump determination process after the step determination process of FIG. 15 to determine whether or not the player 100 has made a jump.

図16は、図10のステップS3のアプリケーションプログラムが実行する処理の1つであるジャンプ判定処理の流れを示すフローチャートである。図16を参照して、ステップS221にて、マルチメディアプロセッサ21は、ジャンプフラグをオフにする。ジャンプフラグは、プレイヤ100がジャンプしたと判断したときにオンにされるフラグである。このステップS221により、このフラグはビデオフレームの更新の度にクリアされることになる。   FIG. 16 is a flowchart showing the flow of the jump determination process which is one of the processes executed by the application program in step S3 of FIG. Referring to FIG. 16, in step S221, the multimedia processor 21 turns off the jump flag. The jump flag is a flag that is turned on when it is determined that the player 100 has jumped. By this step S221, this flag is cleared every time the video frame is updated.

ステップS223にて、マルチメディアプロセッサ21は、左注目点フラグがオンか否かを判断し、オンの場合ステップS225に進み、オフの場合ステップS237に進む。ステップS225にて、マルチメディアプロセッサ21は、右注目点フラグがオンか否かを判断して、オンの場合ステップS227に進み、オフの場合ステップS237に進む。   In step S223, the multimedia processor 21 determines whether or not the left attention point flag is on. If the flag is on, the multimedia processor 21 proceeds to step S225. If the flag is off, the multimedia processor 21 proceeds to step S237. In step S225, the multimedia processor 21 determines whether or not the right attention point flag is on. If it is on, the multimedia processor 21 proceeds to step S227. If it is off, the multimedia processor 21 proceeds to step S237.

ステップS227にて、マルチメディアプロセッサ21は、左速度VyLが0より小さいか否かを判断し、小さい場合はステップS229に進み、それ以外はステップS237に進む。ステップS229にて、マルチメディアプロセッサ21は、右速度VyRが0より小さいか否かを判断し、小さい場合はステップS231に進み、それ以外はステップS237に進む。   In step S227, the multimedia processor 21 determines whether or not the left speed VyL is smaller than 0, the process proceeds to step S229 if it is smaller, otherwise the process proceeds to step S237. In step S229, the multimedia processor 21 determines whether or not the right speed VyR is smaller than 0, the process proceeds to step S231 if it is smaller, otherwise the process proceeds to step S237.

ここで、Y軸の正方向は垂直下向きであるため、左速度VyLが負ということは、左足の再帰反射シート11が垂直上向きに移動していることになる。同様に、右速度VyRが負ということは、右足の再帰反射シート11が垂直上向きに移動していることになる。   Here, since the positive direction of the Y axis is vertically downward, the left velocity VyL being negative means that the retroreflective sheet 11 of the left foot is moving vertically upward. Similarly, when the right velocity VyR is negative, the retroreflective sheet 11 on the right foot is moving vertically upward.

ステップS231では、マルチメディアプロセッサ21は、ジャンプカウンタCJを1つインクリメントする。ステップS233にて、マルチメディアプロセッサ21は、ジャンプカウンタCJが定数N2(2以上の整数)に等しいか否かを判断し、等しい場合ステップS235に進み、それ以外はリターンする。ステップS235では、マルチメディアプロセッサ21は、ジャンプフラグをオンにする。   In step S231, the multimedia processor 21 increments the jump counter CJ by one. In step S233, the multimedia processor 21 determines whether or not the jump counter CJ is equal to a constant N2 (an integer equal to or greater than 2), the process proceeds to step S235 if it is equal, otherwise the process returns. In step S235, the multimedia processor 21 turns on the jump flag.

ステップS223、S225、S227、又はS229でNOが判断された後、ステップS237にて、マルチメディアプロセッサ21は、ジャンプカウンタCJを0にクリアする。   After NO is determined in step S223, S225, S227, or S229, the multimedia processor 21 clears the jump counter CJ to 0 in step S237.

以上のように、左注目点及び右注目点が垂直上方向に移動している状態が、連続してN2回発生することが、ジャンプと判定されるための条件となる。   As described above, it is a condition for determining a jump that the state in which the left attention point and the right attention point are moving vertically upward occurs N2 times in succession.

図17は、図1のマルチメディアプロセッサ21が実行する運動支援処理の状態遷移図である。図17を参照して、ステップS251にて、マルチメディアプロセッサ21は、RTC29に基づく日付情報に基づいて、複数種類用意されているメニューの中から、その日に行うメニューを選択する。ステップS253にて、マルチメディアプロセッサ21は、ステップS251で選択したメニューをテレビジョンモニタ7に表示する。   FIG. 17 is a state transition diagram of the exercise support process executed by the multimedia processor 21 of FIG. Referring to FIG. 17, in step S <b> 251, multimedia processor 21 selects a menu to be executed on the day from a plurality of types of menus based on date information based on RTC 29. In step S253, the multimedia processor 21 displays the menu selected in step S251 on the television monitor 7.

ここで、本実施の形態では、図5〜図9に対応して、5つの課目が用意されている。なお、ウォームアップ及びクールダウンは課目数に含まれない。各メニューには、ウォームアップとクールダウンとに挟まれて、5つの課目のうち、任意のn個の課目が記載されている。nは、1以上の整数で最大5であり、メニューごとに独立して定められる。メニューに記載された第1課目〜第n課目を包括して第N課目と呼ぶ。   Here, in the present embodiment, five items are prepared corresponding to FIGS. Warm-up and cool-down are not included in the number of items. In each menu, any n items out of the five items are described between warm-up and cool-down. n is an integer of 1 or more and is 5 at the maximum, and is determined independently for each menu. The first to nth items described in the menu are collectively referred to as the Nth item.

ステップS255にて、マルチメディアプロセッサ21は、選択したメニューに従って、ウォームアップのための画面をテレビジョンモニタ7に表示する。マルチメディアプロセッサ21は、ウォームアップのための処理を終了した後、選択したメニューに従って、ステップS257−Nにて、第N課目のための画面をテレビジョンモニタ7に表示する。マルチメディアプロセッサ21は、第N課目のための処理を終了した後、選択したメニューに従って、ステップS257−(N+1)にて、第N+1課目のための画面をテレビジョンモニタ7に表示する。このように、マルチメディアプロセッサ21は、選択したメニューに含まれる課目を順番に、第1課目から第n課目まで実行していく。   In step S255, the multimedia processor 21 displays a screen for warm-up on the television monitor 7 in accordance with the selected menu. After finishing the warm-up process, the multimedia processor 21 displays a screen for the Nth section on the television monitor 7 in step S257-N according to the selected menu. After finishing the processing for the Nth section, the multimedia processor 21 displays a screen for the (N + 1) th section on the television monitor 7 in step S257- (N + 1) according to the selected menu. In this way, the multimedia processor 21 executes the items included in the selected menu in order from the first item to the n-th item.

マルチメディアプロセッサ21は、第n課目のための処理を終了した後、ステップS259にて、クールダウンのための画面をテレビジョンモニタ7に表示する。そして、マルチメディアプロセッサ21は、クールダウンのための処理を終了した後、ステップS261にて、グラフ表示を行い、処理を終了する。ただし、終了前に、マルチメディアプロセッサ21は、本日のトータル運動時間、トータルステップ数、及びトータルカロリーを日付と関連付けてEEPROM27にセーブする。   The multimedia processor 21 displays the screen for cool-down on the television monitor 7 in step S259 after finishing the processing for the n-th section. Then, after finishing the process for cool-down, the multimedia processor 21 displays a graph in step S261 and ends the process. However, before the end, the multimedia processor 21 saves the total exercise time of the day, the total number of steps, and the total calories in the EEPROM 27 in association with the date.

なお、理解の容易のため、マルチメディアプロセッサ21の運動支援処理の流れを状態遷移図で説明したが、図17の処理は、図10のステップS3で実行されるアプリケーションプログラムによる処理として実行される。   For ease of understanding, the flow of the exercise support process of the multimedia processor 21 has been described with the state transition diagram, but the process of FIG. 17 is executed as a process by the application program executed in step S3 of FIG. .

次に、各課目のための処理の流れを説明する。これらの処理もまた、図10のステップS3で実行されるアプリケーションプログラムによる処理として実行されるが、説明の便宜のため、ビデオ同期信号に同期した形でのフローチャートではなく、図17の遷移図に含まれる形のフローチャートで説明する。   Next, the flow of processing for each item will be described. These processes are also executed as a process by the application program executed in step S3 of FIG. 10, but for convenience of explanation, not the flowchart synchronized with the video synchronization signal but the transition diagram of FIG. It will be described with a flowchart of the included form.

図18は、図17のステップS257−Nで実行される第N課目の実行ルーチン(時間が終了条件)のフローチャートである。時間が終了条件の課目は、図5〜図7に対応する課目である。図18は、図5に対応する課目のための処理である。   FIG. 18 is a flowchart of the Nth execution routine (time completion condition) executed in step S257-N of FIG. The item of the time end condition is the item corresponding to FIGS. FIG. 18 shows a process for the item corresponding to FIG.

図18を参照して、ステップS281にて、マルチメディアプロセッサ21は、当該ルーチンのための初期化処理を実行する。ステップS283にて、マルチメディアプロセッサ21は、図5の運動支援画面をテレビジョンモニタ7に表示する。ステップS285では、マルチメディアプロセッサ21は、課目時間Tiの計時を開始する。課目時間Tiは、当該課目の経過時間であり、課目時間Tiが時間表示部41に表示される。   Referring to FIG. 18, in step S281, multimedia processor 21 executes an initialization process for the routine. In step S283, the multimedia processor 21 displays the exercise support screen of FIG. In step S285, the multimedia processor 21 starts measuring the item time Ti. The item time Ti is the elapsed time of the item, and the item time Ti is displayed on the time display unit 41.

ステップS287にて、マルチメディアプロセッサ21は、アダプタ3のキャンセルキー28(図1参照)をチェックする。ステップS289にて、マルチメディアプロセッサ21は、キャンセルキー28がオンの場合はステップS307に進む。従って、キャンセルキー28が押下された場合は、この課目はスキップされる。一方、マルチメディアプロセッサ21は、キャンセルキー28がオフの場合はステップS291に進む。   In step S287, the multimedia processor 21 checks the cancel key 28 (see FIG. 1) of the adapter 3. In step S289, the multimedia processor 21 proceeds to step S307 when the cancel key 28 is ON. Therefore, when the cancel key 28 is pressed, this item is skipped. On the other hand, if the cancel key 28 is off, the multimedia processor 21 proceeds to step S291.

ステップS291にて、マルチメディアプロセッサ21は、最新の入力後一定時間が経過したか否かを判断し、経過していない場合はステップS295に進み、経過した場合はステップS293に進む。ここで、入力とは、左入力フラグ(ステップS175)、右入力フラグ(ステップS199)、及びジャンプフラグ(ステップS235)のうちのいずれかがオンしたことを意味する。ステップS293にて、マルチメディアプロセッサ21は、トータル時間Ttの計時を停止して、ステップS295に進む。トータル時間Ttは、その日の運動時間の累計であり、時間表示部31に表示される。   In step S291, the multimedia processor 21 determines whether or not a fixed time has elapsed after the latest input. If not, the multimedia processor 21 proceeds to step S295. If it has elapsed, the process proceeds to step S293. Here, the input means that any one of the left input flag (step S175), the right input flag (step S199), and the jump flag (step S235) is turned on. In step S293, the multimedia processor 21 stops measuring the total time Tt, and proceeds to step S295. The total time Tt is the total of exercise time of the day and is displayed on the time display unit 31.

ステップS295にて、マルチメディアプロセッサ21は、右入力フラグ、左入力フラグ、及びジャンプフラグ(図15、図16参照)をチェックして、いずれかがオンの場合(入力あり)、ステップS297に進み、それ以外、つまり、右入力フラグ、左入力フラグ、及びジャンプフラグの全てがオフの場合(入力なし)、ステップS301に進む。   In step S295, the multimedia processor 21 checks the right input flag, the left input flag, and the jump flag (see FIGS. 15 and 16). If any of them is ON (input is present), the process proceeds to step S297. Otherwise, that is, when all of the right input flag, the left input flag, and the jump flag are off (no input), the process proceeds to step S301.

ステップS297では、マルチメディアプロセッサ21は、トータル時間Ttの計時が停止している場合は計時を開始する。ステップS299にて、マルチメディアプロセッサ21は、プレイヤからの入力(左ステップ、右ステップ、又はジャンプ)に応答して所定処理を実行する。   In step S297, the multimedia processor 21 starts timing when the counting of the total time Tt is stopped. In step S299, the multimedia processor 21 executes a predetermined process in response to an input (left step, right step, or jump) from the player.

図19は、図18のステップS299の入力応答処理の流れを示すフローチャートである。この処理は、図5の課目に対応して実行される。図19を参照して、ステップS321にて、マルチメディアプロセッサ21は、トータルステップカウンタTtsをインクリメントする。トータルステップカウンタTtsは、その日のステップ数の累計である。マルチメディアプロセッサ21は、ジャンプフラグがオンの場合は2つインクリメントし、左入力フラグ又は右入力フラグがオンの場合は1つインクリメントする。   FIG. 19 is a flowchart showing the flow of input response processing in step S299 of FIG. This process is executed corresponding to the item of FIG. Referring to FIG. 19, in step S321, multimedia processor 21 increments total step counter Tts. The total step counter Tts is the total number of steps of the day. The multimedia processor 21 increments by two when the jump flag is on, and increments by one when the left input flag or the right input flag is on.

ステップS323にて、マルチメディアプロセッサ21は、課目ステップカウンタTcsをインクリメントする。課目ステップカウンタTcsは、実行中の課目におけるステップ数の累計である。マルチメディアプロセッサ21は、ジャンプフラグがオンの場合は2つインクリメントし、左入力フラグ又は右入力フラグがオンの場合は1つインクリメントする。   In step S323, the multimedia processor 21 increments the item step counter Tcs. The item step counter Tcs is the total number of steps in the item being executed. The multimedia processor 21 increments by two when the jump flag is on, and increments by one when the left input flag or the right input flag is on.

ステップS325にて、マルチメディアプロセッサ21は、トータルステップカウンタTtsの値、ユーザの体重W(kg)、及び単位消費カロリー値U(kcal/kg・ステップ)に基づいて、トータルカロリーTc(=Tts×W×U)を算出する。ステップS327にて、マルチメディアプロセッサ21は、操作オブジェクト47が移動オブジェクト49をキャッチしたか否かを判定する。この場合、移動オブジェクト49の中心の水平座標が、操作オブジェクト47の中心の水平座標を中心とした所定水平範囲に位置し、かつ、移動オブジェクト49の中心の垂直座標が、操作オブジェクト47の上端の垂直座標を中心とした所定垂直範囲に位置した場合に、キャッチしたと判定される。ステップS329にて、マルチメディアプロセッサ21は、スコア表示部45に表示するポイントを算出する。   In step S325, the multimedia processor 21 calculates the total calorie Tc (= Tts ×) based on the value of the total step counter Tts, the weight W (kg) of the user, and the unit calorie consumption value U (kcal / kg · step). W × U) is calculated. In step S327, the multimedia processor 21 determines whether or not the operation object 47 has caught the moving object 49. In this case, the horizontal coordinate of the center of the moving object 49 is located in a predetermined horizontal range centered on the horizontal coordinate of the center of the operation object 47, and the vertical coordinate of the center of the moving object 49 is the upper end of the operation object 47. When it is located in a predetermined vertical range centered on the vertical coordinate, it is determined that the catch has been made. In step S329, the multimedia processor 21 calculates points to be displayed on the score display unit 45.

ステップS331にて、マルチメディアプロセッサ21は、プレイヤ100からの入力に依存して変化及び/又は出現する各種画像のステータス(座標及び画像データ等)を更新する。図5の課題の場合、入力に依存する画像は、操作オブジェクト47、カロリー表示部33、ステップ表示部35、及びスコア表示部45である。   In step S331, the multimedia processor 21 updates the status (coordinates and image data) of various images that change and / or appear depending on the input from the player 100. In the case of the problem of FIG. 5, the images depending on the input are the operation object 47, the calorie display unit 33, the step display unit 35, and the score display unit 45.

図18に戻って、ステップS301にて、マルチメディアプロセッサ21は、プレイヤ100からの入力に依存することのない、つまり、自動で(プログラムで)、変化及び/又は出現する各種画像のステータス(座標及び画像データ等)を更新する。図5の課題の場合、自動の画像は、移動オブジェクト49、時間表示部41、及び時間表示部31である。ただし、時間表示部31は、一定時間の無入力により停止する点で(ステップS293)、完全な自動ではなく、一部入力に依存する。   Returning to FIG. 18, in step S301, the multimedia processor 21 does not depend on the input from the player 100, that is, the status (coordinates) of various images that change and / or appear automatically (by the program). And image data etc.). In the case of the problem of FIG. 5, the automatic images are the moving object 49, the time display unit 41, and the time display unit 31. However, the time display unit 31 is not completely automatic but depends on partial input in that it stops when there is no input for a certain period of time (step S293).

ステップS303にて、マルチメディアプロセッサ21は、各種画像の現状のステータスに基づいて表示の更新を行う。ステップS305にて、マルチメディアプロセッサ21は、課目時間Tiが所定時間ENDに等しいか否かを判断し、等しい場合は、この課目の処理を終了すべく、ステップS307に進み、等しくない場合は、ステップS287に戻る。ステップS307では、マルチメディアプロセッサ21は、トータル時間Tt、トータルステップカウンタTtsの値、及びトータルカロリーTcをメインRAMに格納する。ステップS309にて、マルチメディアプロセッサ21は、結果画面を表示して、次の課目の実行ルーチンへ進む。   In step S303, the multimedia processor 21 updates the display based on the current status of various images. In step S305, the multimedia processor 21 determines whether or not the item time Ti is equal to the predetermined time END. If the item time Ti is equal, the process proceeds to step S307 to end the process of the item. The process returns to step S287. In step S307, the multimedia processor 21 stores the total time Tt, the value of the total step counter Tts, and the total calorie Tc in the main RAM. In step S309, the multimedia processor 21 displays the result screen and proceeds to the execution routine for the next item.

ところで、図6の課題及び図7の課題は、時間を終了条件とする点で、図5の課題と共通する。従って、その処理は、図18及び図19に示した処理と同様に実行される。ただし、図6の課題では、ステップS285では、課目時間Tiの計時ではなく、10秒からのカウントダウンを実行し、時間表示部37に表示され、課目ステップカウンタTcsの値は、ステップ表示部39に表示される。時間表示部37はステップS301でステータスが更新され、ステップ表示部39は、ステップS331でステータスが更新される。ステップS327及びS329は実行されない。   Incidentally, the problem of FIG. 6 and the problem of FIG. 7 are common to the problem of FIG. 5 in that time is an end condition. Therefore, the processing is executed in the same manner as the processing shown in FIGS. However, in the problem of FIG. 6, in step S285, the countdown from 10 seconds is executed instead of counting the item time Ti and displayed on the time display unit 37, and the value of the item step counter Tcs is displayed on the step display unit 39. Is displayed. The status of the time display unit 37 is updated in step S301, and the status of the step display unit 39 is updated in step S331. Steps S327 and S329 are not executed.

また、図7の課題では、図19のステップS327では、キャッチ判定ではなく、プレイヤキャラクタ61が縄63に引っ掛かることなく巧く跳んだか否かの判定(成功判定処理)を行う。さらに、ステップS329では、ポイント算出ではなく、連続回数表示部59に表示するための連続成功回数のカウント、及び、トータル回数表示部57にお表示するためのトータル成功回数のカウントを実行する。トータル回数表示部57、連続回数表示部59、及びプレイヤキャラクタ61のステータスは、ステップS331で更新される。縄63及び時間表示部53のステータスは、ステップS301で更新される。ただし、成功判定処理で失敗と判定された場合、失敗を表す縄63の映像が表示されるので、縄63は完全な自動ではなく、一部入力に依存する。また、課目時間Tiは、時間表示部53に表示される。   Further, in the problem of FIG. 7, in step S <b> 327 of FIG. 19, not the catch determination but a determination (success determination process) whether or not the player character 61 jumps skillfully without being caught by the rope 63. Further, in step S329, not the point calculation but the count of the number of continuous successes for display on the continuous number display unit 59 and the total number of successes for display on the total number display unit 57 are executed. The total number display unit 57, the continuous number display unit 59, and the status of the player character 61 are updated in step S331. The statuses of the rope 63 and the time display unit 53 are updated in step S301. However, if it is determined that the failure is determined in the success determination process, an image of the rope 63 representing the failure is displayed, and therefore the rope 63 is not completely automatic but partially depends on input. The item time Ti is displayed on the time display unit 53.

図20は、図17のステップS257−Nで実行される第N課目の実行ルーチン(音楽終了が終了条件)のフローチャートである。音楽が終了条件の課目は、図8に対応する課目である。図20を参照して、ステップS351にて、マルチメディアプロセッサ21は、当該ルーチンのための初期化処理を実行する。ステップS353にて、マルチメディアプロセッサ21は、図8の運動支援画面をテレビジョンモニタ7に表示する。ステップS355では、マルチメディアプロセッサ21は、音楽の再生を開始する。   FIG. 20 is a flowchart of the execution routine (the end of music is an end condition) of the Nth section executed in step S257-N of FIG. The item with the music end condition is the item corresponding to FIG. Referring to FIG. 20, in step S351, multimedia processor 21 executes an initialization process for the routine. In step S353, the multimedia processor 21 displays the exercise support screen of FIG. In step S355, the multimedia processor 21 starts playing music.

ステップS357、S359、S361、S363、S365、S367、及びS369の処理は、それぞれ、図18のS287、S289、S291、S293、S295、S297、及びS299の処理と同様であり、説明を省略する。ただし、図19の入力応答処理のステップS327では、キャッチ判定ではなく、「エクセレント」、「グッド」の判定を実行する。また、ステップS329では、評価表示部65に表示するカウントを実行する。評価表示部65のステータスはステップS331で更新される。   The processes of steps S357, S359, S361, S363, S365, S367, and S369 are the same as the processes of S287, S289, S291, S293, S295, S297, and S299 in FIG. However, in step S327 of the input response process of FIG. 19, determination of “excellent” and “good” is executed instead of catch determination. In step S329, the count displayed on the evaluation display unit 65 is executed. The status of the evaluation display unit 65 is updated in step S331.

図20に戻って、ステップS371にて、マルチメディアプロセッサ21は、プレイヤ100からの入力に依存することのない、つまり、自動で(プログラムで)、変化及び/又は出現する各種画像のステータス(座標及び画像データ等)を更新する。図8の課題の場合、自動の画像は、輪71及びゲージ67である。   Returning to FIG. 20, in step S371, the multimedia processor 21 does not depend on the input from the player 100, that is, the status (coordinates) of various images that change and / or appear automatically (by the program). And image data etc.). In the case of the problem of FIG. 8, the automatic image is a wheel 71 and a gauge 67.

ステップS373にて、マルチメディアプロセッサ21は、各種画像の現状のステータスに基づいて表示の更新を行う。ステップS375にて、マルチメディアプロセッサ21は、音楽が終了したか否かを判断し、終了した場合は、この課目の処理を終了すべく、ステップS377に進み、終了していない場合は、ステップS357に戻る。ステップS377では、マルチメディアプロセッサ21は、トータル時間Tt、トータルステップカウンタTtsの値、及びトータルカロリーTcをメインRAMに格納する。ステップS379にて、マルチメディアプロセッサ21は、結果画面を表示して、次の課目の実行ルーチンへ進む。   In step S373, the multimedia processor 21 updates the display based on the current status of various images. In step S375, the multimedia processor 21 determines whether or not the music has ended. If the music has ended, the multimedia processor 21 proceeds to step S377 to end the processing of this item, and if not, step S357. Return to. In step S377, the multimedia processor 21 stores the total time Tt, the value of the total step counter Tts, and the total calorie Tc in the main RAM. In step S379, the multimedia processor 21 displays the result screen and proceeds to the execution routine for the next item.

図21は、図17のステップS257−Nで実行される第N課目の実行ルーチン(失敗が終了条件)のフローチャートである。失敗が終了条件の課目は、図9に対応する課目である。図21を参照して、ステップS391にて、マルチメディアプロセッサ21は、当該ルーチンのための初期化処理を実行する。ステップS393にて、マルチメディアプロセッサ21は、図9の運動支援画面をテレビジョンモニタ7に表示する。   FIG. 21 is a flowchart of the execution routine (failure is an end condition) for the Nth section executed in step S257-N in FIG. The item of the failure end condition is the item corresponding to FIG. Referring to FIG. 21, in step S391, multimedia processor 21 executes an initialization process for the routine. In step S393, the multimedia processor 21 displays the exercise support screen of FIG.

ステップS395、S397、S399、S401、S403、S405、及びS407の処理は、それぞれ、図18のS287、S289、S291、S293、S295、S297、及びS299の処理と同様であり、説明を省略する。ただし、図19の入力応答処理のステップS327では、キャッチ判定ではなく、移動オブジェクトグループ75の指示通りにプレイヤ100の入力があったか否かの判定を実行する。   The processes of steps S395, S397, S399, S401, S403, S405, and S407 are the same as the processes of S287, S289, S291, S293, S295, S297, and S299, respectively, in FIG. However, in step S327 of the input response process of FIG. 19, not the catch determination but a determination as to whether or not the player 100 has input as instructed by the moving object group 75 is executed.

図21に戻って、ステップS409にて、マルチメディアプロセッサ21は、プレイヤ100からの入力に依存することのない、つまり、自動で(プログラムで)、変化及び/又は出現する各種画像のステータス(座標及び画像データ等)を更新する。図9の課題の場合、自動の画像は、移動オブジェクトグループ75の各マーク77である。ただし、マーク77は、指示通りの入力があった場合に消滅する点で、完全な自動ではなく、一部入力に依存する。   Returning to FIG. 21, in step S409, the multimedia processor 21 does not depend on the input from the player 100, that is, the status (coordinates) of various images that change automatically and / or appear automatically (by the program). And image data etc.). In the case of the problem of FIG. 9, the automatic image is each mark 77 of the moving object group 75. However, the mark 77 disappears when there is an input as instructed, and is not completely automatic but depends on a part of the input.

ステップS411にて、マルチメディアプロセッサ21は、各種画像の現状のステータスに基づいて表示の更新を行う。ステップS413にて、マルチメディアプロセッサ21は、マーク77が、失敗ライン73に到達したか否かを判断し、到達した場合は、この課目の処理を終了すべく、ステップS415に進み、到達していない場合は、ステップS395に戻る。ステップS415では、マルチメディアプロセッサ21は、トータル時間Tt、トータルステップカウンタTtsの値、及びトータルカロリーTcをメインRAMに格納する。ステップS417にて、マルチメディアプロセッサ21は、結果画面を表示して、次の課目の実行ルーチンへ進む。   In step S411, the multimedia processor 21 updates the display based on the current status of various images. In step S413, the multimedia processor 21 determines whether or not the mark 77 has reached the failure line 73. If the mark 77 has reached, the process proceeds to step S415 to end the processing of this item. If not, the process returns to step S395. In step S415, the multimedia processor 21 stores the total time Tt, the value of the total step counter Tts, and the total calorie Tc in the main RAM. In step S417, the multimedia processor 21 displays the result screen and proceeds to the execution routine for the next item.

さて、以上のように、本実施の形態によれば、足踏みのガイドだけでなく、両足に装着した再帰反射シート11の動き、つまり、プレイヤ100の両足の動きが映像に反映されるので、インタラクティブな運動支援システムを提供できる。従って、足踏みに対して反応が返ってくるので、単調な足踏みに面白みを付加でき、その結果、足踏み運動の継続を支援できる。しかも、特別な運動器具は不要であり、再帰反射シート11を足に装着するだけでよいので、ユーザの経済的負担の軽減及び省スペースを実現できる。   As described above, according to the present embodiment, not only the stepping guide but also the movement of the retroreflective sheet 11 attached to both feet, that is, the movement of both feet of the player 100 is reflected in the video. Can provide a simple exercise support system. Therefore, since a response is returned to the stepping, it is possible to add interest to the monotonous stepping, and as a result, it is possible to support the continuation of the stepping exercise. In addition, no special exercise equipment is required and only the retroreflective sheet 11 needs to be attached to the foot, so that it is possible to reduce the user's economic burden and save space.

また、プレイヤ100は両足に再帰反射シート11を装着し、マルチメディアプロセッサ21は、両足の動きそれぞれを解析するので、片足の動きのみを解析する場合と比較して、より多くの運動課目の提供が可能になる。つまり、片足の動きのみを解析する場合、ステップの検知は可能であるがジャンプの検知ができない。一方、両足の動きを解析する場合は、ステップだけでなく、ジャンプの検知が可能である。それ故、プレイヤ100にジャンプさせる課目を加えることができる。   In addition, the player 100 wears the retroreflective sheet 11 on both feet, and the multimedia processor 21 analyzes the movements of both feet, so that more exercise items are provided compared to the case of analyzing only the movement of one foot. Is possible. That is, when only the movement of one leg is analyzed, the step can be detected but the jump cannot be detected. On the other hand, when analyzing the movements of both feet, it is possible to detect not only steps but also jumps. Therefore, an item for causing the player 100 to jump can be added.

また、本実施の形態によれば、膝の直下に再帰反射シート11を装着するので、撮像ユニット17を含むカートリッジ1が装着されたアダプタ3を床面に載置した場合において、プレイヤ100が足踏みをしたときに、どの状態においても両足の再帰反射シート11をより確実に撮像することが可能になる。   In addition, according to the present embodiment, since the retroreflective sheet 11 is mounted just below the knee, the player 100 steps on the adapter 3 with the cartridge 1 including the imaging unit 17 mounted thereon. When this is done, the retroreflective sheet 11 on both legs can be imaged more reliably in any state.

なお、本発明は、上記の実施の形態に限られるものではなく、その要旨を逸脱しない範囲で種種の態様において実施することが可能であり、例えば、以下のような変形も可能である。   Note that the present invention is not limited to the above-described embodiment, and can be implemented in various modes without departing from the gist thereof. For example, the following modifications are possible.

(1)上記では、検知の容易化のため、再帰反射シート11をプレイヤ100の両足に装着したが、イメージセンサ32及びマルチメディアプロセッサ21の能力によっては、必ずしも、再帰反射シート11を装着する必要はない。プレイヤ100の両足の動きが解析できれば、再帰反射シート11は必須ではない。   (1) In the above description, the retroreflective sheet 11 is attached to both feet of the player 100 for easy detection. However, depending on the capabilities of the image sensor 32 and the multimedia processor 21, the retroreflective sheet 11 may be necessarily attached. There is no. If the movement of both feet of the player 100 can be analyzed, the retroreflective sheet 11 is not essential.

(2)上記では、カートリッジ1をアダプタ3に装着する形式を採用したが、これらを一体として構成することもできる。   (2) In the above description, the type in which the cartridge 1 is mounted on the adapter 3 is adopted. However, these may be configured integrally.

(3)上記では、表示装置はテレビジョンモニタ7であったが、これに限られない。   (3) Although the display device is the television monitor 7 in the above, it is not limited to this.

本発明の実施の形態による運動支援システムの全体構成を示す図である。It is a figure showing the whole exercise support system composition by an embodiment of the invention. 図1のカートリッジ1の斜視図である。It is a perspective view of the cartridge 1 of FIG. 図1の入力装置5の装着状態を示す図である。It is a figure which shows the mounting state of the input device 5 of FIG. 図1のカートリッジ1の電気的構成を示す図である。It is a figure which shows the electrical constitution of the cartridge 1 of FIG. 図1のテレビジョンモニタ7に表示される運動支援画面の例示図である。It is an illustration figure of the exercise assistance screen displayed on the television monitor of FIG. 図1のテレビジョンモニタ7に表示される運動支援画面の他の例示図である。It is another example figure of the exercise assistance screen displayed on the television monitor 7 of FIG. 図1のテレビジョンモニタ7に表示される運動支援画面のさらに他の例示図である。FIG. 12 is still another example of an exercise support screen displayed on the television monitor 7 of FIG. 1. 図1のテレビジョンモニタ7に表示される運動支援画面のさらに他の例示図である。FIG. 12 is still another example of an exercise support screen displayed on the television monitor 7 of FIG. 1. 図1のテレビジョンモニタ7に表示される運動支援画面のさらに他の例示図である。FIG. 12 is still another example of an exercise support screen displayed on the television monitor 7 of FIG. 1. 図4のマルチメディアプロセッサ21による処理の全体的な流れを示すフローチャートである。5 is a flowchart showing an overall flow of processing by the multimedia processor 21 of FIG. 4. 図10のステップS3のアプリケーションプログラムが実行する処理の1つである撮影処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the imaging | photography process which is one of the processes which the application program of FIG.10 S3 performs. 図10のステップS3のアプリケーションプログラムが実行する処理の1つである注目点抽出処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the attention point extraction process which is one of the processes which the application program of FIG.10 S3 performs. 図12のステップS61の2点抽出処理の流れを示すフローチャートである。It is a flowchart which shows the flow of 2 point | piece extraction processing of step S61 of FIG. 図10のステップS3のアプリケーションプログラムが実行する処理の1つである左右決定処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the left-right determination process which is one of the processes which the application program of FIG.10 S3 performs. 図10のステップS3のアプリケーションプログラムが実行する処理の1つであるステップ判定処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the step determination process which is one of the processes which the application program of step S3 of FIG. 10 performs. 図10のステップS3のアプリケーションプログラムが実行する処理の1つであるジャンプ判定処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the jump determination process which is one of the processes which the application program of step S3 of FIG. 10 performs. 図1のマルチメディアプロセッサ21が実行する運動支援処理の状態遷移図である。It is a state transition diagram of the exercise | movement assistance process which the multimedia processor 21 of FIG. 1 performs. 図17のステップS257−Nで実行される第N課目の実行ルーチン(時間が終了条件)のフローチャートである。FIG. 18 is a flowchart of an execution routine (time condition) for the Nth section executed in step S257-N in FIG. 17. 図18のステップS299の入力応答処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the input response process of step S299 of FIG. 図17のステップS257−Nで実行される第N課目の実行ルーチン(音楽終了が終了条件)のフローチャートである。FIG. 18 is a flowchart of an execution routine (end of music is an end condition) of the Nth section executed in step S257-N of FIG. 図17のステップS257−Nで実行される第N課目の実行ルーチン(失敗が終了条件)のフローチャートである。FIG. 18 is a flowchart of an execution routine (failure is an end condition) for the Nth section executed in step S257-N in FIG. 17;

符号の説明Explanation of symbols

1…カートリッジ、3…アダプタ、5…入力装置、7…テレビジョンモニタ、11…再帰反射シート、15…赤外発光ダイオード、17…撮像ユニット、21…マルチメディアプロセッサ、23…外部メモリ、31…イメージセンサ。 DESCRIPTION OF SYMBOLS 1 ... Cartridge, 3 ... Adapter, 5 ... Input device, 7 ... Television monitor, 11 ... Retroreflective sheet, 15 ... Infrared light emitting diode, 17 ... Imaging unit, 21 ... Multimedia processor, 23 ... External memory, 31 ... Image sensor.

Claims (5)

プレイヤに対して足踏みをガイドする映像を生成する映像生成手段と、
プレイヤの左足に装着された第1反射体及び右足に装着された第2反射体を撮像する撮像手段と、
前記撮像手段による撮像の結果に基づいて、前記第1反射体及び前記第2反射体を検出する検出手段と、
前記検出手段による検出の結果に基づいて、前記第1反射体の動き及び前記第2反射体の動きを解析する解析手段と、
前記解析手段による解析の結果に応じた情報処理を実行して映像に反映する処理手段と、を備え、
前記解析手段は、
所定時間間隔で生成される同期信号に同期して、前記第1反射体の垂直方向の速度(以下、「第1垂直速度」と呼ぶ。)を算出する手段と、
前記第1垂直速度が所定値以下の回数が連続して第1所定回数に等しくなる前に、前記第1垂直速度が前記所定値を超えた回数が第2所定回数に等しくなったときに、左足でステップが行なわれたと判断する手段と、
前記同期信号に同期して、前記第2反射体の垂直方向の速度(以下、「第2垂直速度」と呼ぶ。)を算出する手段と、
前記第2垂直速度が前記所定値以下の回数が連続して前記第1所定回数に等しくなる前に、前記第2垂直速度が前記所定値を超えた回数が前記第2所定回数に等しくなったときに、右足でステップが行なわれたと判断する手段と、を含む運動支援装置。
Image generation means for generating an image for guiding a player to step on;
Imaging means for imaging the first reflector attached to the player's left foot and the second reflector attached to the right foot;
Detection means for detecting the first reflector and the second reflector based on a result of imaging by the imaging means;
Analysis means for analyzing the movement of the first reflector and the movement of the second reflector based on the result of detection by the detection means;
Processing means for executing information processing according to the result of analysis by the analysis means and reflecting the result in the video,
The analysis means includes
Means for calculating a vertical velocity of the first reflector (hereinafter referred to as “first vertical velocity”) in synchronization with a synchronization signal generated at a predetermined time interval ;
When the number of times the first vertical speed exceeds the predetermined value becomes equal to the second predetermined number before the number of times the first vertical speed is equal to or less than the predetermined value is continuously equal to the first predetermined number of times, Means for determining that the step was performed with the left foot;
Means for calculating a vertical velocity of the second reflector (hereinafter referred to as “second vertical velocity”) in synchronization with the synchronization signal ;
Before the second vertical velocity equal to the first predetermined number of times of less than the predetermined value in succession, the number of times that the second vertical velocity exceeds said predetermined value is equal to said second predetermined number of times Means for determining that a step has been performed with the right foot.
前記第1垂直速度及び前記第2垂直速度は、それぞれ、垂直下方向の速度である、請求項1記載の運動支援装置。   The exercise support apparatus according to claim 1, wherein each of the first vertical speed and the second vertical speed is a vertical downward speed. 前記解析手段は、
前記同期信号に同期して、前記第1反射体及び前記第2反射体の双方が垂直方向に移動しているか否かを判断する手段と、
前記第1反射体及び前記第2反射体の双方が垂直方向に移動している状態が連続して第3所定回数発生したときに、前記プレイヤがジャンプしたと判断するジャンプ判断手段を含む請求項1又は2記載の運動支援装置。
The analysis means includes
Means for determining whether both the first reflector and the second reflector are moving in the vertical direction in synchronization with the synchronization signal;
And a jump determining means for determining that the player has jumped when a state in which both the first reflector and the second reflector are moving in the vertical direction occurs continuously for a third predetermined number of times. The exercise support apparatus according to 1 or 2.
前記ジャンプ判断手段による判断の際の前記垂直方向は、垂直上方向である、請求項3記載の運動支援装置。   The exercise support apparatus according to claim 3, wherein the vertical direction in the determination by the jump determination unit is a vertical upward direction. プレイヤの左足に装着された第1反射体及び右足に装着された第2反射体を撮像する撮像手段による撮像結果を処理して映像に反映するコンピュータプログラムであって、
前記プレイヤに対して足踏みをガイドする映像を生成するステップと、
前記撮像手段による撮像の結果に基づいて、前記第1反射体及び前記第2反射体を検出するステップと、
検出する前記ステップによる検出の結果に基づいて、前記第1反射体の動き及び前記第2反射体の動きを解析するステップと、
解析する前記ステップによる解析の結果を映像に反映するステップと、をコンピュータに実行させ、
解析する前記ステップは、
所定時間間隔で生成される同期信号に同期して、前記第1反射体の垂直方向の速度(以下、「第1垂直速度」と呼ぶ。)を算出するステップと、
前記第1垂直速度が所定値以下の回数が連続して第1所定回数に等しくなる前に、前記第1垂直速度が前記所定値を超えた回数が第2所定回数に等しくなったときに、左足でステップが行なわれたと判断するステップと、
前記同期信号に同期して、前記第2反射体の垂直方向の速度(以下、「第2垂直速度」と呼ぶ。)を算出するステップと、
前記第2垂直速度が前記所定値以下の回数が連続して前記第1所定回数に等しくなる前に、前記第2垂直速度が前記所定値を超えた回数が前記第2所定回数に等しくなったときに、右足でステップが行なわれたと判断するステップと、を含むコンピュータプログラム。
A computer program for processing an imaging result by an imaging means for imaging a first reflector mounted on a player's left foot and a second reflector mounted on a right foot and reflecting the result in an image,
Generating an image for guiding the player to step on;
Detecting the first reflector and the second reflector based on the result of imaging by the imaging means;
Analyzing the movement of the first reflector and the movement of the second reflector based on the detection result of the step of detecting;
Reflecting the result of the analysis in the step of analyzing to a video, and causing the computer to execute,
The step of analyzing comprises
Calculating a vertical velocity of the first reflector (hereinafter referred to as “first vertical velocity”) in synchronization with a synchronization signal generated at a predetermined time interval ;
When the number of times the first vertical speed exceeds the predetermined value becomes equal to the second predetermined number before the number of times the first vertical speed is equal to or less than the predetermined value is continuously equal to the first predetermined number of times, Determining that a step has been performed with the left foot;
Calculating a vertical velocity of the second reflector (hereinafter referred to as “second vertical velocity”) in synchronization with the synchronization signal ;
Before the second vertical velocity equal to the first predetermined number of times of less than the predetermined value in succession, the number of times that the second vertical velocity exceeds said predetermined value is equal to said second predetermined number of times And a step of determining that a step has been performed with the right foot.
JP2007062236A 2007-03-12 2007-03-12 Exercise support apparatus and computer program Expired - Fee Related JP5055548B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007062236A JP5055548B2 (en) 2007-03-12 2007-03-12 Exercise support apparatus and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007062236A JP5055548B2 (en) 2007-03-12 2007-03-12 Exercise support apparatus and computer program

Publications (2)

Publication Number Publication Date
JP2008220582A JP2008220582A (en) 2008-09-25
JP5055548B2 true JP5055548B2 (en) 2012-10-24

Family

ID=39839884

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007062236A Expired - Fee Related JP5055548B2 (en) 2007-03-12 2007-03-12 Exercise support apparatus and computer program

Country Status (1)

Country Link
JP (1) JP5055548B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102814037A (en) * 2012-08-28 2012-12-12 洪德伟 Body-building exercise prompting method and related device
CN104511149B (en) * 2013-10-08 2017-03-01 期美科技股份有限公司 Training and management system
JP2016537112A (en) * 2013-11-26 2016-12-01 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Sleep mask gamification
KR101559120B1 (en) * 2014-07-24 2015-10-13 엄성렬 Portable self-scoring apparatus for racket sports
CN105107184B (en) * 2015-08-26 2017-10-31 上海斐讯数据通信技术有限公司 Exercise training method and system, intelligent glasses and exercise trainer

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH055628A (en) * 1991-05-16 1993-01-14 Misuzu Kogyo:Kk Pedometer
JPH11128392A (en) * 1997-10-24 1999-05-18 Sanyo Electric Co Ltd Physical training supporting device
JP2002248093A (en) * 2001-02-27 2002-09-03 Taito Corp Individual power-of-locomotion judging system
JP3685741B2 (en) * 2001-06-13 2005-08-24 ヒロセ電機株式会社 Momentum measuring device
JP2003325971A (en) * 2002-05-08 2003-11-18 Sega Toys:Kk Game device and input device for game
JP2004344418A (en) * 2003-05-22 2004-12-09 Anima Kk Three-dimensional motion analyzing device
JP4477962B2 (en) * 2003-07-28 2010-06-09 浜松ホトニクス株式会社 Stride measuring device
JP2008512643A (en) * 2004-09-09 2008-04-24 新世代株式会社 Tilt detection method and entertainment system
WO2006070914A1 (en) * 2004-12-28 2006-07-06 Ssd Company Limited Simulated experience apparatus, energy consumption calculation method, squatting motion detection apparatus, exercise assist apparatus, animation method, exercise amount management apparatus, athletic ability measurement apparatus, reflexes ability measurement apparatus, and audio-visual system
JP2007144107A (en) * 2005-10-25 2007-06-14 Vr Sports:Kk Exercise assisting system

Also Published As

Publication number Publication date
JP2008220582A (en) 2008-09-25

Similar Documents

Publication Publication Date Title
JP5080196B2 (en) Program, information processing apparatus, information processing system, and information processing method
US8009866B2 (en) Exercise support device, exercise support method and recording medium
JP5819580B2 (en) GAME PROGRAM, GAME DEVICE, GAME SYSTEM, AND GAME CONTROL METHOD
JP5427346B2 (en) Load detection program, load detection device, load detection system, and load detection method
CA2691992C (en) Information inputting device, information outputting device and method
US8707768B2 (en) Computer readable storage medium storing information processing program and information processing apparatus
JP5161182B2 (en) Information processing program and information processing apparatus
JP5130504B2 (en) Information processing apparatus, information processing method, program, and storage medium
JP5055548B2 (en) Exercise support apparatus and computer program
WO2007069752A1 (en) Exercise assisting method, exercise appliance, and information processor
US10247626B2 (en) Motion recognition method and apparatus
JP2011067239A (en) Program and device for information processing
JPWO2007077851A1 (en) Production method and operation
US20100215215A1 (en) Object detecting apparatus, interactive system, object detecting method, interactive system realizing method, and recording medium
KR20050047024A (en) Dance game apparatus for arcade using image recognition and method thereof
US20130172081A1 (en) Game device, game control method, and game control program, for controlling picture drawing game
JP2011067435A (en) Information processing system, information processing method, computer program, and storage medium
JP3866474B2 (en) GAME DEVICE AND INFORMATION STORAGE MEDIUM
JP2011101765A (en) Game apparatus
JP2011101765A5 (en)
JP6651091B2 (en) Game system and computer program used therefor
KR20200079519A (en) Game machine, game system, memory device having computer program stored therein, and control method
EP3165266B1 (en) Information processing system, information processing apparatus, information processing method, information processing program, and hand-held information processing apparatus
US20130059661A1 (en) Interactive video game console
JP5694581B1 (en) Information processing apparatus and information processing method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100310

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110510

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111104

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111104

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120528

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120611

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120705

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120705

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150810

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees