WO2007069618A1 - 練磨方法、練磨装置、及び、コーディネーショントレーニング方法 - Google Patents

練磨方法、練磨装置、及び、コーディネーショントレーニング方法 Download PDF

Info

Publication number
WO2007069618A1
WO2007069618A1 PCT/JP2006/324788 JP2006324788W WO2007069618A1 WO 2007069618 A1 WO2007069618 A1 WO 2007069618A1 JP 2006324788 W JP2006324788 W JP 2006324788W WO 2007069618 A1 WO2007069618 A1 WO 2007069618A1
Authority
WO
WIPO (PCT)
Prior art keywords
guide
movement
guide object
ability
training
Prior art date
Application number
PCT/JP2006/324788
Other languages
English (en)
French (fr)
Inventor
Hiromu Ueshima
Kei Fukudome
Original Assignee
Ssd Company Limited
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ssd Company Limited filed Critical Ssd Company Limited
Priority to JP2007550184A priority Critical patent/JPWO2007069618A1/ja
Priority to US12/096,791 priority patent/US20090305207A1/en
Priority to EP06834543A priority patent/EP1970104A4/en
Publication of WO2007069618A1 publication Critical patent/WO2007069618A1/ja

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B22/00—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements
    • A63B2022/0092—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements for training agility or co-ordination of movements
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/806—Video cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5258—Changing parameters of virtual cameras by dynamically adapting the position of the virtual camera to keep a game object or game character in its viewing frustum, e.g. for tracking a character or a ball
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55—Controlling game characters or game objects based on the game progress
    • A63F13/57—Simulating properties, behaviour or motion of objects in the game world, e.g. computing tyre load in a car race game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1012—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/64—Methods for processing data by generating or executing the game program for computing dynamical parameters of game objects, e.g. motion determination or computation of frictional forces for a virtual car
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A63F2300/6684—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera by dynamically adapting its position to keep a game object in its viewing frustrum, e.g. for tracking a character or a ball

Definitions

  • the present invention relates to a training method and related technology for improving human coordination ability.
  • Background technology
  • JP 2 0 4-2 1 6 0 8 3 is a game machine that traces a real image while observing a real image while observing the image, and thinking ability.
  • a game machine that improves concentration and nerves, and is useful for prevention of old age or rehabilitation is disclosed.
  • An object of the present invention is to provide a method capable of improving the accuracy and speed of command transmission when a movement indicated by information recognized through a sensory nerve is performed on a body through a motor nerve and its related To make technology.
  • a method includes: a plurality of fibers independently defined for each human body; a plurality of guide objects corresponding to a plurality of ridges; and A step of displaying multiple cursors corresponding to multiple tiHEs of the body on the display device, and each ItJlE guide object in the direction determined independently for each guide object, along the corresponding fiilE ⁇ path Moved A step of imaging a plurality of tfiiE parts of the body, a step of detecting a forward movement of the body based on an image obtained by tins imaging, and a movement of each part of the detected body In response, moving the corresponding edit cursor.
  • each guide object is moved in the direction determined independently for each guide object along a plurality of routes determined independently for each part of the body, and is accordingly followed.
  • the human body processes and transmits a series of information: sensory organs ⁇ sensory gods ⁇ brain ⁇ luck ⁇ ⁇ ⁇ body standing. Therefore, it is expected that it can contribute to improvement of human dexterity.
  • the movements indicated by the information recognized through the sensory system are instructed to each part of the body through the motor nerves, it will contribute to improving the accuracy and speed of the command transmission.
  • the present invention is expected to contribute to the improvement of human coordination ability.
  • the training method of the present invention can also be called a coordination training method. .
  • coordination ability includes rhythm ability, balance ability, conversion ability, ®S ability, connection ability, localization ability, and 1 ”ability.
  • Rhythm ability is the ability to express with the body the rhythm of movement as seen with the eyes, heard with the ears, or imaged with the head. Roses and abilities are the forces that reestablish a balanced posture while maintaining a correct balance.
  • Transformability is the ability to quickly switch movements as the situation changes.
  • Ability is the ability to respond quickly and appropriately to a signal.
  • Coupling ability is the power that smoothly moves the entire body, that is, the ability to move the muscles and joints of each part of the body smoothly and without waste.
  • Localization ability is the ability to grasp the positional relationship between what is moving and yourself.
  • Knowledge IJ ability is the ability to operate limbs and tools in coordination with vision (hand-eye coordination (hand-eye coordination), foot-eye coordination (foot-eye coordination)) and operate precisely.
  • Hand's eye coordination is sometimes called eye-hand coordination.
  • foot-and-foot coordination is sometimes called eye-and-foot coordination.
  • the present invention can be expected to contribute to the improvement of identification ability (hand 'eye coordination).
  • the guide objects are moved according to the music.
  • the operator can perform an operation in accordance with music, and can support the operator to perform an operation that matches the operation instruction by the guide object.
  • the plurality of paths include at least two different paths.
  • each of the two different trans-hoofs has a loop, and the two guide objects corresponding to the two paths move clockwise and counterclockwise, respectively. According to this configuration, it is possible to further increase the difficulty of the operation instructed by the guide object.
  • each of the two paths of m3 ⁇ 4 is 1 1 ⁇ and the two l self-guide objects corresponding to the two paths are a clockwise rotation, a counterclockwise rotation, Move in the same direction.
  • the plurality of processes include at least the same second path.
  • each of the same two routes is not-topped, and the two tin guide objects corresponding to the two routes move clockwise and counterclockwise + respectively. According to this configuration, it is possible to further increase the difficulty of the operation instructed by the guide object.
  • each of the tii3 ⁇ 4paths is composed of one or more segments.
  • various processes for example, movement control of guide objects and display control of auxiliary segments described later
  • the IB method further includes the step of displaying an auxiliary object at the end of the segment at the timing when the guide object arrives at the end of the tin segment.
  • the above method S3 ⁇ 4 further includes the step of changing the direction of movement of the tfilH guide object and Z or IE ⁇ .
  • the method further includes a step of determining whether or not.
  • the operator can recognize whether or not the operation according to the guide object has been performed.
  • the image attached to the body of the ttif is picked up.
  • the retroreflector is imaged and the method of ttiia is The method further includes intermittently irradiating light to the tins retroreflector that has been mounted or gripped.
  • the movement of each part of the body can be detected with simple processing and a simple configuration.
  • the illuminant attached or gripped on each itllE stand of the body is imaged.
  • the movement of each part of the body can be detected with simple processing and a simple configuration.
  • the plurality of parts of the body are both hands.
  • the! B step that moves along the second road starts to move the ffllE guide object when the corresponding cursor overlaps the corresponding ttilB guide object.
  • the training method includes a plurality of guides corresponding to a plurality of parts of the human body.
  • a step of moving each filfE guide object according to the step of displaying a plurality of cursors corresponding to a plurality of objects and body knitting on the display device, and ⁇ ⁇ obtained independently for each guide object And detecting the movement of each part of the body tilt m, and moving the corresponding heel cursor in response to the movement of each til! H stand of the body.
  • the method includes a step of performing an operation instruction determined independently for each standing of the human body through the display device, and each operation instruction for each part of the body is: Includes real-time instructions to power each part of the body tiilE simultaneously.
  • the training apparatus includes a plurality of input devices corresponding to a plurality of parts of the human body, a plurality of paths defined independently for each part of the human body, and a plurality of editing devices.
  • a display control means for displaying a plurality of guide objects corresponding to a plurality of routes and a plurality of cursors corresponding to the plurality of parts of the body on a display device, and each tfiis guide object In the direction, ⁇ ⁇
  • detecting means for detecting movements of the plurality of input devices based on the image obtained by the selfish image pickup means, and moving the corresponding tins cursor in accordance with the movements of the self-input devices.
  • Second movement control hand equipped with a. , '
  • the device includes a weight with a predetermined weight so that the human body can move the body part under load. , ⁇ According to this configuration, since the movement of each body stand according to the guide object becomes an exercise, in addition to the above effects, it can contribute to the maintenance or promotion of health.
  • the coordination training method outputs a predetermined knowledge to the display device and / or outputs a predetermined 1 example as a sound to the sound output device; and Based on the image obtained by IE imaging, the step of detecting the movement of each body's fillE, the detection result of the movement of each part of the body tilt, and the predetermined amount A tfHE predetermined awakening, in cooperation with the body's own body, to localize human ability, conversion ability, rhythm ability, ability, balance ability, connection ability, Or a task to train f3 ⁇ 43 ⁇ 4ij ability or any combination of them
  • This coordination training method can be used to display multiple cursors corresponding to multiple self-independence of the body in the ffrlB table.
  • the method may further include displaying on a display device.
  • FIG. 1 is a block diagram showing the overall configuration of a training system according to an embodiment of the present invention.
  • FIG. 2 is a perspective view of the input device 3 L or 3 R of FIG.
  • FIG. 3 is a diagram showing a state in which the input devices 3 L and 3 R of FIG. 1 are respectively attached to the left and right hands.
  • FIG. 4 is an exemplary diagram showing the time variation of the training screen by the training system of FIG.
  • FIG. 5 is an illustration of a path object displayed on the training screen by the training system of FIG.
  • FIG. 6 shows an example of a training screen by the training system of FIG.
  • FIG. 7 is a diagram showing an electrical configuration of the information processing apparatus 1 of FIG.
  • FIG. 8 is a transition diagram showing the flow of processing executed by the multi-processor 50 of FIG. '
  • FIG. 9 is a flowchart showing the overall processing flow of the multimedia processor 50 in FIG.
  • FIG. 10 is a flowchart showing a process that is one of the processes executed by the application program in step S 13 of FIG.
  • FIG. 11 is a flowchart illustrating a sheet detection process that is one of the processes performed by the application program in step S 13 of FIG.
  • FIG. 12 is an explanatory diagram of a method of detecting the attention points of the retroreflective sheets 15 L and 15 R from the image DI. ,
  • FIG. 13 is a flowchart showing the flow of the overlap determination process performed in the process for stage ⁇ of step S 3 ⁇ in FIG.
  • FIG. 14 (a) is an example of a route table that is referred to when displaying objects and guide objects.
  • FIG. 14 (b) is an exemplary diagram of a 3 ⁇ 4g table that is referred to when displaying a guide object.
  • FIG 15 is one of the processes that the application program in step S1 3 of Figure 9 actually performs.
  • FIG. 16 is a flowchart showing a control process (state is cleared) which is one of the processes executed by the application program in step S 13 of FIG.
  • FIG. 17 is another example of an input device that can be used in the training system of FIG.
  • FIG. 18 is another example of the training screen by the training system of FIG.
  • FIG. 19 is an illustration of another mounting method of the input device 3 of FIG.
  • FIG. 20 is an exemplary view of still another mounting method of the input device 3 of FIG.
  • FIG. 21 is an illustration of a modified example of how the guide object is moved by the training system of FIG.
  • FIG. 22 is a flowchart showing the flow of onibarab determination processing executed in the modified example.
  • FIG. 1 is a block diagram showing the overall configuration of a training system according to an embodiment of the present invention.
  • the training system includes an information processing device 1, input devices 3L and 3L, and a television monitor 5.
  • input devices 3L and 3L input devices 3L and 3L
  • television monitor 5 input devices 3.
  • FIG. 2 is a diagram of the input device 3 of FIG. As shown in (2), the input device 3 is formed by passing the bell 1. 9 through the bottom side of the transparent body 1 7 and fixing the benore 19 inside the transparent body 1 7. A retroreflective sheet 15 is attached over the entire inner surface of the transparent body 17 (excluding the bottom side). How to use the input device 3 will be described later.
  • the transparent body 1 .7 of the input device 3 L and the retroreflective sheet 15 are respectively transferred to the transparent body 17 L
  • the transparent body 17 and the retroreflective sheet 15 of the input device 3R are expressed as the transparent body 17R and the retroreflective sheet 1'5R, respectively.
  • the information processing unit 1 is connected to the television monitor 5 by the AV cable 7. Further, although not shown, the information processing unit 3 1 is supplied with a power source ma by an AC adapter or a battery. A switch ( ⁇ f in the figure) is attached to the back of the information processing device ⁇ 3 position 1.
  • the information processing apparatus 1 is provided with an infrared filter 20 that provides infrared light only on the front side of the information processing apparatus 1, and four red lights that generate infrared light so as to surround the infrared filter 20; Diode 9 is exposed.
  • an image sensor 54 described later is disposed on the back side of the infrared filter 20, an image sensor 54 described later is disposed.
  • the four red light diodes 9 emit infrared light intermittently. Then, the infrared light from the red light diode 9 is input by the recursive sheet 15 attached to the input device 3 and input to the image sensor 54 provided on the back side of the infrared filter 20. In this way, the input device 3 is opened by the image sensor 54. .
  • Information processing unit 1 is an input device 3 moved by the player, Obtain ⁇ of the image signal when irradiated with infrared light and the image signal when not irradiated, and based on this signal Di ( ⁇ m image DI), the position of input device 3 (that is, retroreflective sheet 15) Etc. are calculated. .
  • the noise due to light other than the light of the recursive sheet 15 or the like is eliminated as much as possible, and the recursive sheet I 15 can be detected with high accuracy. It should be noted that the generation of image DI by strobe expansion is not necessarily an essential requirement.
  • FIG. 3 is an explanatory diagram showing an example of a usage state of the input devices 3 L and 3 R of FIG.
  • the operator puts the middle finger through the belt 19 in FIG.
  • the transparent body 1 7, that is, recursive ⁇ sheet 1 5 is 3 ⁇ 4X, this recursive sheet 1 5 is shot.
  • the transparent body 17 is squeezed, the transparent body 17, that is, the retroreflective sheet 15 is hidden in the hand and is not made into the image sensor 54.
  • the operator powers the hand while keeping his hand open toward the image sensor 54. Then, since the recursive sheet 15 can be opened by the image sensor 54, the movement of the hand can be detected. Later, this detection result is used for. Note that the operator can perform input / non-input to the information processing unit 1 by causing the recursive Sli sheet 15 to be turned on and off by opening and closing the hand.
  • FIG. 4 is an exemplary diagram showing the time change of the training screen by the training system of FIG.
  • mano-media processor 50 displays a training screen on television dried unit 5 that includes fiber object 24 in the left region and path object 28 in the right region.
  • the left area of the training screen is set for the left hand, and the right area is set for the right hand.
  • the media processor 50 displays the cursor 70 L and 7 OR on the television monitor 5.
  • the multimedia processor 50 recursively moves the cursor 70 0 L with the movement of the recursive sheet 1 5 L made by the image sensor 5 4, and recursively moves the sheet 1 5 R with the image sensor 5 4 ⁇ Cursor 7 Link OR.
  • the colors of the cursors 70 L and 7 O R are preferably transparent (excluding the outline) or translucent. This is because the operator can see the guide object and focus on it even when the cursor is over the guide object.
  • the state of this training screen is the state at the start.
  • the multimedia processor 50 displays the left-hand guide object 40 L at the lower end of the path object 24 and the right-hand guide object in the upper right corner of the object 28. Display 4 0 R.
  • the multimedia processor 50 then converts the guide object 40 L and the guide object 40 R to the music (for example, tempo, beat, time signature, rhythm, melody, etc.), respectively.
  • ⁇ 3 ⁇ 4 Move along objects 2 4 and 2 8. 'In this case, the start is simultaneous.
  • the guide object 40 L reciprocates in the path object 24, and the guide object 40 moves in the clockwise direction in the object 28. ,
  • guide objects 40 when it is not necessary to distinguish between the left and right of the guide objects 40 0 L and 4 0 R, they are described as guide objects 40.
  • FIG. 4 (b) a state is shown in which the guide objects 4OL and 4OR are further advanced from the state of FIG. 4 (a).
  • the operator opens the left and right hands wearing the input devices 3 L and 3 R and points the information processing device 1 toward the information processing device 1 and moves the left and right hands as the guide objects 40 L and 4 OR move. move. That is, the operator moves the left and right hands, and tries to always overlap the cursors 70 0 L and 7 H R linked with the movements of the hands on the guide objects 40 0 L and 4 0 R, respectively. In other words, the operator moves his left and right hands to try to make the same movement at the same position as the Sonore 70 L and 7 O R forces, guide objects 40 L and 4 O R. ''
  • the operator can predict how the guide objects 40L and 40R will move from the current position (that is, the moving direction). Also, the guide objects; 40 L and 40 R will move in time with the music, so the operator will recognize the moving speed of the 'guide objects 40 0 L and 4 R by listening to the music. it can. These : force the operators 7 OL and 70 R to capture the operator who always tries to overlap the moving guide objects 40 L and 4 OR.
  • the guide object 40L and 40R force is shown as being further advanced from the state of FIG. 4 (b).
  • the auxiliary object 42 L is displayed at the end and disappears immediately (displayed for a moment).
  • the auxiliary object 4 2 R is displayed at the corner and disappears immediately (displayed for a moment).
  • auxiliary objects 4 2 L and 4 2 R are expressed as auxiliary objects 4 2.
  • segment is a unit that constitutes an object.
  • Object 2 4 consists of one segment. That is, the fiber object 2 4 The whole is one segment.
  • the path object 28 is composed of four segments. That is, each side of the path object 28 is one segment.
  • the multimedia processor 50 controls the movement of the guide object so that the time for the guide object to move from end to end is the same. Therefore, the guide object 40 L, the time required to move from one end of the path object 24 to the other end, and the guide object 40 R force from one end of one side of the path object 2 8 ftll3 ⁇ 4 " The time for moving to the end is the same, and the force ⁇ also starts moving at the same time starting from the end of the segment, that is, as shown in Fig. 4 (a) ' Guide object 4 0 L starts moving from the end of path object 24, and guide object 4 OR starts moving from the upper right corner of object 2 8 at the same time.
  • the auxiliary object 4 2 L and the auxiliary object 4 2 R are displayed and disappear at the same timing.
  • the guide object 40 L and 40 the display interval of the auxiliary objects 4 2 L and 4 2 R matches the music. Therefore, the auxiliary objects 4 2 L and 4 2 R also serve to assist the operator who always tries to overlay the cursors 70 L and 70 R on the moving guide objects 40 L and 40 R. .
  • the mano ⁇ "media processor 5 and the operator performed a predetermined number of segments N s at the same time on the left and right to match the guide object 40 L and 4 0 R ⁇ ⁇ That is, the guide object 40 L and 4 OR
  • the cursors 70 L and 7 OR move at the same time for a predetermined number of segments N s
  • the character “good” is displayed on the screen.
  • the decision to display the characters “go o .d” may be made for both the left and right sides.
  • the multimedia processor 5 0 displays the character “good” for a predetermined number of times N g, that is, the predetermined number of segments N s X for a predetermined number of times N g, and the cursor is superimposed on the guide objects 4 0 L and 4 0 R 7 When 0 L and 7 0 R are moved ⁇ , it is determined that the screen has been cleared by the operator, the screen is terminated, and the next different screen is displayed. Other examples of the screen will be explained later. If the screen cannot be cleared after a certain period of time, the multimedia processor 50 ends the training screen display processing.
  • the eye ⁇ visual god that is not performed in normal life The human body processes and transmits a series of information: brain ⁇ god of movement ⁇ ⁇ hands and arms. Therefore, it is expected that the system of this embodiment can contribute to the improvement of human dexterity. It is also expected that when the movement recognized by the information recognized through the visual nerve is performed on the hand and arm through the luck SJ ⁇ , it can contribute to improving the accuracy and speed of the command transmission.
  • FIG. 5 in the form of c present embodiment is an illustration of a path object displayed on ⁇ screen ⁇ system according to FIG. 1, Peng Obujekuto 2 0 shown in FIG. 5 (a) ⁇ FIG 5 (g), 2 2 , 2 4, 2 6, 2 8, 3 0 and 3 2 Any combination of 2 [From this, the screen is constructed.
  • the set ⁇ : may be a combination of the same route objects or a combination of different route objects.
  • the moving direction of the guide object 40 may be clockwise or counterclockwise, and can be arbitrarily selected.
  • the starting point of the guide object 40 can also be arbitrarily selected as long as it is the end of the segment.
  • Each of the path objects 2 0 to 26 in FIG. 5 (a) to FIG. 5 (d) consists of one segment below.
  • the path object 28 in Fig. 5 (e) consists of 4 segments. This (, one side corresponds to one segment ⁇ ⁇ .
  • the path object 30 in Fig. 5 (f) consists of two segments. Each half circle when the circular path object 30 is divided into two vertically is divided into one segment. Respond to
  • the path object 3 2 in Fig. 5 (g) consists of 3 segments.
  • the center of the bottom of the path object 3 2 (arrow A) A segment extends from the force counterclockwise or clockwise to the same position (arrow A) again.
  • «the bottom of the object 3 2 (arrow A) to the bottom right end (arrow C), and further from this right end (arrow C) to the bottom center (arrow A) is one segment.
  • the bottom center of the path object 3 2 (arrow A) is a segment from the left edge of the bottom (arrow B) to the bottom center (arrow A).
  • FIG. 6 shows an example of a training screen by the training system of FIG. Referring to Fig. 6, in this embodiment, the screen from the first training screen to the third screen is prepared.
  • the left area of each training screen shows the path object for the left hand
  • the right area shows the path object for the right hand
  • the tip of the arrow indicates the starting point of the guide object
  • the direction of the arrow indicates the moving direction of the guide object.
  • the path object 28 in FIG. 5 (e) is for the left hand
  • the path object 30 in FIG. 5 (f) is for the right hand.
  • the starting point of the guide object in the left-hand route object 28 is the upper right corner, and the moving direction is clockwise.
  • the starting point of the guide object in the right-hand path object 30 is the top of the circular path object 30 and the moving direction is clockwise.
  • the path object 3 2 in Fig. 5 (g) is not marked with an arrow. Speak.
  • the guide object 40 starts from the bottom left edge (starting with the arrow force, passes through the center of the bottom (arrow A), turns counterclockwise around the circular part, and again reaches the center of the bottom (arrow A). ) And further move to the bottom right end ( ⁇ C), and through the bottom right end (arrow C) and the center of the part (arrow A), turn the circle clockwise, and again, It passes through the bottom center (arrow A) and moves further to the bottom left edge (arrow).
  • the auxiliary object 42 is displayed when the guide object 40 reaches the bottom center (arrow A).
  • the multimedia processor 50 advances the screen in order from the first 3 ⁇ 4 ⁇ screen to the 31st screen. However, the condition is that the operator clears each screen. Furthermore, as shown in Fig. 6, the 0th screen is prepared and inserted between the other screens. .
  • FIG. 7 is a diagram showing an electrical configuration of the information S3 ⁇ 41 in FIG.
  • the information processing apparatus 1 includes a multimedia processor 50, an image sensor 54, a red light diode 9, a ROM (rea do n y memory) 52, and a bus 56.
  • the mano media processor 50 can access the ROM 52 through the bus 56. Therefore, the multimedia processor 50 can read the program stored in the ROM 52 and can read and process the data stored in the ROM 52.
  • the ROM 52 stores in advance a program for performing various processes such as screen control and position detection of the retroreflective sheets 15 L and 15 R, i image data, audio data, and the like.
  • this multimedia processor is a central processing unit (hereinafter referred to as “CPU”), a graphics processing unit (hereinafter referred to as “GPU”), a sound processing unit (hereinafter referred to as “.SPU”). ), Geometry engine (hereinafter referred to as “GE”), ⁇ ' ⁇ external interface block, main RAM, and A / D converter (hereinafter referred to as “ADC”). .
  • CPU central processing unit
  • GPU graphics processing unit
  • .SPU sound processing unit
  • GE Geometry engine
  • ⁇ ' ⁇ external interface block main RAM
  • ADC A / D converter
  • the CPU uses the program stored in ROM52 to perform various calculations and control the entire system.
  • CPU processing related to graphics processing input the ROM 52 program, enlargement / reduction, rotation, and / or motion parameters of each object and each sprite, viewpoint coordinates (camera coordinates), and vectors And so on.
  • viewpoint coordinates camera coordinates
  • vectors And so on a unit composed of one or more polygons or sprites and applying the same enlargement / reduction, rotation, and conversion of motion is called an “object”.
  • the GPU generates a 3D image composed of polygons and splices in real time and converts it into an analog composite video signal.
  • the SPU receives PCM (pulsecode modification) waveform data, amplitude data, and main volume data. Generate and multiply these by analog to produce an analog audio signal.
  • GE uses apologetic operations to display 3D images. Specifically, GE performs operations such as matrix product, beta-raffin transformation, beta-orthogonal transformation, 3 ⁇ 43 ⁇ 43 ⁇ 4 ⁇ transformation, vertex brightness / polygon brightness calculation (vector inner product), polygosh back surface force ring processing, (beta outer product), etc. Hesitate.
  • the external interface block is an interface with peripheral devices (image sensor 54 and infrared light emitting diode 9 in this embodiment) and includes 24 channels of programmable digital input / output (I / O) ports. .
  • the ADC is connected to an analog input port of 4 channels, and through these, an analog signal input from the analog input device (image sensor 5 4 in this embodiment) is converted into a digitalano W symbol.
  • the main RAM is used as a CPU work area, change thread area, and virtual storage management area.
  • the input devices 3 L and 3. R are irradiated with the infrared light of the red light diode 9, and the infrared light is reflected by the retroreflective sheets 15 L and 15 R.
  • This recursive sheet 15 L The light from the R 15 R is emitted by the image sensor 54, and therefore the image signal including the retroreflective sheets 15 L and 1.5 R is output from the image sensor 54.
  • the multimedia The processor 50 intermittently blinks the red and blue light diodes 9 in order to shoot the strobe, so that the image signal when the infrared light is extinguished is also output.
  • the plane image signal is converted into digital data by the ADC incorporated in the multimedia processor 50.
  • the multimedia processor 50 obtains the above-mentioned signal DI (image DI) from the digital image signal inputted via the image sensor 54 or the like, and based on this, the input device 3 L and Detect the presence or absence of input by 3R, and the position of input devices 3L and 3R, etc., and perform calculation, graphics processing, sound processing, etc., and output video signal and audio signal).
  • the video signal and the audio signal are given to the television monitor 5 through the AV cable 7, and accordingly, «is displayed on the television monitor 5, and the speaker (illustration ⁇ ⁇ ) force sound is output.
  • the multimedia processor 50 controls the movement of the cursors 70 L and 7 OR according to the detected positions of the input devices 3 L and 3 R. That is, the multimedia processor 50 extracts the images of the recursive excitation sheets 15 L and 15 R from the image DI force, and calculates the coordinates of the respective attention points on the difference image DI. Then, the multimedia processor 50 obtains the positions of the two points of interest on the screen of the television monitor 5 by converting the coordinates on the image DI of the two points of interest into screen coordinates. The multimedia processor 50 displays the cursors 70 L and 70 R at the positions on the screen of these two points of interest (corresponding to the recursive sheets 15 L and 15 R). The screen coordinate system is used when displaying images on the television monitor 5. Coordinate system.
  • FIG. 8 is a transition diagram showing the flow of training processing executed by the multimedia player 50 of FIG.
  • multimedia processor 50 displays a selection screen (not shown) for selecting a unit on television monitor 5.
  • 10 unit K S is provided.
  • Each unit consists of multiple stages 0 to ⁇ ( ⁇ is an integer).
  • Each stage 0- ⁇ consists of a combination of left and right path objects, guide objects, and cursors.
  • stages 0 to ⁇ are comprehensively written as stage ⁇ .
  • Steps S3-0 to S3— ⁇ corresponding to stages 0 to ⁇ are comprehensively written as step S3— ⁇ . .
  • Unit 1 allows the operator to train one hand at a time. For this reason, each stage ⁇ of Unit 1 first displays a screen containing a path object for the left hand, a guide object ', and a cursor, and then a path object, a guide object for the right hand, and a cursor. A training screen containing is displayed.
  • Units 2-9 allow the operator to perform training with both hands.
  • Each stage ⁇ of unit 2 includes a screen that includes the same path object on the left and right, and has the same left and right guide objects: 3 ⁇ 4S and start position.
  • the start position of the guide project is the starting point of the multiple ends of the path object. .
  • Each stage n of Unit 3 displays a training screen that contains the same path object on the left and right, but has the same speed on the left and right guide objects but different start positions.
  • Each stage n of unit 4 displays a training screen that includes the same path object on the left and right, and has the same start position but different speeds on the left and right guide objects.
  • Each stage n of unit 5 displays a screen that includes the same path object on the left and right, and has different start positions for the left and right guide objects.
  • Each stage n of unit 6 displays a training screen that includes different path objects on the left and right, and has the same speed and start position for the left and right guide objects.
  • Each stage n of unit 7 displays a training screen that includes different path objects on the left and right, with the left and right guide objects at the same speed but different start positions.
  • Each stage n of Unit 8 displays a training screen that includes different path objects on the left and right sides, with different left and right guide object speeds but the same start position.
  • Each stage n of the unit 9 displays a screen including different fiber objects on the left and right sides, and different S ⁇ and start positions of the left and right guide objects.
  • a path object and a guide The start position of the object and the guide object is selected at random. Specifically, a different »is assigned in advance to each» object, each 3 ⁇ 4g of the guide object, and each start position of the guide object.
  • the multimedia processor 50 generates a random number for each of the left and right path objects, guide object examples, and guide object start positions. Then, the multimedia processor 50 selects the path object, the guide object speed, and the start position of the guide object that match the random number that has been generated.
  • step S 3-0 the multimedia processor 50 displays a training screen for stage 0 corresponding to the unit selected in step S 1 on the television monitor 5 and causes the operator to perform.
  • step S 3-0 if the multimedia processor 50 determines that the operator has cleared the stage 0, it proceeds to the next step S 3-1. Thereafter, in the same manner, every time the multimedia processor 50 clears the stage ⁇ at step S 3— ⁇ , the multimedia processor 50 proceeds to step S 3— ( ⁇ + 1), which executes the next stage ( ⁇ + 1). Go. Then, in step S 3— ⁇ , where the last stage ⁇ is Hi? ”, When the multimedia processor 50 determines that the operator has cleared stage N, proceed to step S 5. Step S 5 Then, the multimedia processor 50 displays a unit clear screen (not shown) indicating that the operator has cleared the unit selected in step S1 on the television monitor 5 for a predetermined time, and returns to step S1.
  • a unit clear screen not shown
  • FIG. 9 is a flowchart showing the overall processing flow executed by the multimedia processor 50 in FIG.
  • the multimedia processor 50 enters the initial setting of the system.
  • the multimedia processor 50 performs processing according to the application program stored in the ROM 52.
  • the multimedia processor 50 waits until the interruption force S generated by the video synchronization signal is generated.
  • the multimedia processor 50 returns to the same step S 15 when the interrupt due to the video synchronization signal has not occurred, and proceeds to step S 17 when the interrupt due to the video synchronization signal occurs. For example, an interrupt due to a video sync signal occurs every 1/60 seconds.
  • the multimedia processor 50 updates the image displayed on the television monitor 5 and reproduces the sound. The multimedia processor 50 then returns to step S 1 3 The .
  • the application program that controls the processing of Step 1 3 includes a plurality of programs.
  • a program for photographing processing (Fig. 10)
  • a program for performing detection processing (Fig. I1) of the retroreflective sheet 15 (Fig. 15)
  • a program for video control (Fig. 15)
  • a pitch counter (Fig. 13), which is a software counter.
  • Multimedia processor 5 O i this pitch counter clear, start, and stop judgment is interrupted by the video sync signal S every time it occurs, clear, start or stop according to the judgment result . , ⁇
  • FIG. 10 is a flowchart showing a process which is one of the processes executed by the application program in step S 13 of FIG.
  • multimedia processor 50 turns on infrared light emitting diode 9.
  • the multimedia processor 50 acquires the image data when the infrared light is lit from the image sensor 5.4 and stores it in the main RAM.
  • the image sensor 54 As an example of the image sensor 54, a 32 ⁇ 32 pixel CMOS image sensor is used. Therefore, the image sensor .54 outputs a 3 2 pixel x 3 2 pixel pixel as image data. These pixels are converted into digital detectors by the A ZD converter and stored as elements of the two-dimensional array P 1 [X] [Y] in the main RAM.
  • step S 35 the multimedia processor 50 turns off the infrared light emitting diode 9.
  • step S 37 the multimedia processor 50 obtains image data (3 2 pixel x 3 2 pixel pixel) from the image sensor 5 4 force at the time of infrared light extinction, Store in main RAM. This pixel and this pixel are stored as elements of the two-dimensional array P 2 [X] [Y] on the main RAM.
  • the multimedia processor 50 performs strobe.
  • the horizontal direction is the X axis and the vertical S ⁇ direction is the Y axis.
  • Pixel data is a luminance value.
  • the Mano ⁇ Media Processor 50 calculates the image DI from the image when the infrared light is turned on and the image when the infrared light is turned off, obtained by the ⁇ process shown in Fig. 10 and calculates the image DI as the image DI. Extract the remarks of each of the reflected recursive sheets 1 5 L and 1 5 R. Details are as follows.
  • FIG. 11 is one of the processes executed by the application program in step S1 3 of Figure 9. 6 is a flowchart showing sheet detection processing.
  • the multi-media processor 50 determines that the xenometer P 1 [X] [Y] when the red light is lit and the pixel and data when the infrared light is unlit. P 2 [X] [Y] and 3 ⁇ 4 ⁇ of are calculated and substituted into the array D if [X] [Y].
  • step S53 the multimedia processor 50 proceeds to step S55 if the difference of 32 ⁇ 32 pixels is calculated, and returns to step S5 if not.
  • the multimedia processor 50 repeats the process of step S51 to ⁇ : image data of the image data when the infrared light is emitted and the image data when the infrared light is extinguished.
  • image data 3 ⁇ 4 ⁇ image DI
  • the recursion of the input devices 3L and 3R ⁇ lt sheets 15L and 15R can eliminate noise caused by light other than the light as much as possible.
  • Recursive sheets 1 5 L and 15 R can be detected accurately.
  • FIG. 12 is an explanatory diagram of a method for detecting the respective attention points of the recursive parts 15 L and 15 R (7) from the image DI.
  • FIG. 12 shows an image DI (32 ⁇ 32 pixels) corresponding to difference image data generated from image data when infrared light is turned on and off. In the figure, small squares represent one pixel. The upper left corner is the origin of the XY coordinate axes.
  • This image includes two areas 251 and 253 with large luminance values. Regions 251 and 2 53 are retroreflective sheets 15 L and 15R. However, at this point, it cannot be determined which region corresponds to which retroreflective sheet.
  • the multimedia processor 50 performs scanning in the positive direction of the X axis starting from the coordinates (mi nX, min nY), and first calculates the distance 'LT to the pixel exceeding the threshold T h L. To do. Also, the multimedia processor 50 starts the scan in the negative direction of the X axis starting from the coordinates (max x, min nY), and first calculates i «RT up to the pixels exceeding the threshold Th.L. Put out. In addition, the multimedia processor 50 performs a scan in the positive direction of the X-axis starting from the coordinates (minX, maxY), and starts with £ 3 ⁇ 4
  • the coordinates (max x, min n) are the attention points of the retroreflective sheet 15 R, that is, the right attention point, and when ⁇ LT ⁇ RT, the coordinates are Let (mi nX, min n) be the attention point of the recursive St sheet 15 L, that is, the left attention point.
  • the multimedia processor 50 uses the coordinates (max x, max x) as the attention point of the recursive reflection sheet 15R, that is, the right attention point when LBLB> RB, and when «LB ⁇ RB, Let Zanning (min x, maxY) be the attention of the retroreflective sheet 15 L, that is, the left attention point.
  • step S55 the multimedia processor 50 allows the detection processing of the upper and lower left and right edges (minX, maxX, minY, maxY) described in FIG.
  • step S57 the multimedia processor 50 uses the determination process of the left attention point and the right attention point described in FIG.
  • step S59 the multimedia processor 50 converts the coordinates of the left attention point and the right attention point into screen coordinates.
  • the multimedia processor 50 performs a process of determining whether the force is overlapped with the cursor 70 L and 7 OR force S operated by the operator, respectively, and the guide object 40 L and 4 OR being operated (one-valve determination). . Since the cursors 70L and 70R are displayed at the positions of the left attention point and the right attention point, respectively, the overlap determination is performed based on these seats and the coordinates of the guide objects 40L and 40R. Details are as follows. This determination process is also regarded as a process by the application program executed in step S13 in FIG. 9. For convenience of explanation, the flow chart in FIG. 8 is not a flow chart synchronized with the video synchronization signal. This will be described with reference to a flowchart included in the transfer.
  • FIG. 13 is a flowchart showing the flow of the overlap determination process that is performed in the process for stage n in step S3-n in FIG.
  • multimedia processor 50 initializes various variables (including flags and software counters).
  • step S 73 the multimedia processor 50 determines whether the guide object 40 L force S is located at the start point (end point) of the path object in the left area, and if it is located, proceeds to step S 75 and is located. If yes, go to step S83.
  • the start point of the path object is the start position of the guide object.
  • the guide object goes around once from the predetermined end until it returns to the predetermined end. 1 Ignore. This: ⁇ , the start point and end point are the same.
  • M depends on the type of path object displayed next to it, that is, depending on the number of segments that make up the adjacent path object. (M is 1 or more S3 ⁇ 4)
  • a round trip is one cycle.
  • the path object 28 in the right region is composed of 4 segments, so in the object 2 4 in the left region, 2 round trips are one cycle? ). Therefore, if this ⁇ starts from a predetermined end of the path object 24, the predetermined end of the first round trip does not end, and the predetermined end of the second round trip ends. Thus, even the same end does not end in the middle of the cycle, but only the end of the cycle ends.
  • step S 75 the multimedia processor 50 determines whether the value of the pitch force counter (for left) is greater than or equal to a predetermined value, and if so, proceeds to step S 77. If not, go to Step S79. ,
  • the pitch counter (for left) is a software counter that is incremented in synchronization with the video sync signal while the cursor 70 L overlaps the guide object 40.
  • the predetermined value in step S 75 is a value obtained by multiplying the value of the pitch counter corresponding to one cycle of the path object in the left region by 0.9. Therefore, when “YES” is determined in step S 75, when the cursor 70 0 L reaches the end point, the cursor 70 0 L overlaps the guide object 40 0 L and moves 90% or more in the first cycle. Means that the cycle was successful. In step S75, it is said that the NO power S has been determined.
  • step S 77 after “Y E S” is determined in step S 75, the multimedia processor 50 increments the cyclone counter (for left) by one.
  • step S79 after “NO” is determined in step S75, the multimedia processor 50 clears the cycle counter (for left). In other words, the cycle counter (for left) indicates how many consecutive cycles the operation was successful.
  • step S 8 since guide object 40 L has reached the end point, multimedia port processor 50 clears the pitch counter (for left).
  • step S83 the multimedia processor 50 determines whether the cursor 70L is a force that overlaps the guide object 40L, and the overlapping 3 ⁇ 4 ⁇ proceeds to step S85 and the pitch counter Starts incrementing and overlaps, and ” ⁇ ” proceeds to step S 8 7 to stop incrementing the pitch counter.
  • the cursor 7 0 within the predetermined i «from the center of the guide object 40 L The center of L is Existence is judged to be overlapping, otherwise it is judged not to overlap.
  • step S 8 9 the multimedia processor 50 determines that the left (left path object, guide object 40 0 L, and cursor 7 0 L) and right (right path object, guide object 40, and cursor 7 OR ) For both of these steps, the power to complete the process from step S73 to S87? Is completed: ⁇ proceeds to step S 9 1 and is not completed: ⁇ , that is, if processing for the right has not yet been completed, returns to step S 7 3. In this case, the pitch counter and cycle counter are prepared for the right side.
  • Step S 9 1 Trowel, the multimedia processor 50 determines whether the force has cleared stage n. In this embodiment, it is determined that stage n has been cleared when both the cycle counter (for left) and the cycle counter (for right) have exceeded the predetermined values.
  • the multimedia processor 5 0 determines that stage n has been cleared in step S 9 1, proceeds to step S 93, sets “0 1” to the state flag SF, and ends the overlap determination process. To do.
  • the state flag SF is a flag indicating the state of stage n, and “0 1” means that stage n has been cleared.
  • Step S 9 5 is performed! :, Mano ⁇ Media processor 5 0 determines whether or not the predetermined time has passed since the start of stage n, and the elapsed time advances to step S 9 7, which means that the state flag SF has time over. ”Is set, and the one-barb judgment process ends. If “ ⁇ ” is determined in step S 9 5, that is, in the stage ⁇ ⁇ , in step S 9 9, the multimedia processor 5 0 sets the state flag ⁇ in the state flag SF. Meaning “1 0” is set, and the process returns to step S 7 3.
  • the state flag SF “0 0” is the initial value.
  • the multimedia processor 50 controls the image displayed on the iiMii screen. Among them, the table of path objects and guide objects will be explained. These display controls refer to the route table and speed table.
  • FIGS. 14 (a) and 14 (b) are examples of a route table referred to when displaying a route object and a guide object.
  • the route table shows the numbers assigned to each stage 0 to 35 of one unit and the object displayed in the left (L) area of the screen at the corresponding stage. Is associated with the number assigned to the route object displayed in the right (R) area of the screen at the corresponding stage.
  • the multimedia processor 50 reads the number of the route object to be displayed in the left (L) area and the number of the path object to be displayed in the right (R) area indicated by the route data pointer from the route table.
  • the path object that matches the number is displayed on the left and right. Since the path data pointer is incremented by one, in this example, one unit consists of 36 stages. There are as many such route tables in ROM 52 as there are units.
  • the table shows each stage 0 to 35 of one unit and the guide object that moves on the path object displayed in the left (L) area of the screen at the corresponding stage.
  • the number assigned to is associated with the number assigned to the guide object i moving on the route object displayed in the right (R) area of the screen on the corresponding stage.
  • the number “0” indicates that the guide object is moved by one beat of one segment of the path object in 2 beats (fast)
  • the number “1” indicates that the guide object is «1 object segment. Indicates moving in 4 beats (slow).
  • the multimedia processor 50 indicates the number of the guide object that moves on the path object displayed in the left (L) area and the guide object that moves on the path object displayed in the right (R) area. Read the small number from the tape and move the left and right guided objects with the movement distance that matches the number. Since the boat data pointer is incremented one by one, in this example, one small unit consists of 36 stages. Such speed tables are prepared in R OM 52 for the number of units.
  • the multimedia processor 50 refers to the route table and the 3 ⁇ 43 ⁇ 4 table, so that the ⁇ object and the guide object to be displayed on the left and right in the corresponding stage of the corresponding unit, and You can know the start position (start point), movement 3 ⁇ 4g, and movement direction of the guide object ⁇ , and control the display of the ⁇ & object and the guide object according to these tables.
  • FIGS. 15 and 16 are flowcharts showing the video control process which is one of the processes executed by the application program in step S13 of FIG.
  • multimedia processor 5 0 refers to state flag SF (see steps S 9 3, S 9 7, and S 9 9 in FIG. 1 3).
  • the state of stage n is determined, and if the state flag SF indicates that it is being executed, the process proceeds to step S 1 1 1. If the state flag SF indicates clear, the process proceeds to step S 1 2 1 in FIG. .
  • the state flag SF indicates a time over ⁇ , the mano ⁇ media processor 50 displays, for that. Proceed to the routine for
  • step S 11 1 the multimedia processor 50 calculates the display position of the left-hand guide object 40 L with reference to the above-mentioned route table and table. Specifically, it is as follows. '
  • the number assigned to the route object in the route table is associated with the length of each segment (or segment) constituting the route object and stored in ROM 52.
  • the number assigned to the guide object 40 L in the 3 ⁇ 4g table indicates the speed of the guide object 40 L. Accordingly, the mano-reciprocal media processor 50 calculates the travel time of the guide object 40 L in the segment from the length of the segment of the path object and the speed of the guide object 40 L. Then, the mano-reciprocal media processor 50 sequentially sets the coordinates G L (x, y) of the guide object 40 L so that the guide object 40 L moves the segment during the calculated movement time.
  • the coordinates G L '(x, y) are values in the screen coordinate system. No.
  • step S1.13 the multimedia processor 50 sets the left attention point coordinates TL (x, y) corresponding to the left-hand recursive ⁇ hnt 15L as the display position of the cursor 70L. .
  • the midpoint between the coordinates of the previous left attention point and the coordinates of the current left attention point can be set as the display position of the cursor 70.
  • step S 1 15 the multimedia processor 50 determines the form of the cursor 70 L according to the display position of the left-hand cursor 70. Specifically, it is as follows. Assume that the screen is divided into 16 sections in the ⁇ direction. Then, an image of the cursor 70 L representing a different bill for each area is prepared in the ROM 52. The four areas from the left of the screen are images of the cursor 70 0 L with the left palm rotating counterclockwise, and the fifth area from the left of the screen is the cursor 7 0 L with the left palm not rotating. In the image, the sixth and subsequent pixels from the left of the screen are images of the cursor 70 0 L with the left palm rotated clockwise.
  • step 1 1 7 the multimedia processor 50 determines whether or not the processing of steps S 1 1 1 to S 1 1 5 has been completed for both the left and right sides. If completed, the process proceeds to step S 1 1 9. If it is not completed, ⁇ ⁇ , that is, the processing to the right has not yet been completed, 3 ⁇ 4 ⁇ returns to step S 1 1 1. In this step S 1 1 5, assuming an area obtained by dividing B into 16 in the horizontal direction, an image of a cursor 7 OR representing a different bill for each area is prepared in ROM 5 2.
  • step S 1 1 9 the multimedia processor 50 determines the image information of the guide objects 4 0 L and 4 0 R and the cursors 7 0 L and 7 0 according to the results of steps S 1 1 1 to S 1 1 5 ( The display position (eg, standing position) is written in the corresponding position of the main RAM. The multimedia processor 50 performs the image 3 ⁇ 4 f in step S 17 in FIG. 9 according to the image information written here.
  • step S 1 2 1 in FIG. 16 stage n has been cleared. Get the number of the path object in the area and find the start position (start point) of the guide object associated with it.
  • steps S 1 2 3 and S 1 25 are the same as steps S 1 1 3 and S 1 1 5 in FIG.
  • the multimedia processor 50 determines whether or not the processing of steps S 1 2 1 to S 1 2 5 has been completed for both left and right, and if completed, proceeds to step S 1 2 9.
  • the process proceeds to step S 1 2 1 if it has not been completed, that is, if the process for the right has not been completed yet.
  • step S 1 29 the multimedia processor 50 obtains the left and right object numbers from the position indicated by the path data pointer, and stores the image information (display position and image it ⁇ ) in the corresponding position in the main RAM. Write to.
  • the multimedia processor 50 also follows the results of steps S 1 2 1 to S 1 2 5, the image of the guide object 40 L and 4 OR and the cursor ⁇ 0 L and 70 R. Write the information (display position g3 ⁇ 4 surface image powder storage etc.) to the corresponding position on the main RAM.
  • the multimedia processor 50 updates the image in step S 17 of FIG. 9 according to the image information written here. ,
  • step S 1 31 the multimedia processor 50 advances the route data pointer of the route table and the data pointer of the tape “NO” respectively by one. '
  • each guide is arranged in a direction independently determined for each guide object on the path object allocated independently for each left and right hand.
  • the human body processes and transmits a series of information such as eyes ⁇ visual gods ⁇ brain ⁇ motor nerves-hands and arms, which is not performed in normal life. Therefore, it is expected to contribute to the improvement of human dexterity.
  • the movement of information recognized through the optic nerve is transmitted through the motor nerve. Therefore, it is expected that it can contribute to improving the accuracy and speed of command transmission when left and right hands are used.
  • the training system according to the present embodiment can be expected to contribute to the improvement of human coordination ability.
  • Coordination ability is the ability of a human to smoothly detect a situation with his five senses, judge it with his / her head, and specifically drive a muscle. Therefore, the ⁇ stem apparatus) of the present invention can also be called a coordination training system (coordination training apparatus). More specifically, the coordination ability includes rhythm ability, balance ability, conversion ability, SiS ability, connection ability, localization ability, and 1 ”ability.
  • Rhythm ability is the ability to express with the body the rhythm of movements as seen with the eyes, heard with the ears, or imaged with the head.
  • the balance ability is the power to reestablish a posture in which the balance is properly maintained and collapsed.
  • the conversion ability is the ability to switch movements quickly according to changes in the situation.
  • the ability to react is the ability to react quickly to a signal and respond appropriately.
  • the ability to connect is the power that smoothly moves the whole body, "t" ⁇ power, that is, the power and power without waste by adjusting and speeding the muscles and joints of each part of the body.
  • the fixed i ability is the ability to grasp the positional relationship between the moving object and itself.
  • mm i is the ability to operate limbs and tools with vision (hand. eye coordination (hand-eye coordination), foot 'icon coordination (foot-eye coordination)) and precise operation. is there. In particular, this embodiment can be expected to contribute to the improvement of knowledge ability (hand 'icon dedication).
  • the above-mentioned screen (Fig. 4 etc.) was cited as a measure to train coordination skills.
  • the ability to train coordination skills includes, for example, bilaterality using left and right limbs in a well-balanced manner, differentiation that does not normally occur in daily life, combination of multiple movements, 14 complex movements, and unexpected movements. It can be created taking into account the uncertainties I ⁇ , changes in difficulty, and changes in Z or conditions.
  • each guide object is moved according to the music
  • the operator can perform the operation according to the music, and can support the operator to perform the operation corresponding to the movement f indicated by the guide object.
  • the left and right route objects it is possible to increase the difficulty of the operation specified by the guide objects.
  • Different left and right path object forces are displayed. ⁇ .
  • the left and right guide objects corresponding to the left and right fiber objects are moved clockwise and counterclockwise, respectively, and directed by the guide object.
  • the right and left guide objects corresponding to the different left and right TO objects ⁇ , clockwise or counterclockwise
  • By moving in either the same direction it is possible to reduce the difficulty of the instructed operation as compared with the case where the guide object moves in the direction of smell.
  • By moving the left and right guide objects corresponding to the left and right different path objects at different speeds the difficulty of the operation indicated by the guide objects can be further increased.
  • left and right route objects By making the left and right route objects the same, it is possible to reduce the difficulty of the instructed action as compared to when the left and right route objects are different.
  • Same left and right path object ⁇ " ⁇ ⁇ , the left and right guide objects corresponding to the left and right path objects are moved clockwise and counterclockwise, respectively.
  • the left and right path objects are looping ⁇ , and the left and right guide objects corresponding to the left and right objects are rotated in the same direction, either clockwise or counterclockwise. This makes it possible to reduce the difficulty of the commanded action compared to the case where the guide object moves in a different direction.
  • each object is composed of one or more segments.For this reason, various processing (for example, movement control of guide objects, and auxiliary segments) Display control, etc.
  • various processing for example, movement control of guide objects, and auxiliary segments
  • Display control etc.
  • the guide object arrives at the end of the segment, by displaying the auxiliary object at the end of the segment, '.
  • ⁇ motion instructions '' can be given, so that commands to improve human dexterity and make each body part through motor nerves perform movements indicated by information recognized through sensory nerves. Contributes to improving the accuracy and speed of transmission.
  • the cursor determines whether the corresponding guide object moves along the movement and displays the word “good”, the operator was able to move according to the guide object. You can recognize the power.
  • the present invention is not limited to the above-described embodiment, and can be implemented in various modes within the scope of the gist of the present invention. For example, the following modifications are possible.
  • Transparency of transparent body 17 includes translucent and colored transparency.
  • the retroreflective sheet 15 can be attached to the surface of the transparent body 17. In this case, the transparent body 17 does not need to be transparent.
  • the force S given as an example of passing the middle finger through the input device 3, the number of fingers to be inserted, and the number thereof are not limited thereto. ',
  • the shape of the input device is not limited to the shape of the input device 3 described above.
  • a retroreflective sheet 64 is attached to the surface of the input device 60. The operator holds the input device 60 in the left and right hands, and performs an operation according to the training screen.
  • the input device 60 has a child with a predetermined weight. You can also This ⁇ means that for the operator, it is an exercise to move the hand according to the side, so in addition to the above effects, it can also contribute to the promotion of health.
  • the shape of the object is not limited to the above, and any shape can be adopted.
  • the combination is also free.
  • the speed of the guide object can be changed on the right. Further, the guide object 3 ⁇ 4 ⁇ can be arbitrarily changed, and an addition S can be given.
  • Music and auxiliary objects are not necessarily required. It is also possible not to display the route object. It is also possible to hide the cursor. In an extreme example, a training screen can be composed of only guide objects. '
  • a self-luminous device such as a red light diode can be attached.
  • This ⁇ does not require red light diode 9 for information evacuation chamber 1. Also, without using an input device, it is possible to detect motion by displaying “” and image nw by using an image sensor, c cD, etc.
  • an image sensor such as an image sensor is mounted on the input device, and a recursive ⁇ ⁇ sheet (1, 2, or more) is displayed on the display device (eg, slightly outside the screen) such as the television monitor 5.
  • the position on the screen pointed to by the input device can be obtained by mounting a computer such as an MCU on the input device, or the image can be obtained by referring to the information processing device 1 and the information processing device 3 it can.
  • This input device is equipped with an infrared light emitting diode for stove shooting.
  • a self-luminous device such as an infrared light emitting diode can also be attached to the display device (for example, two infrared light emitting diodes on the upper surface of the display device at regular intervals). Mounted). In this case, enter The force device does not require an infrared light emitting diode for flash photography.
  • two input devices for operating the cursors 70 L and 70 OR two mouses, two track Bonos, and the number of input devices corresponding to the number of cursors can be used.
  • any type of input device can be used as long as it is capable of independently operating the power Sonor 70 L and 70 OR.
  • the cursor 0 L and two input devices each including force ;, force sensor (eg triaxial), gyroscope (eg triaxial), tilt sensor, magnetic sensor, or fig®] sensor or any combination thereof 7 OR can be operated.
  • FIG. 18 is another example of a training screen by the training system of FIG. Figure 18 shows the path object for the left area of each training screen and the object for the right area of the training screen.
  • the tip of the arrow indicates the starting point of the guide object, and the direction of the arrow indicates the moving direction of the guide object.
  • FIG. 19 is an illustration of another mounting method of the input device 3 of FIG.
  • the operator puts the back of the hand toward the image sensor 54 with the input device 3 attached so that the recursive fiber sheet 15 is on the back side of the hand and the hand is open. Hold it up to operate the input device 3.
  • the operator causes the recursive sheet 15 to move by moving the hand over the image sensor 54 to the palm side or the back of the hand, that is, turning the hand over or back. By not doing this, it is possible to perform input non-input according to information processing device 1.
  • the operator can guide the operator to hold the back of the hand in front of him, which is not performed in normal life, and to make independent movements to the left and right hands, not in normal life.
  • Nah eyes ⁇ visual god ⁇ ⁇ brain ⁇ movement god ⁇ ⁇ hand 'arms' processing and transmission are performed in the operator's body, so the effect of the operator's brain and nerves can be further expected. '
  • FIG. 20 is an exemplary view of still another mounting method of the input device 3 of FIG.
  • the operator attaches the input device 3 so that the recursive scissors sheet 15 is on the back side of the finger, and holds the hand while holding the hand, facing the back of the finger toward the image sensor 54.
  • FIG. 21 (a) to FIG. 21 (c) are illustrations of modified examples of the method of moving the guide object by the training system of FIG.
  • the multimedia processor 50 similarly to the ⁇ screen of FIG. 4, the multimedia processor 50 includes a path object 24, a path object 28, cursors 70 L and 7 OR, and a guide object 40 L. And the training screen including 4 OR is displayed on the television monitor 5.
  • Figure 2 1 (a) shows the starting state of this ⁇ screen.
  • the multimedia processor 50 displays the guide object 40 L at the upper end of the path object 24 and displays the guide object 40 R at the lower right corner of the path object 28.
  • the operator moves the hand from the state of Fig. 2 1 (a), and the cursor 70 0 L becomes the guide object 40 L and the cursor 70 0 R becomes the guide object 40 0 R.
  • the state when they are stacked is shown.
  • the multimedia processor 50 displays the auxiliary objects 4 2 L and 4 2 R on the guide objects 40 L and 4 OR, respectively, and the speaker (illustration ⁇ 3 ⁇ 4 ⁇ ) Output voice.
  • the multimedia processor 50 then moves the guide objects 40 L and 4 OR by one segment smaller in the direction of the arrow.
  • the multimedia processor 50 routes the guide object 40 L to the lower end of the route object 2 4 and the guide object 40 0 R. It shows the state moved to the lower left corner of object 28. The operator moves his hand again and puts the force – Sonor 70 L on the guide object 40 L and the cursor 7 O R on the guide object 4 O R.
  • FIG. 22 is a flowchart showing the flow of the overlap determination process that is new in the modified example. This flow, instead of the flow of FIG. 1 3 is ⁇ 1 in the processing for stage n in step S 3- n in FIG. Referring to FIG. 22, in step S 1 4 1, multimedia processor 50 initializes various variables (including flags and software counters).
  • step S 1 4 3 the multimedia processor 50 determines whether the cursor 70 0 L is a force that overlaps the guide object 40 0 L, and is overlapped! ⁇ Goes to step S 1 4 5 and non-overlapping ⁇ goes to step S 1 4 7.
  • step S 1 45 the multimedia processor 50 flag is turned on, and the process proceeds to step S 1 49.
  • This progress flag is a flag indicating whether or not the guide object 40 0 L is advancing force, and when it is on, the guide object 4 ′ 0 L is advanced from the end of the segment where the current position is located to the next end.
  • step S 1 4 9 the multimedia processor 50 increments the segment counter, which is a software counter, by one. This segment counter is incremented every time the progress flag is turned on from off, and is therefore a counter indicating the number of segments the guide object 40 L has moved.
  • step S 1 47 since the cursor 70 0 L does not overlap the guide object 40 0 L, the progress flag is turned off and the process proceeds to step S 1 51.
  • step S 1 5 the mano-recimedia processor 50 determines whether the segment counter ⁇ (the force that has just reached the predetermined value. This predetermined value is necessary for the end of one stage n. It is determined according to the number of cycles C. In other words, the value of the segment counter at the end of the C cycle is set as a predetermined value. If it is determined that the force value has reached the predetermined value, the clear flag is turned on in step S 1 5 3, and the process proceeds to step S 1 5 5. If it is determined that the value has not been reached, step S 1 is continued. Go to 1 5 5.
  • the segment counter ⁇ the force that has just reached the predetermined value. This predetermined value is necessary for the end of one stage n. It is determined according to the number of cycles C. In other words, the value of the segment counter at the end of the C cycle is set as a predetermined value. If it is determined that the force value has reached the predetermined value, the clear flag is turned on in step S 1 5 3, and the process proceeds to step S 1 5 5. If it is
  • step S 1 5 the multimedia processor 50 determines whether or not the processing of steps S 1 4 3 to S 1 5 3 has been completed for both the left and right sides, and if completed, proceeds to step S 1 5 7. If it is advanced and not finished, that is, if the processing for the right is not finished yet, step S
  • step S 1 5 7 the multimedia processor 50 determines whether the force has cleared stage n. In the present embodiment, it is determined that stage n has been cleared when the segment counter (for left) and the segment counter (for right) each have reached a predetermined value or more. Multimedia processor 5 0 determines that stage n has been cleared in step S 1 5 7 ⁇ , step S
  • state flag S F Go to 1 5 9 and set “0 1” to the state flag SF to end the overlap judgment processing.
  • the meaning of state flag S F is the same as in Fig.13.
  • step S 1 5 7 If “NO” is determined in step S 1 5 7, in steps S 1 6 and 1, the multimedia processor 50 determines whether or not a predetermined time has elapsed since the start of stage n. The elapsed i proceeds to step S 1 63 and sets “1 1” to the state flag SF and ends the overlap judgment processing.
  • step S 1 6 1 “If NO is determined, it is in the middle of stage n, so in step S 1 6 5, the mano! ⁇ Media processor 5 0 sets“ 1.0 ”to state flag SF. Set to return to step S1 4 3. (1 2) The direction of the hand that the operator holds over the image sensor 5 4 may be reflected in the direction of the cursor 7 0 L and 7 OR (step SI 1 5 in FIG. 15 etc.).
  • the operator's hand direction when the cursors 70 L and 70 R come to these positions is assumed in advance, and the cursors 70 L and 70 R 7
  • the OR orientation may be set to synchronize with the assumed operator's hand orientation, or the multimedia processor 5 0 and the image sensor 5 4 hand orientation ⁇ i Then, the cursors 70 L and 7 OR in a form corresponding to the result can also be displayed.
  • the shapes of the sonore 70 0 L and 70 0 R are not limited to those described above. For example, it can be circular (ring).
  • a path object that performs a simple reciprocating motion such as an arc (for example, an unclosed path object composed of one segment) is assigned a difficulty level of 1.
  • a path object consisting of multiple segments Path objects that have sides with different lengths S included in multiple sides of a figure, such as rectangles, “Z”, “N”, etc.
  • a path object that includes segments of different lengths is defined as difficulty level 3.
  • a path object that includes a curve, such as “8” or a circle has a difficulty level of 4.
  • the difficulty of the operator's operation is as follows: high level, force, difficulty level 4, difficulty level 3, difficulty level 2, and difficulty level 1.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Cardiology (AREA)
  • Biophysics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Rehabilitation Tools (AREA)
  • Processing Or Creating Images (AREA)

Abstract

　ガイドオブジェクト４０Ｌ及び４０Ｒが左右のそれぞれの手の動きを指示する。左右のそれぞれの手に装着した入力装置３Ｌ及び３Ｒがイメージセンサ５４により撮影され、撮影結果を処理して、入力装置３Ｌ及び３Ｒの動きに、カーソル７０Ｌ及び７０Ｒを連動させる。通常の生活では行わないような、左右それぞれの手に独立した動きを行わせることによって、通常の生活では行わないような、目→視覚神経→脳→運動神経→手・腕という一連の情報の処理と伝達が人体内で行われる。

Description

明細書 方法、 練磨装置、 及び、 コーディネーショントレーニング方法 技術分野
本発明は、人間のコーディネーション能力の向上を図るための練磨方法及びその関連技術に 関する。 ， 背景技術
特許文献（特開 2 0 0 4— 2 1 6 0 8 3号公報）には、鏡に映った 象 O 像）を見ながら、 実像をなぞるゲーム機で、脳機能などを活性化し、 思考力、集中力、 神経を高め、老ィ匕防 止あるいはリハビリ等に役立つゲーム機が開示されている。 '
このゲーム機の底面に図形を描いた紙等（実像) を置き、その実像に対して直角に鏡を配置 することによって、ゲームをする人は、鏡を見ながら実像をなぞり、描かれた図形の正確さと 早さを競う。 このゲーム機を別の観点から説明する。 ゝ.、
図形を描く時には、通常、人間はその目で実像の前後左右を する。 そうすると、 その情 報力 s脳に伝わり、 その結果、 手を前後左右に自然に動力、すことができる。 このゲーム機では、 実像に対して前後左右が逆の虚像を見ながら実像をなぞるのであるから、脳からの命令とは逆 に手を動かさなければならず、なかなか思うように手を動力すことが出来なレ、。 この自然の動 作に逆らって図形を描力せることにより技を競い合う。 " このように、 このゲーム機は、人間が虚像を見ながら、実像に沿って手を動力すことを要求 するものであり >人間が見たままではなく、見た虚像を参考にして、見えない実像に沿って手 を動力すことを要求する。 これにより、 月 機能の活性ィ匕も図っている。
本発明の目的は、感覚神経を通じて認識した情報が指示する動きを運動神経を通じて身体の 該当 立に行わせる際に、その指令伝達の正確性と速さを向上させることが可能な 方法及 びその関連技術を^ することである。 発明の開示 ' 本発明の第 1の形態によると、 方法は、人間の身体の 立ごとに独立して定められた複 数の繊、 tine複数の鹏に対応した複数のガイドォブジェクト、及び、身体の tiHE複数 立 に対応した複数のカーソルを表示装置に表示するステップと、 ΙίίΙΕガイドォブジェクトごとに 独立して定められた方向に、 ItJlE各ガイドォブジェクトを、対応する fiilE^路に沿って移動さ せるステップと、身体の tfiiE複数部位を撮像するステップと、 tins撮像によって得られた画像 に基づいて、身体の前 立の動きを検出するステップと、前記検出された身体の前記各部 位の動きに応じて、 対応する編己カーソルを移動させるステップと、 を含む。
この構成 よれば、身体の部位ごとに独立して定められた複数の経路上にぉレヽて、ガイドォ ブジェクトごとに独立して定められた方向へ、各ガイドォブジェクトを移動させて、それに従 つた動きをするようにオペレータに指示することにより、オペレータに対して、通常の生活で は行わないような、身体の部位ごとに独立した動きを行わせることによって、通常の生活 は 行わなレ、ような、感覚器官→感覚神^→脳→運齦申^→身体の 立という一連の情報の処理と 伝達が人体内で行われる。従って、人間の器用性の向上に寄与できることが予想される。また、 感覚ネ申経を通じて認識した情報が指示する動きを運動神経を通じて身体の各部位に行わせる 際に、 その指令伝達の正確性と速さの向上に寄与でぎることが予想される。
別の言い方をすれば、本発明は、人間のコーディネーション能力の向上に寄与できることが 予想される。 文献凍根明人'宮下桂治著， '「もっともつと運動能力がつく魔法の方法」， 株式 会ネ：！ ^婦と生活.社， 2 0 0 4年 1 1月 1 5日） によれば、 コーディネーション能力とは、人間 が、状況を五感で察知し、 それを頭で判断し、具体的に筋肉を動力、す、 といった一連の動きの 過程をスムーズに行う能力のことである。従って、本発明の練磨方法は、 コーディネーション トレーニング方法と呼ぶこともできる。 . '
より具体的には、 この文献によれば、 コーディネーション能力は、 リズム能力、バランス能 力、 変換能力、 ®S能力、 連結能力、 定位能力、及ひ 1」能力を含む。 リズム能力とは、 目で 見たり耳で聞いたり頭でイメージした動きのリズムを身体で表現する能力である。バラ 、ンス能 力とは、バランスを正しく保ち崩れた姿勢を立て直 «力のことである。変換能力とは、状況. ' の変化に合わせて素早く動きを切り替える能力である。 能力とは、合図に素早く し適 切に対応する能力である。 連結能力とは、身体全体をスムーズに動力^^力、つまり、身体の 各部分の筋肉や関節を力加減ゃスピー 節して無駄なく動かす能力のことである。定位能力 とは、動いているものと自分との位置関係を把握する能力である。識 IJ能力とは、手足や用具 を視覚と連携させ （ハンド ·アイコーディネーション （手と目の協応)、 フット ·アイコーデ イネーシヨン （足と目の協応)）、精密に操作する能力である。ハンド'アイコ一ディネーショ ンは、 アイ ·ハンドコーディネーションと呼ばれることもある。 また、 フット ·ア コ一ディ ネーシヨンは、 アイ ·フットコ一ディネーシヨンと呼ばれることもある。 特に、本発明は、識 別能力 （ハンド'アイコーディネーション） の向上に寄与することが期待できる。
上記聽方法において、 ήίίΙΕ経路に沿って移動させる嫌己ステップは、音楽に合わせて、前 記各ガイドォブジェクトを移動させる。 この構成によれば、オペレータは音楽に合わせて動作を行うことができ、オペレータがガイ ドォブジェクトによる動作指示に合致した動作を行うことを支援できる。
上記 方法において、 複数の経路は、 少なくとも異なる二つの経路を含む。
この構成によれば、ガイドォブジ ク卜によって指示する動作の難易度を高めることができ る。
上記 方法において、前記異なる二つの経蹄の各々は、ノレ、ープしており、その二つの経路 に対応する二つの ΙίίΙΞガイドォブジェクトは、 それぞれ時計回り及び反時計回りに移動する。 この構成によれば、ガイドォブジェクトによって指示する動作の難易度をより高めることが できる。
上言 S ^方法において、 m¾なる二つの経路の各々は、ノ 1 ^プしており その二つの経路 に対応する二つの l己ガイドオブジェクトは、時計回りあるレ、は反時計回りのレ、ずれか同じ方 向に移動する。 '
この構成によれば、ガイドォブジヱク卜が異なる方向に移動する場合と比較して、指示する 動作の難易度を低くすることができる。
上記 方法にぉレ、て、 Ιίίΐ己異なる二つの経路に対応する二つの tir ガイドオブジェクトは、 互いに異なる速さで移動する。
この構成によれば、ガイドォブジェク卜によって指示する動作の難易度もより一層高めるこ とができる。 ' .
上記練磨方法において、 ΙίίΐΞ複数の経^は、 少なくとも同じ二つめ経路を含む。
この構成によれば、 が異なる と比較して、指示する動作の難易度を低くすることが できる。 · ■ ' '
： 上記^ i方法において、藤己同じ二つの経路の各々は、ノトプしており、その二つの経路に 対応する二つの tin己ガイドオブジェクトは、 それぞれ時計回り及び反時言 +回りに移動する。 この構成によれば、ガイドォブジェクトによって指示する動作の難易度をより高めることが できる。
上 方法において、漏己同じ二つの経路の各々は、 プしており、その二つの に 対応する二つの前記ガイドォブジェクトは、時計回りあるいは反時計回りのいずれか同じ方向 に移動する。 '
この構成によれば、ガイドォブジェクトが異なる方向に移動する と比較して、 する 動作の難易度を低くすることができる。
上 |Ξ ¾ϋ方法において、 廳己同じ二つの経路に対応する二つの ΙΞガイドォブジェクトは、 互いに異なる速さで移動する。 この構成によれば、ガイドオブジェク卜によって指示する動作の難易度をより一層高めるこ とができる。 .
上言 方法において、 tii¾路の各々は、 単数又は複数のセグメントにより構成される。 この構成^よれば、セグメントを単位として、各種の処理（例えば、 ガイドオブジェタトの 移動制御、 および後述の補助セグメントの表示制御など)、 を行うことができる。.
上 IB ^方法は、 tin己セグメン卜の端部に ήΐπ己ガイドォブジェクトが到^ るタイミングで、 当該セグ ントの当該端部に補助オブジェクトを表示するステップをさらに含む。
この構成によれば、補助オブジェクトを見ることによって、オペレータがガイドォブジェク トによる動作指示に合致した動作を行うことを支援できる。 .
上言 S¾方法は、 tfilHガイド ブジエクトの移動方向及び Z又は I E^を変更するステツ プをさらに含む。
この構成によれば、様々な動^ f示を与えることができるので、人間の器用性の向上、及び、 感覚神経を通じて認識した情報が指示する動きを運動神経を通じて身体の各部位に行わせる 際の指令伝達の正確性と速さの向上に、 より寄与できる。 '
上 方法は、編己カーカレが、.対応する廳己ガイドォブジェク卜に動きに沿って動いた
¾ かを判定するステップをさらに含む。
この構成によれば、オペレータは、ガイ ォブジエクトに従った動作を行うことができたか 否かを 的に認識できる。
上 ΙΕ ^方法にぉレ、て、撮像する lilt己ステップでは、身体の ttif己各 立に装着あるレ、は把持. された再帰反射体を撮像し、 ttiia聽方法は、膽己各 立に装着あるいは把持きれた tins再帰 反射体に間欠的に光を照射するステップをさらに含む。
この構成によれば、 簡易な処理および簡素な構成で、 身体の各部位の動きを検出できる。 上 ΙΕ ^方法において、撮像する fillEステップでは、身体の itllE各 立に装着あるいは把持 された発光体を撮像する。
この構成によれば、 簡易な処理および簡素な構成で、 身体の各部位の動きを検出できる。 上記練磨方法にぉレヽて、 身体の前記複数部位は両手である。
上 E 0装置において、 ¾路に沿って移動させる !Bステップは、対応する カーソ ルが対応する ttilBガイドォブジェクトに重なったときに、 ffllEガイドォブジェク卜の移動を開 始する。
この構成によれば、オペレータに終始動いているガイドォブジェクトを追わせる と比較 して、 指示する動作の難易度を低くすることができる。
本発明の第 2の形態によると、練磨方法は、人間の身体の複数部位に对応した複数のガイド オブジェクト、及び、身体の編己複数 立に対応した複数のカーソルを表示装置に表示するス テツプと、 ΙΞガイドォブジェクトごとに独立して められた ^§に従って、 filfE各ガイドォ ブジェクトを移動させるステップと、身体の tilt己各部位の動きを検出するステップと、 m 出された身体の til!H各 立の動きに応じて、 対応する ΙΪΙΙΞカーソルを移動させるステップと、 を含む。
本発明の第 3の形態によると、 方法は、人間の身体の 立ごとに独立して定められた動 作指示を奉示装置を通じて行うステップを含み、身体の 各部位に対する ΙΞ各動作指示は、 身体の tiilE各部位を同時に して動力ゝすことをリアルタイムで指示する^容を含む。
本発明の第 4の形態によると、練磨装置は、人間の身体の複数部位に対応した複数の入力装 置と、人間の身体の部位ごとに独立して定められた複数の経路、編己複数の経路に対応した複 数のガイドォブジェク .ト、及び、身体の前記複数部位に对応した複数のカーソルを表示装置に 表示する表示制御手段と、 tfiisガイ.ドォブジ クトごとに独立して定められた方向に、 ή ΙΞ各 ガイドォブジェクトを、対応する廳 路に沿って移動させる第 ι < 移動制御手段と、身体の fillE複数部位に装着又は把持された編己複数の入力装置を撮像する 像手段と、嫌己撮像手段 によって得られた画像に基づいて、前記複数の入力装置の動きを検出する検出手段と、 m 出された肅己入力装置の動きに応じて、対応する tinsカーソルを移動させる第 2の移動制御手 段と、 を備える。 , '
上 装置にぉレ、て、 tine入力装置 、人間が負荷状態で身体の部位を動かすように、.所 定重量の重りを含む。 , ■ この構成によれば、ガイドオブジェクトに従って身体の各 立を動力すことが運動になるの で、 上記した効果に加えて、 健康の維持あるいは増進にも貢献できる。
( 本発明の第 5の形態によると、 コーディネーシヨントレーニング方法は、所定の識を として表示装置に出力し、及び/又は、 ΙΞ所定の 1¾ を音声として音声出力装置に出力する ステップと、身体の複数 を撮像するステップと、 IE撮像によって得られた画像に基づい て、身体の fillE各 立の動きを検出するステップと、身体の tilt己各部位の動きの検知結果と前 記所定の羅とに基づいて言拖を行うステップと、 を含み、 tfHE所定の醒は、身体の it己各 立と協働して、 人間の定位能力、 変換能力、 リズム能力、 能力、 バランス能力、連結能 力、 若しくは f¾¾ij能力又はそれらの任意の組み合わせをトレーニングするための課題である。 このコーディネーショントレーニング方法は、身体の廳己複数 立に対応した複数のカーソ ノレを ffrlB表示装置に表示するステップをさらに含むことができる。 図面の簡単な説明 本発明の新規な特徴は、特許請求の範圈こ記載されている。 しカゝしながら、発明その の及 びその他の と効果は、樹寸図面を参照して具体的な実施例の詳細な説明を読むこ により 容易に される。
図 1は、 本 明の実施の形態による練磨システムの全体構成を示すプロック図である。 図 2は、 図 1の入力装置 3 L又は 3 Rの斜視図である。
図 3は、 図 1の入力装置 3 L及び 3 Rをそれぞれ左右の手に装着した状態を示す図である。 図 4は、 図 1の練磨システムによる練磨画面の時間変ィ匕を示す例示図である。
図 5は、 図 1の練磨システムによる練磨画面に表示される経路オブジェク卜の例示図である。 図 6は、 図 1の練磨システムによる練磨画面の例示図である。
図 7は、 図 1の情報処理装置 1の電気的構成を示す図である。
図 8は、図 7のマルチ ディァプロセッサ 5 0が実行する,処理の流れを示す遷移図である である。 '
図 9は、図 7のマルチメディァプロセッサ 5 0力紫亍する全体処理の流れを示すフ口一チヤ一 トであるである。
図 1 0は、図 9のステップ S 1 3のアプリケーションプログラムが実行する処理の 1つである 処理を示すフローチャートである。
図 1 1は、図 9のステップ S 1 3のアプリケーションプログラムが 亍する処理の 1つである シート検出処理を示すフローチャートで'ある。
図 1 2は、 画像 D Iから再帰反射シート 1 5 L及び 1 5 Rのそれぞれの注目点を検出する 方法の説明図である。，
図 1 3は、図 8のステップ S 3— ηのステージ ηのための処理の中で Ϊされるオーバラップ ノ: 判定処理の流れを示すフローチャートである。
図 1 4 ( a ) は、 ォブジェクト及びガイドオブジェクトを表示する際に参照される経路テ 一ブルの例示図である。 図 1 4 ( b ) は、 ガイドォブジェクトを表示する際に参照される ¾g テーブルの例示図である。
図 1 5は、図 9のステップ S 1 3のアプリケーションプログラムが実 j1する処理の 1つである
,制御処理 （ステートが 亍中） を示すフローチャートである。
図 1 6は、図 9のステップ S 1 3のアプリケーションプログラムが実行する処理の Ίつである ¾ ^制御処理 （ステートがクリア） を示すフローチャートである。
図 1 7は、 図 1の練磨システムで利用可能な入力装置の他の例示図である。
図 1 8は、 図 1の練磨システムによる練磨画面の別の例示図である。
図 1 9は、 図 1の入力装置 3の別の装着方法の例示図である。 図 2 0は、 図 1の入力装置 3のさらに別の装着方法の例示図である。
図 2 1は、図 1の練磨システムによるガイドォブジェク卜の移動の仕方の変形例の例示図であ るである。
図 2 2は、 変形例で実行されるォニバラッブ判定処理の流れを示すフローチヤ一トである。 発明を実施するための最良の形態 ,
以下、 発明の実施の形態について、 図面を参照しながら説明する。 なお、 図中、 同一また は相当部分については同一の参照符号を付してその説明を援用する。
図 1は、本発明の実施の形態による練磨システムの全体構成を示すプロック図である。図 1 に示すように、 この練磨システムは、.情報処理装置 1、入力装置 3 L及び 3 Ιί、並びにテレビ ジョンモニタ 5を備える。 ここで、'入力装置 3 L¾び 3 Rを区別する必要がないときは、入力 装置 3と表記する。 '
図 2は、 図 1の入力装置 3の 図である。 囪 2に示すように、入力装置 3は、透明体 1 7 の底面側にベル..ト 1 9.を通して、そのべノレト 1 9を透明体 1 7の内 で固定してなる。透明体 1 7の内面全体にわたって （底面側を除く）、 再帰反射シート 1 5が取り付けられる。 入力装 3の使用方法は後述する。
ここで、入力装置 3 L及び 3 Rを区別する必要があるときは、入力装置 3 Lの透明体 1. .7お よ Ό¾帰反射シート 1 5を、 それぞれ、 透明体 1 7 Lおよび再帰應シート 1 5 Lと表記し、 入力装置 3 Rの透明体 1 7および再帰反射シート 1 5を、それぞれ、透明体 1 7 Rおよび再帰 反射シート 1 '5 Rと表記する。 . ' ' - 図 1に戻って、情報処¾¾置 1は、 A Vケーブル 7により、テレビジョンモニタ 5に 続さ 'れる。 さらに、情報処3¾置 1には、 図示していないが、 ACアダプタあるいは電池により電 源 maが供給される。 情報処《¾置 1の背面には、 スィッチ （図示^ f) 力付けられる。 情報処¾¾置 1は、 その前面側に、 赤外光のみを 5¾1する赤外線フイノレタ 2 0が設けられ、 さらに、赤外線フィルタ 2 0を囲むように、赤外光を発生する 4つの赤; «光ダイォード 9が 露出している。 赤外線フィルタ 2 0の裏面側には、 後述のイメージセンサ 5 4が配置される。
4つの赤 光ダイオード 9は、 間欠的に赤外光を発光する。 そして、赤 光ダイオード 9からの赤外光は、入力装置 3に取り付けられた再帰 シート 1 5により され、赤外線 フィルタ 2 0の裏面側に設けられたイメージセンサ 5 4に入力される。 このようにして、ィメ ージセンサ 5 4により、 入力装置 3が される。 .
赤外光は間欠的に照射されるところ、赤外光の非照射時においても、イメージセンサ 5 4に よる膨処理は行われている。 情報処¾¾置 1は、 プレイヤにより動かされた入力装置 3の、 赤外光照射時の画像信号と非照射時の画像信号との^ を求めて、この 、信号 D i ( ^m 像 D I ) を基に、 入力装置 3 (つまり再帰反射シート 1 5 ) の位置等を算出する。 .
このように、 を求めることで、再帰 シート 1 5カゝらの 光以外の光によるノイズ を極力除去 き、精度良く再帰^ I†シート 1 5を検出でぎる。 なお、ストロボ膨による 画像 D Iの生成は、 必ずしも必須の要件ではなレ、。
図 3は、図 1の入力装置 3 L及び 3 Rの使用状態の一例を示す説明図である。図 1及び図 3 に示すように、.オペレータは、 中指を図 2のベルト 1 9に通して、入力装置 3を装着する。 図 1のように、オペレータ力 情報処3¾置 1に向けて、つまり、イメージセンサ 5 4に向けて、 手を開くと、透明体 1 7、つまり、再帰^ シート 1 5が ¾X、 この再帰 シート 1 5が撮 影される。 一方、 透明体 1 7を握り締めると、 透明体 1 7、 つまり、 再帰反射シート 1 5は、 手の中に隠れてしまい、 イメージセンサ 5 4に されない。
本実施の形態では、オペレータは、イメージセンサ 5 4に向けて手を開レヽたまま手を動力す。 そうすると、再帰 シート 1 5がィメージセンサ 5 4に きれるため、手の動きを検出す ることができる。 後¾ ^るが、 この検出結果が、 のために利用される。 なお、 オペレータ は、手を開いたり閉じたりする動作によって、再帰 Sliシート 1 5を させたり^させな つたりすることにより、 情報処¾¾置 1に対する入力 非入力を行うことができる。
次に、本実施の形態の練磨システムによる練 ®面を例示して、後述のマルチメディアプロ セッサ 5 0による処理内容を説明する。 '.
図 4は、図 1の練磨システムによる練磨画面の時間変化を示す例示図である。図 4を参照し て、 マノ メディアプロセッサ 5 0は、左領域に繊オブジェタト 2 4を含み、.かつ、右領域 に経路オブジェクト 2 8を含む練磨画面をテレビジョン干ニタ 5に表示する。練磨画面の左領 域が、 左手用に設定され、 右領域が右手用に設定される。
ますこ、マノレチメディアプロセッサ 5 0は、カーソル 7 0 L及ぴ 7 O Rをテレビジョンモニタ 5に表示する。マルチメディアプロセッサ 5 0は、イメージセンサ 5 4により された再帰 ^Ιίシート 1 5 Lの動きにカーソル 7 0 Lを連動させ、イメージセンサ 5 4により^^された 再帰 ¾シート 1 5 Rの動きにカーソル 7 O Rを連動させる。カーソル 7 0 L及び 7 O Rの色 彩は、透明 （輪郭を除く） 又は半透明が好適である。 なぜなら、 オペレータは、 ガイドォブジ ェクトにカーソルが重なった^でもガイドォブジェク卜を視認でき^ に集中できるから である。
図 4 ( a ) を参照して、 この練磨画面の状態は、 スタート時の状態である。 このスタート時 においては、マルチメディアプロセッサ 5 0は、経路オブジェクト 2 4の下端に左手用のガイ ドォブジェクト 4 0 Lを表示し、 オブジェクト 2 8の右上角部に右手用のガイドオブジェ クト 4 0 Rを表示する。
そして、 マルチメディアプロセッサ 5 0は、 音楽 (例えば、 テンポ、 拍、 及び拍子 あるい は、 リズム、 あるいは、 メロディー等） に合わせて、 ガイドォブジェクト 4 0 Lおよびガイド オブジェク 4 0 Rを、それぞ ^¾オブジェクト 2 4及び 2 8に沿って移動させる。'この場 合、 スタートは同時である。 図 4の例では、ガイドォブジェクト 4 0 Lは、経路ォブジェクト 2 4内を往復移動し、ガイドオブジェタト 4 0 は、 «オブジェクト 2 8内を時計回りに移 動する。 ，
ここで、ガイドォブジェクト 4 0 L及び 4 0 Rの左右を区別して説明する必要がないときは、 ガイドオブジェクト 4 0と表記する。
図 4 ( b ) を参照して、.ガイドオブジェクト 4 O L及び 4 O Rが > 図 4 ( a ) の状態からさ らに進んだ状態が示される。オペレータは、入力装置 3 L及び 3 Rを装着した左右のそれぞれ の手を開き情報処理装置 1に向けて、ガイドォブジェクト 4 0 L及ぴ 4 O Rの移動に合わせて、 左右のそれぞれの手を動かす。 つまり、オペレータは、左右のそれぞれの手を動かして、手の 動きに連動するカーソル 7 0 L及び 7ひ Rが、それぞれガイドオブジェクト 4 0 L及び 4 0 R に常に重なるように試みる。 言い換えると、 オペレータは、 左右のそれぞれの手を動かして、 ーソノレ 7 0 L及び 7 O R力、ガイドォブジェクト 4 0 L及ぴ 4 O Rと常に同じ位置で同じ動 きをするように試みる。 . ' '
オペレータは、経路オブジェクト 2 4及ぴ 2 8の形状が分かるので、ガイドォブジ クト 4 0 L及び 4 0 Rが現在位置からどのように移動するかを .（つまり、 移動方向を） 予測できる。. また、ガイドォブジ; クト 4 0 L及び 4 0 Rは、音楽に合わせて移動するので、オペレータは； 音楽を聴くことによって、'ガイドォブジェクト 4 0 L及ぴ 4ひ Rの移動速さを認識できる。 こ : れらのこと力 カーソル 7 O L及び 7 0 Rを、移動するガイドォブジェクト 4 0 L及び 4 O R に常に重ねるように試みるオペレータを捕助する。
図 4 ( c ) を参照して、 ガイドオブジェクト 4 0 L及ぴ 4 0 R力 図 4 ( b ) の状態からさ らに進んだ状態が示される。ガイドオブジェタト 4 0 Lが経路オブジェタト 2 4のレ、ずれかの 端部に到達した時、補助オブジェクト 4 2 Lが当該端部に表示されすぐ消える（一瞬だけ表示)。 同様に、 ガイドォブジェクト 4 0 Rが経路オブジェクト 2 8のレ、ずれかの角部に到達した時、 補助オブジェクト 4 2 Rが当該角部に表示されすぐ消える （一瞬だけ表示)。 '
ここで、補助オブジェクト 4 2 L及び 4 2 Rを区別する必要がないときは、補助オブジェク ト 4 2と表記する。
セグメントなる用語を定義する。セグメン卜とは、 ^オブジェクトを構成する単位をいう。 »ォブジェクト 2 4は、 1つのセグメントから構成される。つまり、繊ォブジェクト 2 4 の全体が、 1セグメントである。経路オブジェクト 2 8は、 4つのセグメントから構成される。 つまり、 経路オブジェクト 2 8の各辺が、 1セグ ントである。
マルチメディアプロセッサ 5 0は、ガイドォブジェクトがセグメン卜の端から端まで移動す る時間が同じになるように、ガイ ォブジェク卜の移動を制御する。従って、ガイドオブジェ クト 4 0 Lカ、経路オブジェクト 2 4の一方端部から他方端部まで移動する際の時間と、ガイ ドォブジェクト 4 0 R力 経路オブジェクト 2 8の一辺の一方端部から ftll¾"端部まで移動する 際の時間と、は同じである。 し力 ^も、ガイドオブジェクトはセグメントの端部を出発点として 同時に移動を開始する。 つまり、 図 4 ( a )'に示すように、 ガイドォブジェクト 4 0 Lは経路 オブジェクト 2 4の端部を出発点として、ガイドォブジェクト 4 O Rは «ォブジェクト 2 8 の右上角部を出発点として、 同時に移動を開始する。
従って、補助ォブジ クト 4 2 Lと補助オブジェクト 4 2 Rとは同じタイミングで表示され 消失することになる。そして、 ガイドォブジェクト 4 0 L及び 4 0
Figure imgf000012_0001
音楽に合わせて移動 するということほ、補助オブジェクト 4 2 L及ぴ 4 2 Rの表示の間隔が音楽に合っていること になる。 それ故、 補助オブジェクト 4 2 L及び 4 2 Rもまた、 カーソル 7 0 L及び 7 0 Rを、 移動するガイドォブジェクト 4 0 L及び 4 0 Rに常に重ねるように試みるオペレータを補助 る役割を果たす。
さて、マノ^"メディアプロセッサ 5ひは、オペレータがガイドォブジェクト 4 0 L及ぴ 4 0 Rに合致した動きを左右同時に所定セグメント数 N s行った^ \つまり、ガイドォブジェク ト 4 0 L及び 4 O Rに重ねてカーソル 7 0 L及び 7 O Rが同時に所定セグメント数 N s動い た に、'聽画面に 「g o o d」 なる文字を表示する。 なお、 「g o o .d」 なる文字を表示 するための判定は、 左右それぞれに対して行ってもよレヽ。
マルチメディアプロセッサ 5 0は、 「g o o d」 なる文字が所定回数 N g表示された^、 つまり、所定セグメント数 N s X所定回数 N gだけ、ガイドオブジェクト 4 0 L及び 4 0 Rに 重ねてカーソル 7 0 L及ぴ 7 0 Rが動かされた^に、当該 画面をオペレータがクリアし たと判断して、 当該 画面を終了して、次の異なる 画面を表示する。 画面の他の例 を後で説明する。 なお、一定時間経過しても ®面をクリアできない は、マルチメディ ァプロセッサ 5 0は、 練磨画面の表示処理を終了する。
次に、本謹の形態の聽システムにより期待される効果を説明する。 目から入'つた情報は 視覚神経を通じて脳に伝達される。 また、脳は、身体の ¾ を動力す際には、運動神経を通じ て、 当該部位に指令を伝達し、 応じて、 当該部位が動く。
従って、上記のように、 オペレータに対して、通常の生活では行わないような、左右それぞ れの手に独立した動きを行わせることによって、通常の生活では行わないような、 目→視覚神 脳→運動神^→手'腕という一連の情報の処理と伝達が人体内で行われる。従って、本実 施の形態の システムは、人間の器用性の向上に,寄与できることが予想される。 ま.た、視覚 神経を通じて認識した情報が指示する動きを運 SJ^経を通じて手 ·腕に行わせる際に、その指 令伝達の正 性と速さの向上に寄与できることが予想される。
図 5は、図 1の^システムによる ^画面に表示される経路オブジェクトの例示図である c 本実施の形態では、図 5 ( a )〜図 5 ( g )に示す鹏ォブジェクト 2 0， 2 2， 2 4， 2 6， 2 8 , 3 0及ぴ 3 2のうちの任意の 2つの組み合わせ【こより、聽画面を構成する。組^:は、 同じ経路オブジェクトの組み合わせであってもよいし、異なる経路ォブジェク卜の組み合わせ であってもよい。 また、経路オブジェクト 2 8及び 3 0において、ガイドォブジェクト 4 0の 移動方向は、 時計回りでもょレヽし、反時計回りでもよく、任意に選択 きる。 さらに、 ガイド オブジェクト 4 0め出発点もまた'、 セグメントの端部であれば、 任意に選択できる。
図 5 ( a ) 〜図 5 ( d ) の経路オブジェクト 2 0〜 2 6の各々は、 1セグメン下からなる。 図 5 ( e ) の経路オブジェクト 2 8は、 4セグメントからなる。 こ ( 、一辺が 1セグメン 卜に対応する。 図 5 ( f ) の経路オブジェクト 3 0は、 2セグメントからなる。 円形の経路ォ ブジェクト 3 0を垂直方向に二分したときの各半円が 1セグメ トに 応する。
'' 図 5 ( g ) の経路オブジェクト 3 2は、 3セグメントからなる。経路オブジェクト 3 2の底 部中央 （矢印 A) 力 ら反時計回りあるいは時計回りに沿って、再び同じ位置 （矢印 A) までが 1セグメントである。 また、 «オブジェク小 3 2の底部中央 （矢印 A) から底部右端 （矢印 C)、 さらにこの右端（矢印 C) から底部中央. (矢印 A) までが 1セグメントである。.さらに、 経路オブジェクト 3 2の底部中央 （矢印 A) 力ゝら底部左端 (矢印 B )、 さらにこの左端 （矢印 B) から底部中央 （矢印 A) までが 1,セグメントである。
図 6は、図 1の練磨システムによる練磨画面の例示図である。 図 6を参照して、本実施の形 態では、 第ひ練磨画面から第 3 1 画面までを用意している。
図 6において、各練磨画面の左領域は左手用の経路オブジェクト、右領域は右手用の経路ォ ブジェクトを示している。 そして、矢印の先端部が、 ガイドォブジェク卜の出発点を示し、矢 印の向きが、ガイドォブジェクトの移動方向を示す。例えば、図 6 ( c )の第 3 0練磨画面は、 図 5 ( e ) の経路オブジェクト 2 8を左手用、 図 5 ( f ) の経路オブジェクト 3 0を右手用と している。 そして、 左手用の経路オブジェクト 2 8におけるガイドォブジェク卜の出発点は、 右上角部であり、移動方向は、 時計回りである。 また、右手用の経路オブジェクト 3 0におけ るガイドォブジェク卜の出発点は、 円形の経路オブジェクト 3 0の頂部であり、 移動方向は、 時計回りである。
図 6において、 図5 ( g ) の経路オブジェクト 3 2には矢印が付されていないので、説明を 口する。繊ォブジェクト 32においては、ガイドオブジェクト 40は、底部左端（矢印 力らスタートして、 底部中央 （矢印 A) を通って、 円状部分を反時計回りに回って、 再び、底 部中央 （矢印 A) を通って、 さらに底部右端 （^印 C) へ移動する。 そして、 底部右端 （矢印 C) 力ゝら、 部中央 （矢印 A) 通って、 円状 分を時計回りに回って、 再び、 底部中央 （矢 印 A) を通って、 さらに底部左端 （矢印 へ移動する。 補助オブジェクト 42は、 ガイドォ ブジェクト 40が底部中央 （矢印 A) に到達しこ時に表示さ'れる。
マルチメディァプロセッサ 50は、第 1 ¾ ^画面から第 31 画面まで順番に 画面を 進めていく。ただし、それぞれの聽画面をオペレータがクリアしたことが条件である。 さら に、 ただし、 図 6カゝら分かるように、第 0聽画面が用意され、他の^ 画面の間に挿入され る。 . .
図 7は、図 1の情報 S¾置 1の電気的構成を示す図である。 図 Ίに示すように、情報処理 装置 1は、 マルチメディァプロセッサ 50、イメージセンサ 54、赤^ ¾光ダイオード 9、 R OM (r e a d o n l y memo r y) 52、 及びバス 56を含む。
マノレチメディアプロセッサ 50は、バス 56を通じて、 ROM52にアクセスできる。従つ て、マルチメディアプロセッサ 50は、 ROM52に格納されたプログラムを 亍でき、また、 ROM52に格納されたデータをリードして処理することができる。 この ROM 52に、 ^ 画面の制御や再帰反射シート 15 L及ぴ 15 Rの位置検出等の各処理を^うプログラム、 i像 データ、 及び音声データ等が予め格納される。
このマルチメディアプロセッサは、 図示しないが、 中央演算処 置 （以下、 「CPU」 と 呼ぶ。）、 グラフィックスプロセシングユニット （以下、 「GPU」 と呼ぶ。）、 サウンドプロセ シングュニット （以下、 「.SPU」 と呼ぶ。）、 ジオメ トリエンジン （以下、 「GE」 と ぶ。）、 ■'■ 外部インタフェースブロック、 メイン RAM、 及び A/Dコンバータ.（以下、 「ADC」 と呼 ぶ。） などを具備する。
CPUは、 ROM52に TOされたプログラムを紫亍して、各種演算やシステム全体の制御 を行う。 グラフィックス処理に関する CPUの処理として、 ROM 52に されたプロダラ ムを 亍して、各ォブジェクト及ぴ各スプライトの拡大'縮小、 回転、及び/又は 動の パラメータ、 視点座標 （カメラ座標)、 並びに ベクトルの算出等を行う。 ここで、 1若し くは複数のポリゴン又はスプライトカゝら構成され、 同じ拡大'縮小、 回転、及び ¥ff ^動の変 換が適用される単位を 「オブジェクト」 と呼ぶ。
GPUは、ポリゴン及びスプライ卜から構成される三次元イメージをリアルタイムに生成し、 アナ口グのコンポジットビデオ信号に変換する。 SPUは、 PCM(p u l s e c o d e m o d u 1 a t i o n)波形データ、アンプリチュードデータ、及びメインボリュームデータを 生成し、 これらをアナログ乗算して、 アナログオーディオ信号を^^する。 G Eは、三次元ィ メージを表示するための謝可演算を紫亍する。 具体的には、 G Eは、行列積、ベタトルァフィ ン変換、 ベタトル直交変換、 ¾¾¾ ^変換、 頂点明度/ポリゴン明度計算 （べクトル内積)、 及びポリゴシ裏面力リング処理，（ベタトル外積） などの演算を 亍する。
外部ィンタフェースブロックは、周辺装置（本実施の形態ではィメージセンサ 5 4及び赤外 発光ダイオード 9 ) とのインタフェースであり、， 2 4チャンネルのプログラマブルなデジタル 入出力 （I /O) ·ポートを含む。 AD Cは、 4チャンネルのアナログ入力ポートに接続され、 これらを介して、 アナ口グ入力装置（本実施の形態ではィメージセンサ 5 4 ) から入力された アナログ信号をデジタノ W言号に変換する。 メイン RAMは、 C P Uのワーク領域、変隱糸噸 域、 および仮想記憶機構管理領域等として利用される。
入力装置 3 L及び 3. Rは、赤 光ダイォード 9の赤外光に照射され、その赤外光を再帰反 射シート 1 5 L及び 1 5 Rで反 I "る。この再帰 シート 1 5 L及ぴ 1 5 Rからの 光が イメージセンサ 5 4によって され、 したがって、イメージセンサ 5 4からは再帰反射シー ト 1 5 L及び 1.5 Rを含む画像信号が出力される。上記のように、マルチメディアプロセッサ 5 0は、 スト口ボ撮影のために、赤^ ¾光ダイォード 9を間欠的に点滅するので、赤外光消灯 時の画像信号も出力される。イメージセンサ 5 4からのこれらのアナ口グ面像信号はマルチメ ディアプロセッサ 5 0に内蔵された AD Cによってデジタルデータに変換される。
マルチメディアプロセッサ 5 0は、イメージセンサ 5 4力、ら AD Cを介して入力されるデジ タル画像信号から上記の 信号 D I ( 画像 D I ) を«して、.これに基づき、入力装置 3 L及び 3 Rによる入力の有無、 さらに入力装置 3 L及び 3 Rの位置等を検出して、演算、 グ ラフィック処理、及びサゥンド処理等を菊亍し、ビデオ信号およびオーディォ信号を出):する。 ビデオ信号およびオーディオ信号は、 A Vケーブル 7によりテレビジョンモニタ 5に与えられ、 応じて、テレビジョンモニタ 5に «が表示され、そのスピーカ （図示 ·ϋτΤ) 力 音声が出力 される。
上記のように、マルチメディアプロセッサ 5 0は、検出した入力装置 3 L及び 3 Rの位置に 応じて、カーソル 7 0 L及び 7 O Rの移動を制御する。つまり、マルチメディアプロセッサ 5 0は、 画像 D I力ら再帰励シート 1 5 L及び 1 5 Rの像を抽出して、それぞれの注目点 の差分画像 D I上の座標を算出する。そして、マルチメディアプロセッサ 5 0は、' 2つの注目 点の^ ·画像 D I上の座標を、スクリーン座標に変換することによって、 2つの注目点のテレ ビジョンモニタ 5の画面上の位置を求める。マルチメディアプロセッサ 5 0は、この 2つの注 目点（再帰 シート 1 5 L及ぴ 1 5 Rに相当） の画面上の位置に、カーソノレ 7 0 L及び 7 0 Rを表示する。 なお、 スクリーン座標系は、テレビジョンモニタ 5に映像を表示する際に用い られる座標系である。
さて、次に、マノ^メディアプロセッサ 5 0が R OM 5 2に^^されたプログラムを Hfrf ることにより行う処理をフローチャートを用レ、て説明する。
図 8は、図ケのマルチメディァ όセッサ 5 0が実行する練磨処理の流れを示す遷移図であ る。図 8を参照して、マルチメディアプロセッサ 5 0は、テレビジョンモニタ 5にュニットを 選択するための選択画面（図示せず） を表示する。本実施の 態では、 1 0ュニットカ S設けら れる。 各ユニットは、複数のステージ 0〜Ν (Νは整数） により構成される。 各ステージ 0〜 Νは、左右の、経路オブジェクト、ガイドォブジェクト、及びカーソルの組み合わせからなる。 ここで、 ステージ 0〜Νを包括してステージ ηと表記する。 また、ステージ 0〜Νに対応す るステップ S 3— 0〜S 3— Νを包括してステップ S 3— ηと表記する。 .
ュニット 1は、オペレータに練磨を片手ずつ行わせるものである。 このため、ュニット 1の 各ステージ ηでは、 まず、左手のための経路ォブジヱクト、 ガイドオブジェクト'、及びカーソ ルを含む 画面が表示され、その次に、右手のための経路オブジェクト、ガイドォブジェク ト、 及びカーソルを含む練磨画面が表示される。
ュニット 2〜9は、オペレータに両手で練磨を行わせるものである。ュニット 2の各ステー ジ ηでは、左右同じ経路オブジェクトを含み、左右のガイドォブジ: £クトの¾S及びスタート 位置が同じ 画面を表示する。ガイドォプジヱク卜のスタート位置とは、'経路オブジェクト の複数の端部のうちの始点のことである。.
ュニッ卜 3の各ステージ nでは、左右同じ経路ォブジヱクトを含み、左右のガイドオブジェ. クトの速度は同じであるがスタート位置が異なる練磨画面を表示する。ュニット 4の各ステー ジ nでは、左右同じ経路オブジェクトを含み、左右のガイドオブジェク卜の速度が異なるがス タート位置が同じ練磨画面を表示する。ュニット 5の各ステージ nでは、左右同じ経路ォブジ ェクトを含み、左右のガイドォブジェク卜の ¾g¾びスタート位置が異なる^!画面を表示す る。
ユニット 6の各ステージ nでは、左右異なる経路オブジェクトを含み、左右のガイドォブジ ェクトの速度及ぴスタート位置が同じ練磨画面を表示する。 ユニット 7の各ステージ nでは、 左右異なる経路ォブジヱクトを含み、左右のガイドォブジェクトの速度は同じであるがスター ト位置が異なる練磨画面を表示する。ュニット 8の各ステージ nでは、左右異なる経路ォブジ ェクトを含み、左右のガイドォブジェク卜の速度が異なるがスタート位置が同じ練磨画面を表 示する。ュニット 9の各ステージ nでは、左右異なる繊ォブジェクトを含み、左右のガイド オブジェクトのS ^及びスタート位置が異なる 画面を表示する。
ユニット 1 0の各ステージ nにおいては、左右それぞれに対して、経路オブジェクト、ガイ ドォブジェクトの 、及びガイドォブジェク卜のスタート位置がそれぞれランダムに選択さ れる。 具体的には、各 »オブジェクト、 ガイドォブジェクトの各¾g、及びガイドオブジェ クトの各スタート位置に予め異なる »を割り当てておく。マルチメディアプロセッサ 5 0は、 左右それぞ ήに対して、経路ォ ジェクト、ガイドォブジェク卜の ¾¾、及ぴガイドオブジェ クトのスタート位置毎に乱数を生成する。そして、マルチメディアプロセッサ 5 0は、 ^^し た乱数に一致する経路ォブジヱクト、ガイドォブジェク卜の速度、及びガイドォブジェク卜の スタート位置を選択する。
図 8を参照して、オペレータが入力装置 3によりカーソル 7 0を操作して、テレビジョンモ ユタ 5の選択画面上で、所望のュニットを選択する。すると、マルチメディアプロセッサ 5 0 は、次のステップ S 3— 0に進む。ステップ S 3— 0では、マルチメディアプロセッサ 5 0は、 ステップ S 1で選択されたユニットに応じたステージ 0のための練磨画面をテレビジョンモ ニタ 5に表示して、 オペレータに を行わせる。 '
ステ少プ S 3— 0にて、.マルチメディアプロセッサ 5 0は、オペレータがステージ 0の^ をクリアしたと判断したときは、次のステップ S 3— 1に進む。以降同様にして、マルチメデ ィァプロセッサ 5 0は、ステップ S 3— ηでのステージ ηをクリアするたびに、次のステージ (η + 1 ) を実行するステップ S 3— （η + 1 ) に進んでいく。 そして、最後のステージ Νを Hi?" るステップ S 3— Νにて、マルチメディアプロセッサ 5 0ほ、'オペレータがステージ N の をクリアしたと判断したときは、 テツプ S 5に進む。 ステップ S 5では、マルチメデ ィァプロセッサ 5 0は、ステップ S 1で選択されたュニットをオペレータがクリアしたことを 示すュニットクリァ画面（図示せず） をテレビジョンモニタ 5に一定時間表示し、ステップ S 1に戻る。
図 9は、図 7のマルチメディアプロセッサ 5 0.が実行する全体処理の流れを示すフローチヤ ートである。 図 9を参照して、 tt スィッチがオンされると、 ステップ S I 1にて、マルチメ ディアプロセッサ 5 0は、 システムの初期設定を 亍する。 ステップ S 1 3にて、マルチメデ ィァプロセッサ 5 0は、 R OM 5 2に TOされたアプリケーションプログラムに従った処理を する。 ステップ S 1 5にて、マルチメディアプロセッサ 5 0は、 ビデオ同期信号による割 り込み力 S発生するまで待機する。つまり、マルチメディアプロセッサ 5 0は、 ビデオ同期信号 による割り込みカ発生していなレ、 は、同じステップ S 1 5に戻り、 ビデオ同期信号による 割り込みが発生した場合は、ステップ S 1 7に進む。例えば、 ビデオ同期信号による割り込み は、 1 / 6 0秒ごとに発生する。 この割り込みに同期して、ステップ S 1 7及びステップ S 1 9にて、マルチメディアプロセッサ 5 0は、テレビジョンモニタ 5に表示する画像を更新する と共に、音声の再生を行う。 そして、 マルチメディアプロセッサ 5 0は、 ステップ S 1 3に戻 る。 .
ステップ 1 3の処理を制御するアプリケーショ^プログラムは、 複数のプログラムを含む。 この複数のプログラムに、撮影処理（図 1 0 ) のためのプログラム、再帰反射シート 1 5の検 出処理 （図 i 1 ) を行うためのプログラム、 映像制御 （図 1 5 ) のためのプログラム、及びソ フトウェアカウンタであるピッチカウンタ （図 1 3 ) が含まれる。マルチメディアプロセッサ 5 O i , このピッチカウンタのクリア、 スタート、及びストップの判断をビデオ同期信号によ る割り込み力 S発生するたびに行レ、、判断した結果に従って、 クリア、 スタート、又はストップ を行う。 、 ■
図 1 0は、図 9のステップ S 1 3のアプリケーションプログラムが実行する処理の 1つであ る^処理を示すフローチヤ一トである。図 1 0を参照して、ステップ S 3 1において、マル チメディアプロセッサ 5 0は、赤外発光ダイオード 9を点灯する。 ステップ S 3 3で、マルチ メディァプロセッサ 5 0は、ィメージセンサ 5.4から、赤外光点灯時の画像データを取得して、 メイン RAMに格納する。. ,
ここで、本実施の形態では、イメージセンサ 5 4の例として、 3 2ピクセル X 3 2ピクセル の CMO Sイメージセンサを使用する。従って、イメージセンサ.5 4からは、画像データとし て、 3 2ピクセノレ X 3 2ピクセルのピクセノ ータが出力される。 のピクセノ ータは、 A ZDコンバータにより、デジタノげータに変換されて、メイン RAM上の二次元配列 P 1 [X] [Y] の要素として格納される。
ステップ S 3 5で、 マルチメディアプロセッサ 5 0は、 赤外発光ダイオード 9を消灯する。 ステップ S 3 7にて、マルチメディアプロセッサ 5 0は、イメージセンサ 5 4力 ら、赤外光消 灯時の画像データ （3 2ピクセル X 3 2ピクセルのピクセノげータ） を敢得して、 メイン RA Mに格納する。この^、このピクセノ^ータは、メイン RAM上の二次元配列 P 2 [X] [Y] の要素として格納される。
以上のようにして、マルチメディアプロセッサ 5 0は、 ストロボ を行う。 ここで、ィメ —ジセンサ 5 4による画像を構成する各ピクセルの位置を表す二次元座標系では、水平方向を X軸、垂 S ^向を Y軸とする。本 の形態では、 3 2ピクセル X 3 2ピクセルのイメージセ ンサ 5 4を用いているため、 X = 0〜3 1、 Y= 0〜3 1である。 この点、差分画像 D Iにつ いても同じである。 また、 ピクセルデータは輝度値である。
' さて、マノ ^メディアプロセッサ 5 0は、図 1 0の^^処理で得られた赤外光点灯時の画像 と赤外光消灯時の画像とから、 画像 D Iを算出して、 画像 D Iに写り込んだ再帰 シート 1 5 L及び 1 5 Rのそれぞれの注目点を抽出する。 詳細は次の通りである。
図 1 1は、図 9のステップ S 1 3のアプリケーションプログラムが実行する処理の 1つであ るシート検出処理を示すフローチヤ一トである。図 11を参照して、 ステップ S 51にて、マ ノレチメディアプロセッサ 50は、 赤 光点灯時の^クセノ^ータ P 1 [X] [Y] と、 赤外光 消灯時のピクセノ 、ータ P 2 [X] [Y] と、 の ¾ ^を算出して、 配列 D i f [X] [Y] に代 入する。 ス ップ S 53にて、アルチメディアプロセッサ 50は、 32X 32ピクセル分の差 分を算出した場合は、 ステップ S 55に進み、 そうでなければ、 ステップ S 5ュに戻る。 この ように、マルチメディアプロセッサ 50は、ステップ S 51の処理を繰り返して、赤外光発光 時の画像データと、赤外光消灯時の画像データと、の^:画像データを^^する。このように、 画像データ （¾ ^画像 D I ) を求めることで、入力装置 3 L及び 3 Rの再帰 ^ltシート 1 5 L及び 15 Rからの 光以外の光によるノイズを極力除去でき、左右の再帰 シート 1 5 L及び 15 Rを精度良く検出できる。 なお、 この 、 ¾ ^データと固定閾値又〖ま可変閾値 とを比較して、閾値を超えた ¾ デ タだけを^)なデータとして扱レヽ、以降の処珲を行うこ ともできる。 この^ \ 例えば、 閾値以下の^) "データを 「0」 とする。 '
ステップ S 55〜S 59を説明する前に、再帰反射シート 15 L及び 15 R.の像からそれぞ れの注目点、つまり、左注目点及び有注目点を検出する方法について具体例を挙げて説明する。 図 12は、 画像 D Iから再帰^ hンート 15 L及び 15 R(7)それぞれの注目点を検出す 'る方法の説明図である。図 12には、赤外光点灯時及び消灯時の画 ½データから生成した差分 画像データに対応する 画像 D I (32X32ピクセル） が図示されている。 図中、小さい 正^形は 1ピクセルを示す。 また、 左上角を XY座標軸の原点〇とする。
この画像には、輝度値が大きレヽ 2つの領域 251及び 253力含まれる。領域 251及ぴ 2 53は、再帰反射シート 15 L及び 15Rである。 ただし、 この時点では、 どの領域がどの再 帰反射シートに対応するかは判別できない。
まず、マルチメディアプロセッサ 50は、 Y=0を出発点として、 Χ=0から Χ=31まで、 ^画像デ タをスキャンし、次に、 Υをインクリメントし、 =0から =31まで、 画像データをスキャンする。このような処理を Υ= 31まで行い、 32X 32ピクセルの 画像データをスキャンして、閾値 ThLより大きいピクセノ^ータの上 立置 m i nY、下端 位置 m a x Y、 左 置 m i n X、 及び右 立置 m a x Xを求める。
次に、 マルチメディアプロセッサ 50は、座標 （mi nX， mi nY) を出発点として、 X 軸の正方向にスキヤンを実行して、最初に閾値 T h Lを超えるピクセルまでの距離' L Tを算出 する。また、マルチメディアプロセッサ 50は、座標 (ma xX， m i nY)を出発点として、 X軸の負方向にスキャンを菊亍して、最初に閾値 Th.Lを超えるピクセルまでの i«RTを算 出する。 さらに、 マルチメディアプロセッサ 50は、座標 （mi nX， ma xY) を出発点と して、 X軸の正方向にスキャンを実行して、最初に閾値 ThLを超えるピクセルまでの £¾|L Bを算出する。 さらに、 マルチメディアプロセッサ 50は、座標 (ma xX, m a x Y) を出 発点として、 X軸の負方向にスキャンを 亍して、暴初に閾値 Th Lを超えるピクセルまでの 距離 RBを算出する。
マルチメデ、ィァプロセッサ 5 pほ、 £¾iLT〉RTのときは、 座標 （ma xX, mi nY) を再帰反射シート 15 Rの注目点、つまり右注目点とし、赚 LT≤RTのときは、座標 （m i nX, mi nY) を再帰 S tシート 15 Lの注目点、 つまり左注目点とする。 また、 マルチ メディアプロセッサ 50は、 謹 LB>RBのときは、座標 (ma xX, ma xY) を再帰反 射シ一ト 15Rの注目点、 つまり右注目点とし、 «LB≤RBのときは、 座寧 （mi nX， ma xY) を再帰反射シート 15 Lの注目 、 つまり左注目点とする。
図 11に戻って、ステップ S 55にて、マルチメディアプロセッサ 50は、図 12で説明し た左右上下端 （mi nX、 ma xX、 mi nY、 ma xY) の検出処理を ΐする。 ステップ S 57にて、マルチメディアプロセッサ 50は、図 12で説明した左注目点及び右注目点の決 定処理を 汁る。 ステップ S 59にて、マルチメディアプロセッサ 50は、左注目点及び右 注目点の座標をスクリーン座標に変換する。
さて、マルチメディアプロセッサ 50は、オペレータが操作するカーソル 70 L及び 7 OR 力 Sそれぞれガイドォブジェクト 40 L及び 4 ORと重なって操作されている力 かを判定 (ォ 一バラッブ判定）する処理を行う。カーソノレ 70 L及ぴ 70 Rはそれぞれ左注目点及び右注目 点の位置に表示されるので、これらの座 とガイドォブジェクト 40 L及び 40 Rの座標とに 基づいて、 オーバラップ判定が行われる。詳細は下記の通りである。 この判定処理もまた、 図 9のステップ S 13で実行されるアプリケーションプログラムによる処理として 亍される 説明の便宜のため、 ビデオ同期信号に同期した形でのフローチヤ一トではなく、図 8の遷 ' 移図に含まれる形のフローチャートで説明する。
図 13は、図 8のステップ S 3-nのステージ nのための処理の中で 亍されるオーバラッ ブ判定処理の流れを示すフローチャートである。図 13を参照して、 ステップ S 71にて、マ ルチメディァプロセッサ 50は、 各種変数 （フラグ及びソフトウェアカウンタを含む。 ) を初 期化する。
ステップ S 73にて、マルチメディアプロセッサ 50は、左領域の経路オブジェクトの始点 (終点）にガイドォブジェクト 40 L力 S位置する力 かを判断し、位置するならば テツプ S 75に進み、 位置しなレ、ならばステップ S 83に進む。
ここで、経路オブジェクトの始点とは、ガイドオブジェタトのスタート位置である。本実施 の形態では、四角形の ^&ォブジェクト 28等のように、閉じた図形の ^§オブジェクトでは、 所定の端部を始点として、ガイドォブジェクトが一周して、その所定の端部に戻るまでを 1サ イクノレとする。 この：^、 始点と終点とが同一となる。
ただし、円弧の経路オブジェクト 2 4等のように、閉じていない図形の経路オブジェクトで は、隣に表示される経路オブジェクトの種類、つまり、隣の経路オブジェクトを構成するセグ メントの数 応じて、 M (Mは 1以上の S¾) 往復が 1サイクルとなる。 例えば、 図 4の例で は、右領域の経路オブジェクト 2 8が 4個のセグメントから構成されるので、左 域の ォ ブジェクト 2 4では、 2往復が 1サイクルとな？)。 従って、 この^^は、経路オブジェクト 2 4の所定の端部を始点とすると、 1往復目の所定の端部は終点にはならず、 2往復目の所定の 端部が終点となる。 このように、 同じ端部であっても、サイクルの途中では終 にならず、サ ィクルの最後のみが終点となる。
図 1 3を参照して、 ステップ S 7 5では、マルチメディァプロセッサ 5 0は、 ピッチ力ゥン タ （左用） の値が所定値以上力 かを判断し、以上であればステップ S 7 7に進み、未満なら ばステップ S 7 9に進む。 、
上述のように、 ピッチ ウンタ （左用） ほ、 カーソル 7 0 Lがガイドォブジェクト 4 0しに 重なっている^に、ビデオ同期信号に同期してインクリメントされるソフトウェアカウンタ である。 そして、ステップ S 7 5の所定値は、左領域の経路オブジェクトの 1サイクルに相当 するピッチカウンタの値に 0 . 9を乗じた値である。 従って、 ステップ S 7 5で「Y E S」 が 判断されたということは、カーソノレ 7 0 Lが終点に到達した時に、カーソノレ 7 0 Lがガイドォ ブジェクト 4 0 Lに重なって 1サイクルめ 9 0 %以上移動したこと （そのサイクルを成功）を 意味する。 ，方、 ステップ S 7 5で 「NO」 力 S判断されたという.ことほ、 カーソル 7 0 が終 点に到達した時に、 カーソル 7 0 Lがガイドォブジェクト 4 0 Lに重なって iサイクノレの 9 0 %以上移動しなかったこと （そのサイクルを失敗） を意味する。 ' このため、 ステップ S 7 5で「Y E S」 が判断された後のステップ S 7 7では、マルチメデ ィァプロセッサ 5 0は、サイクノレカウンタ （左用） を 1つインクリメントする。 一方、 ステツ プ S 7 5で「NO」が判断された後のステップ S 7 9では、マルチメディアプロセッサ 5 0は、 サイクルカウンタ (左用） をクリアする。 つまり、 サイクルカウンタ （左用） は、 何サイクル 連続して操作が成功したかを示す。
ステップ S 8 1では、ガイドォブジェクト 4 0 Lが終点に到達したので、マルチメディアプ 口セッサ 5 0は、 上記ピッチカウンタ （左用） をクリアする。 ステップ S 8 3にで、 マルチメ ディアプロセッサ 5 0は、カーソル 7 0 Lがガイドォブジェクト 4 0 Lに重なっている力 か を判断し、重なっている ¾ ^はステップ S 8 5に進んでピッチカウンタのインクリメントを開 始し、重なってレ、な 、^"はステップ S 8 7に進んでピッチカウンタのインクリメントを停止 する。例えば、ガイドォブジェクト 4 0 Lの中心から所定 i«以内にカーソル 7 0 Lの中心が 存在する は、 重なっていると判断し、 それ以外は重なっていないと判断する。
ステップ S 8 9では、マルチメディアプロセッサ 5 0は、左 （左の経路オブジェクト、 ガイ ドォブジェクト 4 0 L、及びカーソノレ 7 0 L)及び右（右の経路オブジェクト、 ガイドォブジ ェクト 4 0 、及びカーソノレ 7 O R) の双方について、 ステップ S 7 3〜S 8 7の処理を完了 した力^？かを判断し、 完了した:^はステップ S 9 1に進み、 完了していない:^、 つまり、 右に対する処理がまだ完了していなレ、場合は、 テツプ S 7 3に戻る。 この場合、 ピッチカウ ンタ及びサイクルカウンダは、 右用に用意される。
ステップ S 9 1〖こて、マルチメディアプロセッサ 5 0は、ステージ nをクリアした力 かを 判 る。 本 の形態では、 サイクルカウンタ （左用） 及びサイクルカウンタ （右用） がそ れぞれ所定値以上になった に、ステ ジ nをクリァしたと判 る。マルチメディァプロ セッサ 5 0は、ステップ S 9 1でステージ nをクリアしたと判断した^、ステップ S 9 3に 進み、 ステートフラグ S Fに 「0 1」 をセッ卜して、 オーバラップ判定処理を終了する。 ステ 一トフラグ S Fは、 ステージ nのステートを示すフラグであり、 「0 1」 はステージ nをクリ ァしたことを意味する。
ステップ S 9 1で「NO」 が判断されると、 ステップ S 9 5に！:、マノ^メディアプロセッ サ 5 0は、ステージ nの開始から所定時間が経過した力 かを判断し、経過したナ はステツ プ S 9 7に進み、 ステートフラグ S Fにタイムオーバーを意味する 「1 1」 をセットして、 ォ 一バラッブ判定処理を終了する。 ステップ S 9 5で「ΝΟ」 が判断されると、 つまり、 ステー ジ ηの^中である^、ステップ S 9 9にて、マルチメディアプロセッサ 5 0は、 ズテート フラグ S Fにステージ ηの 亍中を意味する 「1 0」 をセットして、 ステップ S 7 3に戻る。 なお、 ステートフラグ S Fの 「0 0」，は初期値である。
さて、マルチメディアプロセッサ 5 0は、 iiMii面に映し出される «を制御する。そのう ち、経路オブジェク卜とガイドォブジェク卜の表^^御について説明する。 これらの表示制御 では、 経路テーブル及び速度テーブルが参照される。
図 1 4 ( a ) 及び図 1 4 ( b ) は、経路オブジェクト及びガイドォブジェクトを表示する際 に参照される経路テーブルの例示図である。 図 1 4 ( a ) を参照して、経路テーブルは、 1つ のュニッ卜の各ステージ 0〜 3 5と、対応するステージで画面の左（L)領域に表示する オブジェク卜に割り当てられた番号と、対応するステージで画面の右 (R)領域に表示する経 路ォブジェクトに割り当てられた番号と、 を関連付けたものである。
経路オブジェタトの同じ番号は、同じ経路オブジェタトを指し示す。 »オブジェタトの異 なる番号は、異なる経路オブジェクトを指し示す。ただし、同じ経路オブジェク卜であっても、 ガイドォブジェク卜のスタート位置 (始点)が異なる^^は、異なる番号力割り当てられるし、 ガイド才ブジェク卜の移動方向 （時計回りと反時計回り） が異なる も、異なる番号が割り 当てられる。
マルチメディアプロセッサ 5 0は、経路データポインタが指し示す、左（L)領域に表示す べき経路ォブジェク卜の番号及び右 (R)領域に表示すべき経路オブジェク卜の番号を経路テ 一ブルから読み出して、その番号に合致した経路オブジェクトを左右に表示する。.経路データ ポインタは、 1つずつインクリメントされるので、 この例では、 1ユニットが 3 6ステージで 構成される。 このような経路テーブルが、 ユニットの数だけ R OM 5 2に用意される。
図 1 4 ( b ) を参照して、 テーブルは、 1つのユニットの各ステージ 0〜3 5と、 対応 するステージで画面の左（L)領域に表示する経路オブジェクト上を移動するガイドオブジェ ク卜に割り当てられた番号と、对応するステージで画面の右 (R)領域に表示する経路ォブジ ヱクト上を移動するガイドォブジ i ク卜に割り当てられた番号と、 を関連付けたものである。 例えば、番号「0」 は、 ガイドォブジェクトを、経路オブジェク卜の 1セグメントを 2拍で移 動させること （速い） を示し、番号 「1」 は、 ガイドォブジェクトを、 «ォブジェクトの 1 セグメントを 4拍で移動させること （遅い） を示す。
マルチメディアプロセッサ 5 0は、 データポインタが指 示す、左（L)領域に表示さ れる経路オブジェクト上を移動するガイドォブジェクトの番号及び右 (R)領域に表示される 経路オブジェクト上を移動するガイドォブジェク小の番号を テープノ から読み出し 、そ の番号に合致した移動離で左右のガイ 'ドオブジェクトを移動する。 艇データポインタは、 1つずつイングリメントされるので、 この例では、 1ュニッ小が 3 6ステージで構成される。 このような速度テーブルが、 ユニットの数だけ R OM 5 2に用意される。
以上のように、マルチメディアプロ ッサ 5 0は、経路テーブル及び¾¾テーブルを参照す ' ることにより、該当するュニットの該当するステージで左右に表示すべき ^オブジェクト及 びガイドォブジェクト、 並びに、 ガイドォブジェク卜のスタート位置 （始点)、 移動 ¾g、 及 ひ 動方向を知ることができ、これらのテーブルに従って、 ^&ォブジェクト及びガイドォブ ジェクトの表示を制御する。
図 1 5及び図 1 6は、図 9のステップ S 1 3のアプリケーションプログラムが実行する処理 の 1つである映像制御処理を示すフローチャートである。図 1 5を参照して、ステップ S 1 1 0では、 マルチメディアプロセッサ 5 0は、 ステートフラグ S F (図 1 3のステップ S 9 3， S 9 7 , 及び S 9 9参照） を参照して、 ステージ nのステートを判断し、 ステートフラグ S F が実行中を示している場合はステップ S 1 1 1に進み、ステートフラグ S Fがクリアを示して いる場合は図 1 6のステップ S 1 2 1に進む。図示は省略したが、ステートフラグ S Fがタイ ムオーバーを示している^は、マノ^メディアプロセッサ 5 0は、そのための ,を表示す るためのルーチンに進む。
ステップ S 1 1 1にて、マルチメディアプロセッサ 5 0は、上記の経路テーブル及.び ¾¾テ 一ブルを参照して、左手用のガイドォブジヱクト 4 0 Lの表示位置を計算する。具体的には次 の通りである。 '
経路テーブルにおける経路オブジェクトに割り当てられた番号には、その経路オブジェクト を構成する各セグメント （又はセグメン卜）の長さが関連付けられて ROM 5 2に格納されて レ、る。一方、 ¾gテーブルにおけるガイドォブジェクト 4 0 Lに割り当てられた番号は、ガイ ドォブジェクト 4 0 Lの速さを示している。従って、マノレチメディアプロセッサ 5 0は、経路 オブジェク卜のセグメン卜の長さとガイドォブジェクト 4 0 Lの速さとから、そのセグメント でのガイドォブジェクト 4 0 Lの移動時間を算出する。そして、マノレチメディアプロセッサ 5 0は、算出した移動時間でガイドォブジェクト 4 0 Lがそのセグメントを移動するようにガイ ドオブジェクト 4 0 Lの座標 G L ( x， y ) を順次設定する。 なお、 座標 G L ' ( x， y ) は、 スクリ ン座標系の値である。 ノ .
ステップ S 1. 1 3では、マルチメディアプロセッサ 5 0は、左手用の再帰^ hンート 1 5 L に対応する左注目点の座標 T L ( x， y ) をカーソル 7 0 Lの表示位置として設定する。別の 設定方法として、前回の左注目点の座標と今回の左注目点の座標との中点をカーソル 7 0しの 表示位置として設定することもできる。 '
ステップ S 1 1 5にて、.マルチメディアプロセッサ 5 0は、左手用のカーソル 7 0レの表示 位置に応じてカーソル 7 0 Lの形態を決定する。具体的には、次の通りである。画面を^^向 に 1 6分割した領域を想定する。そして、領域ごとに異なる手形を表すカーソル 7 0 Lの画像 を ROM 5 2に用意する。画面の左から 4つの領域は、左手の平が反時計回りに回転している カーソノレ 7 0 Lの画像で、画面の左から 5つ目の領域は、左手の平が回転していないカーソル 7 0 Lの画像で、画面の左から 6つ目以降は、左手の平が時計回りに回転しているカーソル 7 0 Lの画像である。
ステップ 1 1 7では、マルチメディアプロセッサ 5 0は、左右の双方について、ステップ S 1 1 1〜S 1 1 5の処理を完了した力 かを判断し、完了した場合はステップ S 1 1 9に進み、 完了していなレ、^ \つまり、右に る処理がまだ完了していない ¾ ^は、ステップ S 1 1 1に戻る。 この^、ステップ S 1 1 5では、 Bを横方向に 1 6分割した領域を想定し、領 域ごとに異なる手形を表すカーソル 7 O Rの画像を ROM 5 2に用意する。画面の右から 4つ の領域は、右手の平が時計回りに回転しているカーソル 7 0 Rの画像で、画面の右から 5つ目 の領域は、 右手の平が回転していないカーソル 7 O Rの画像で、 画面の右から 6つ目以降は、 右手の平が反時計回りに回転しているカーソル 7 0 Lの画像である。 ステップ S 1 1 9では、マルチメディアプロセッサ 5 0は、ステップ S 1 1 1〜S 1 1 5の 結果に従って、ガイドオブジェクト 4 0 L及び 4 0 R並びにカーソル 7 0 L及ぴ 7 0 の画像 情報（表示位 Ε¾ひ 象格 立置等） をメイン R AMの該当位置に書き込む。マルチメディア プロセッサ 5 0は、ここで書き込まれた画像情報に従って、図 9のステップ S 1 7の画像 ¾ f を行う。
一方、図 1 6のステップ S 1 2 1では、ステージ nがクリアされたので、マルチメディアプ ロセクサ 5 0は、ステージ n + 1の聽画面を表示するため、経路データボインタが指し示す 位置から左領域の経路オブジェク卜の番号を取得し、それに関連付けられたガイドォブジェク ト 4 0 Lのスタート位置 （始点） を求める。
ステップ S 1 2 3及び S 1 2 5の処理は、それぞれ、図 1 5のスデップ S 1 1 3及び S 1 1 5と同様であり説明を省略する。ステップ 1 2 7では、マルチメディアプロセッサ 5 0は、左 右の双方について、ステップ S 1 2 1〜S 1 2 5の処理を完了した力 かを判断し、完了した 場合はステップ S 1 2 9に進み、完了していなレ、場合、つまり、右に対する処理がまだ完了し ていなレ、 ^は、 ステップ S 1 2 1に戻る。
ステップ S 1 2 9では、マルチメディアプロセッサ 5 0は、経路データポインタが指し示す 位置から左右の オブジェク卜の番号を取得し、それらの画像情報（表示位置及ひ 像 it ^) をメイン RAMの該当位置に書き込む。 また、マルチメディアプロセッサ 5 0は、 ス テツプ S 1 2 1〜S 1 2 5の結果に従つャ、ガイドォブジェクト 4 0 L及ぴ 4 O R並びにカー ソル Ί 0 L及ぴ 7 0 Rの画像情報（表示位 g¾ひ面像粉敝置等）をメィン R AMの該当位置 に書き込む。マルチメディァプロセッサ 5 0は、 ここで書き込まれた画像情報に従って、図 9 のステップ S 1 7の画像更新を行う。，
ステップ S 1 3 1では、マルチメディアプロセッサ 5 0は、経路テーブルの経路データポィ ンタ及ぴ¾!¾テープ'ノレの データボインタをそれぞれ 1つ進める。 '
なお、本実施の形態では、ガイドォブジェクトは 2拍又は 4泊で 1セグメントを移動するの で、マルチメディアプロセッサ 5 0は、これに合った音楽を図 9のステップ S 1 9で再生する。 さて、以上のように、本発明の実施の形態によれば、左右の手ごとに独立して割り当てられ た経路オブジェクト上において、ガイドォブジェクトごとに独立して定められた方向へ、各ガ ィドォブジェクトを移動させて、それに従った動きをするようにオペレータに指示することに より、オペレータに対して、通常の生活では行わないような、左右の手ごとに独立した動きを 行わせることによって、通常の生活では行わないような、 目→視覚神^脳→運動神経—手 · 腕という一連の情報の処理と伝達が人体内で行われる。従って、人間の器用性の向上に寄与で きることが予想される。また、視覚神経を通じて認識した情報が する動きを運動神経を通 じて左右の手に行わせる際に、その指令伝達の正確性と速さの向上に寄与できることが予想さ れる。
別の言い方をすれば、本実施の形態による練磨システムは、人間のコーディネーション能力 の向上に寄 4できることが予想きれる。 コーディネーション能力とは、人間が、状況を五感で 察知し、それを頭で判断し、具体的に筋肉を動力す、 といった一連の動きの過程をスムーズに 行う能力のことである。従って、本発明の ^^ ステム 装置） は、コーディネーション トレーニングシステム （コーディネーショントレーニング装置） と呼ぶこともできる。 より具体的には、 コーディネーション能力は、 リズム能力、バランス能力、変換能力、 SiS 能力、連結能力、 定位能力、及ひ 1』能力を含む。 リズム能力とは、 目で見たり耳で聞いたり 頭でイメージした動きのリズムを身体で表現する能力である。バランス能力とは、バランスを 正しく保ち崩れた姿勢を立て直 «力のことである。変換能力とは、状況の変化に合わせて素 早く動きを切り替える能力である。反応能力とは、合図に素早く反応し適切に対応する能力で ある。 連結能力とは、身体全体をスムーズに動力、 "t" ^力、つまり、身体の各部分の筋肉や関節 を力加減やスピード調節して無駄なく動力 ·Τ ^力のことである。定ィ i能力とは、動いているも のと自分との位置関係を把握する能力である。 mm iとは、手足や用具を視覚と連携させ (ハ ンド.アイコーディネーション （手と目の協応)、 フット 'アイコニディネーション （足と目 の協応)）、 精密に操作する能力である。 特に、本実施の形態は、識リ能力 （ハンド 'アイコ一 ディネーシヨン） の向上に寄与することが期待できる。
コーディネーション能力を鍛えるための尋として、上記した聽画面 (図 4等）を挙げた。 その他、 コーディネーション能力を鍛えるための は、例えば、左右の手足をバランス良く 使う両側性、 日常生活では通常行わないような動きをする差異化、複数の動きを組み合わせる 複合 14、意外性のある動きをする不顯 I胜、難易度の変化、及び Z又は条件の変化等を考慮し て作成することができる。
また、音楽に合わせて、各ガイドォブジェクトを移動させるので、 オペレータは音楽に合わ せて動作を行うことができ、オペレータがガイドォブジェクトによる動 f示に合致した動作 を行うことを支援できる。
さらに、左右の経路ォブジェクトを異ならせることにより、ガイドォブジェクトによって指 示する動作の難易度を高めることができる。異なる左右の経路オブジェクト力 "プしている ^.左右の繊ォブジェクトに対応する左右のガイドォブジェクトを、それぞれ時計回り及 び反時計回りに移動させることにより、ガイドォブジエタトによつて指示する動作の難易度を より高めることができる。一方、異なる左右の TOオブジェクトカ プしている^^、左右 の経路ォブジェク卜に対応する左右のガイドォブジェクトを、時計回りあるいは反時計回りの いずれか同じ方向に移動させることにより、ガイドォブジェクトが臭なる方向に移動する^ と比較して、指示する動作の難易度を低くすること,ができる。左右の異なる経路オブジェクト に対応する左右のガイドォブジェクトを、互いに異なる速さで移動させることにより、ガイド オブジェク によって指示する動作の難易度をより一層高めることができる。
さらに、左右の経路オブジェクトを同じにすることにより、左右の経路オブジェク卜が異な る と比較して、指示する動作の難易度を低くすることができる。同じ左右の経路オブジェ クトカ ^："プしている ¾ ^、左右の経路オブジェク卜に対応する左右のガイドォブジェク を、 それぞれ時計回り及び反時計回りに移動させることにより、ガイドォブジェクトによって指示 する動作の難易度をより高めることができる。一方、 l じ左右の経路オブジェクトがループし ている^、左右の オブジェクトに対応する左右のガイドォブジ ηクトを、時計回りある いは反時計回りのいずれか同じ方向に移動させる.ことにより、ガイドォブジェク卜が異なる方 向に移動する^と比較して、指示する動作の難易度を低くすることができる。 '左右の同じ経 路ォブジェク卜に対応する左右のガイドォブジェクトを、互いに異なる速さで移動させること により、 ガイドォブジェクトによって指示する動作の難易度をより一層高めることができる。 さらに、 «オブジェクトの各々は、単数又は複数のセグメントにより構成される。 このた め、セグメントを単位として、各種の処理 （例えば、 ガイドォブジェクトの移動制御、 および 補助セグメントの表示制御など）を行うことができる。セグメントの端部にガイドオブジェク トが到奢するタィミングで、当該セグメントの当該端部に補助オブジェクトを表示することに より、補助オブジェクトを見ることによって、,オペレータがガイドオブジェクトによる動作指 示に合致した動作を行うことを支援できる。 '. " さらに、オペレータ力 S聽画面をクリアしたら、異なる聽画面を表示十る。このため、様々 '' な動作指示を与えることができるので、人間の器用性の向上、及び、感覚神経を通じて認識し た情報が指示する動きを運動神経を通じて身体の各部位に行わせる際の指令伝達の正確性と 速さの向上に、 より寄与できる。
さらに、カーソルが、対応するガイドォブジェク卜に動きに沿って動いた力^かを判定して、 「g o o d」なる文字を表示するので、オペレータは、ガイドォブジェク卜に従った動作を行 うことができた力^かを籠的に認識できる。
なお、本発明は、上記の実施の形態に限られるものではなく、その要旨を«し い範囲で 種々の態様において実施することが可能であり、 例えば、 以下のような変形も可能である。
( 1 ) 透明体 1 7の透明には、 半透明や有色透明が含まれる。
( 2 ) 再帰反射シート 1 5を、 透明体 1 7の表面に取り付けることもできる。 この場合は、 透明体 1 7は、 透明である必要はない。 ( 3 ) 上記では、入力装置 3に、 中指を通す例を挙げた力 S、挿入する指及びその数はこれに 限定されない。 ' ,
(4) 入力装置の形状は、 上記した入力装置 3の形状に限定されない。 例えば、 図 1 7に示 すように、 状の入力装置 6 0を採用できる。 この入力装置 6 0の表面には、再帰反射シート 6 4が取り付けられる。オペレータは、入力装置 6 0を左右の手にそれぞれ持つて、練磨画面 に従った動作を行う。
また、オペレータが負荷状態で手を動力すことができるように、入力装置 6 0内部に、所定 重量の童り
Figure imgf000028_0001
こともできる。 この；^は、オペレータにとって、 呵面に従って手 を動力ゝすことが運動になるので、 上記した効果に加えて、 健康の促進にも貢献できる。
(5) オブジェク卜の形状は、 上記したものに限定されず、 任意の形状を採用できる。 また、 その組み合わせも自由である。 ただし、 いわゆる一筆書きが可能な図形（閉じていない 図形を含む。） とすることが好ましい。
( 6 ) ガイドォブジェク卜の速度を 右で変えることもできる。 また、 ガイドォブジヱクト の ¾ ^を任意に変動させることもできるし、 加 ¾Sを与えることもできる。
( 7) 音楽や補助オブジェクトは、必ずしも必須ではなレヽ。 また、経路オブジェクトを表示 しないことも可能である。 さらに、 カーソルを表示しないことも可能である。 極端な例では、 ガイドオブジェクトのみで練磨画面を構成することもできる。 '
( 8 )入力装置 3及び 6 0に、再帰反射シート 1. 5及び 6 4のような 謝を取り付ける 代わりに、 赤«光ダイォードのような自発光装置を取り付けることもできる。 この^は、 情報処難置 1には、赤 光ダイォード 9は不要である。 また、入力装置を使用せずに、ィ メージセンサや c cDなどの撮^ a置により、 "を^^し、画 nwして、動きを検出す - ることもできる.。
また、入力装置にイメージセンサ等の撮像素子を搭載し、テレビジョンモニタ 5等の表示装 置 （例えば、 スクリーンの若干外側） に再帰 ^Ιίシート （1個、 2個、 あるいはそれ以上） の ような Sltmiを取り付けることもできる。 この：^、撮像素子に された の像か ら、入力装置がスクリーン上のどの位置を指しているかを求め、指された位置にカーソルを表 示することにより、カーソルを操作することもできる。 なお、入力装置が指し示すスクリーン 上の位置は、入力装置に MCU等のコンピュータを搭載して求めることもできるし、 画像 を情報処«置 1に 言して、情報処3¾置 1で求めることもできる。 この 、入力装置に スト口ボ撮影のための赤外発光ダイォードを搭載する。なお、表示装置に反射部材を取り付け る代わりに、 赤外発光ダイォードのような自発光装置を表示装置に取り付けることもできる (例えば、 一定間隔で 2個の赤外発光ダイオードを表示装置の上面に載置)。 この場合は、 入 力装置には、 ストロボ撮影のための赤外発光ダイオードは不要である。
さらに、カーソノレ 7 0 L及び 7 O Rを操作するた の 2つの入力装置として、 2つのマウス、 2つのトラックボーノ 、 カーソルの数に対応した数の入力装置を利用できる。 何れにせよ、 力一ソノレ 7 0 L及び 7 O Rを独立して操作できるものであれば、 入力装置の種類は問わない。 また、 各々力;、 力 センサ （例えば三軸)、 ジャイロスコープ （例えば三軸)、 傾きセンサ， 磁気センサ、若しくは fig®]センサ又はそれらの任意の組み合わせを含む 2つの入力装置により カーソル 0 L及び 7 O Rを操作することもできる。
( 9 ) 上記では、 図 5を用いて経路ォブジェク卜の例を説明したが、 ^オブジェクトの形 はこれらに限定されない。例えば文字や の形をなぞらせるような動きや、絵を描くような 動きを取り A Lた経路オブジェクトを用意してもよい。
図 1 8は、図 1の練磨システムによる練磨画面の別の例示図である。図 1 8において、各練 磨画面の左領域 手用の経路オブジェクト、右領域 ί 手用の オブジェタトを示してレヽ る。 そして、矢印の先端部が、 ガイドォブジェク卜の出発点を示し、矢印の向きが、 ガイドォ ブジェク卜の移動方向を示す。
( 1 0 ) 上記では.、 オペレータは、入力装置 3を、再帰反射シ^ト 1 5が掌側にくるように 装着し、手を開いた状態で、イメージセンサ 5 4に向けて掌をかざ ύて入力装置 3を操作する 例を挙げたが、 入力装置 3の装着方法及び操作方法はこれに限定されない。
図 1 9は、図 1の入力装置 3の別の装着方法の例示図である。図 1 9に示すように、オペレ ータは、入力装置 3を、再帰繊シート 1 5が手の甲側にくるように装着し、手を開レヽた状態 で、イメージセンサ 5 4に向けて手の甲をかざして入力装置 3を操作してもよレ、。 なお、 こめ 場合、オペレータは、イメージセンサ 5 4にかざす手の向きを、手のひら側にしたり、手の甲 '側にしたりする動作、つまり、手を裏返したり戻したりする動作によって、再帰 シート 1 5を させたり ί ^させなかったりすることにより、情報処¾¾置 1に ¾ "る入カ 非入力 を行うことができる。
この場合、 オペレータを、通常の生活では行わないような、手の甲を正面にかざし、左右そ れぞれの手に独立した動きを行わせるように誘導することができ、通常の生活では行わないよ うな、 目→視覚神^→脳→運動神^→手 '腕という一連の情報の処理と伝達がオペレータの人 体内で行われるので、 オペレータの脳と神経を する効果がさらに期待できる。'
図 2 0は、 図 1の入力装置 3のさらに別の装着方法の例示図である。 図 2 0に示すように、 オペレータは、入力装置 3を、再帰贿シート 1 5が指の背面側にくるように装着し、手を握 つた状態で、イメージセンサ 5 4に向けて指の背面、拳をかざして入力装置 3を操作してもよ レ、。 なお、 この:^、 オペレータは、手首を折り曲げたり戻したりする動作によって、 再帰反 射シート 1 5を 1ϋίさせたり ^^させなかったりすることにより、情報処¾¾置 1に ¾~ "る入 力/非入力を行うことができる。 ，
また、 イメージセンサ 5 4及びマルチメディアプロセッサ 5 0がある ¾S高性能なもので、 再帰反射シート 1 .5の撮像結果の大小によって、再帰反射シート 1 5の遠近の位置まで判別可 能なものであり、像が一定閾値以上の面積になればオン、像が一定閾値以下の面積になればォ フになるように構成した: t には、オペレータは、拳を突き出したり戻したりする動作によつ て、再帰 シート 1 5をィメージセンサ 5 4に近づけたり遠ざけたりすることにより、情報 処«置 1に対する入力 Z非入力を行うこともできる。 ,
この場合、オペレータは、入力/非入力をおこなうたびに手首又は腕を動力すので、オペレ ータの手首又は腕の筋力を強化する効果も期待できる。
本発明による練磨システムによれば、図 1 9及び図 2 0の変形例のように、入力装置 3の装 着方法及び操作方法を少し変形するだけで、 種類の異なる動作をおこなうことができるので、 才ぺレータが、入力装置 3のある操作方法を所定期間続けて、 システムによって誘導され る動作にオペレータの神経系力 貫れてしまい、 の効果が薄れてきた でも、入力装置 3 の装着方法及 «作方法を変えることにより、 システムによって誘導されるオペレータの 動作も変わり、神経系に新しい刺激を与えることができる。 このため、オペレータは、 同じ物 を使いながら 的に ¾^をおこなうことができる。 . '
( 1 1 )ガイドォブジェク卜を常に移動させるのではなく、対応するカーソルがガイドォブ ジェク卜に重なったときに、 ガイドオブジェクトの移動を開始するようにしてもよい。 以下、 図面を参照しながら具体的に説明する。
図 2 1 ( a ) 〜図 2 1 ( c ) は、 図 1の練磨システムによるガイドォブジェク卜の移動の仕 方の変形例の例示図である。 これらの図を参照して、図 4の^ 画面と同様に、マルチメディ ァプロセッサ 5 0は、経路オブジェクト 2 4、経路オブジェクト 2 8、カーソル 7 0 L及び 7 O R、並びにガイドォブジェクト 4 0 L及び 4 O Rを含む練磨画面をテレビジョンモニタ 5に 表示する。
図 2 1 ( a ) は、 この^^画面のスタート時の状態を示している。 このスタート時において は、マルチメディアプロセッサ 5 0は、経路オブジェクト 2 4の上側端部にガイドォブジェク ト 4 0 Lを表示し、経路オブジェクト 2 8の右下角部にガイドォブジェクト 4 0 R 表示する。 図 2 1 ( b ) は、 図 2 1 ( a ) の状態から、 オペレータが手を動かし.、 カーソノレ 7 0 Lをガ ィドオブジェタト 4 0 Lに、カーソノレ 7 0 Rをガイドオブジェクト 4 0 Rにそれぞれ重ねた時 の状態を示す。 この時、マルチメディアプロセッサ 5 0は、補助オブジェクト 4 2 L及び 4 2 Rをガイドォブジェクト 4 0 L及び 4 O R上にそれぞれ表示し、 スピーカ （図示 ·¾τΤ) 力ゝら音 声を出力する。それから、マルチメディアプロセッサ 5 0は、矢印の方向へガイドォブジェク ト 4 0 L及び 4 O Rを 1セグメン小だけ移動させる。
図 2 1 ( c ) は、 図 2 1 ( b ) の状態から、 マルチメディアプロセッサ 5 0が、 ガイドォブ ジェクト 4 0 Lを経路オブジェク 2 4の下側端部に、ガイドォブジェクト 4 0 Rを経路ォブ ジェクト 2 8の左下角部にそれぞれ移動させた状態を示す。オペレータは再び手を動かし、力 ーソノレ 7 0 Lをガイドォブジェクト 4 0 Lに、カーソル 7 O Rをガイドォブジェクト 4 O Rに 重ねにいく。
この様に、オペレータの動作は、終始移動しているガイドォブジェクト 4 0 L及ぴ 4 0 Rを 力一ソル 7 0 L及び 7 O Rで追うのではなく.、移動先で止まっているガイドォブジェクト 4 0 L及び 4 0 Rにカーソル 7 0 L及び 7 0 Rをそれぞれ重ねに行くという動作になるので、左右 の手ごとに独立した動きをさせるという命題を維持しつつ、難易度を低くすることができ、老 人や子供など操作に不慣れなオペレータにとっても、 取り組みやすレヽ練磨システムとなる。 図 2 2は、 変形例で新されるオーバラッブ判定処理の流れを示すフローチヤ一トである。 このフローは、図 1 3のフローに代えて、図 8のステップ S 3— nのステージ nのための処理 の中で^1される。 図 2 2を参照して、ステップ S 1 4 1にて、マルチメディアプロセッサ 5 0は、 各種変数 （フラグ及びソフトウェアカウンタを含む。） を初期化する。
ステップ S 1 4 3にて、マルチメディアプロセッサ 5 0は、カーソル 7 0 Lがガイドォブジ ェクト 4 0 Lに重なっている力 かを判断し、 重なっている:！^はステップ S 1 4 5に進み、 重なっていない^はステップ S 1 4 7に進む。ステップ S 1 4 5では、マルチメディアプロ セッサ 5 0はく進行フラグをオンにし、 ステップ S 1 4 9に進む。 この進行フラグは、 ガイド オブジェクト 4 0 Lを進める力 かを示すフラグであり、オンの場合にガイドオブジェタト 4 ' 0 Lが現在位置するセグメントの端部から次の端部まで進められる。
そして、 ステップ S 1 4 9にて、マルチメディアプロセッサ 5 0は、 ソフトウェアカウンタ であるセグメントカウンタを 1つインクリメントする。 このセグメントカウンタは、進行フラ グがオフからオンになる度にィンクリメントされるので、何セグメントをガイドォブジェクト 4 0 Lが移動した力示すカウンタである。
一方、ステップ S 1 4 7では、カーソル 7 0 Lがガイドォブジェクト 4 0 Lに重なっていな いので、 進行フラグをオフにして、 ステップ S 1 5 1に進む。
ステップ S 1 5 1では、マノレチメディアプロセッサ 5 0は、セグメントカウンタの^ (直が所定 値に到達した力 かを判^る。 この所定値は、 1つのステージ nの終了のために必要なサイ クル数 Cに応じて定められる。つまり、所定値として、 Cサイクノレ終了時のセグメントカウン タの値が設定される。 ステップ S 1 5 1にて、マルチメディアプロセッサ 5 0カ、セグメント 力ゥンタの値が所定値に到達したと判 ilfl "ると、ステップ S 1 5 3でクリアフラグをオンにし て、ステップ S 1 5 5に進み、到達していないと判 ると、そのままステップ S 1 5 5に進 む。
ステップ S 1 5 5では、マルチメディアプロセッサ 5 0は、左右の双方について、 ズテツプ S 1 4 3〜S 1 5 3の処理を終了した力 かを判断し、終了した場合はステップ S 1 5 7に進 み、終了していない場合、つまり、右に対する処理がまだ終了していなレヽ場合は、 ステップ S
1 4 3に る。 この^、セグメントカウンタ、進行フラグ及びクリアフラグは、右用に用意 される。 、
ステップ S 1 5 7にて、マルチメディアプロセッサ 5 0は、ステージ nをクリアした力 か を判断する。本実施の形態では、セグメントカウンタ （左用）及ぴセグメントカウンタ （右用） がそれぞれ所定値以上になった に、ステージ. nをクリアしたと判断する。マルチメディァ プロセッサ 5 0は、ステップ S 1 5 7でステージ nをクリアしたと判断した^、ステップ S
1 5 9に進み、 ステートフラグ S Fに .「0 1」 をセ 卜して、 オーバラップ判定処理を終了す る。 ステートフ.ラグ S Fの意味は図 1 3の と同じである。
ステップ S 1 5 7で「NO」 が判断されると、 ステップ S 1 6 ,1にて、マルチメディアプロ セッサ 5 0は、ステージ nの開始から所定時間が経過した力 かを丰 lj断し、経過した i はス テツプ S 1 6 3に進み、 ステートフラグ S Fに 「1 1」 をセットして、 オーバラップ判定処理 を終了する。ステップ S 1 6 1で 「NO丄が判断されると、 ステージ nの 亍中なので、 ステ ップ S 1 6 5にて、マノ!^メディアプロセッサ 5 0は、 ステートクラグ S Fに 「1 .0」 をセッ 卜して、 ステップ S 1 4 3に戻る。 " . ( 1 2)オペレータがイメージセンサ 5 4にかざす手の向きをカーソル 7 0 L及び 7 O Rの 向きに反映させてもよい （図 1 5のステップ S I 1 5等)。 例えば、 カーソノレ 7 0 L及び 7 0 Rの練磨画面内での位置に応じて、その位置にカーソル 7 0 L及び 7 0 Rが来る場合のォペレ ータの手の向きを予め想定しておき、カーソル 7 0 L及び 7 O Rの向きが想定されたオペレー タの手の向きに同調するように設定しておいてもよレ、。又は、マルチメディアプロセッサ 5 0 に、イメージセンサ 5 4に写った手の向き^ iさせて、 結果に応じた形態のカーソル 7 0 L及び 7 O Rを表示することもできる。
このようにすれば、オペレータに自分の手の動きと力一ソノレ 7 0 L及び力一ソル 7 0 Rの動 きとの一^ Sをより感じさせることができる。
( 1 3 )カーソノレ 7 0 L及び 7 0 Rの形状は、上記のものに限定されない。例えば、円形（輪） にすることができる。
( 1 4 ) 上記の練磨システムの適用例として、例えば、幼児期等において運動神経を高める ためのトレーニング、 リハビリテーション、 アスリート （それになりたい人） のための訓練、 及び音楽家 （それになりたい人） のための訓練などが考えられる。
( 1 5 )経路オブジェク卜の難易度について説明する。 赚ゃ円弧等、単純な往復運動を行 う経路オブ ェクト （例えば、 1セグメントで構成される、 閉じていない経路オブジェクト） を難易度 1とする。 正方形や正三角形等、 1図形を構成する各辺の長さが互いに等し レ、、つまり、各辺でのガイドォブジェク卜の速度が等速である経路オブジェクト （例えば、長 さの等しレ,、複数のセグメントで構成される経路オブジェクト） を難易度 2とする。 長方形や 「Z」 や「N」 等、 1図形を構成する複数の辺に長さの異なる辺力 S含まれる、 つまり、 ガイド オブジェクトの速度が異なる辺を有する経路オブジェクト （例えば、複数のセグメントで構成 され、 長さの異なるセグメントを含む経路ォブジェクト） を難易度 3とする。 「8」 や円等、 曲線を含む経路オブジェクト （例えば、 曲線状のセグメントを含 路オブジェクト) を難易 度 4とする。 この 、 オペレータの操作の難易度は、 高レ、ほう力 ら、 難易度 4、 難易度 3、 難易度 2、 及ひ灘易度 1、. となる。
以上、本発明を実施例により詳細に説明したが、 当 にとつては、本発明が本願中に説明 した実施例に限定されるものではなレ、ということは明らかである。本発明は、特許請求の範囲 の記載により定まる本発明の趣旨及び範囲を することなく修主及び変更態様として実施 することができる。

Claims

請求の範囲
1 . 人間の身体の 立ごとに独立して定められた複数の経路、 ΐ ΐ己複数の経路 対応した 複数のガイドォブジェクト、及び、 体の嫌己複数 立に对応した複数のカーソルを表示装置 に表示するステップと、
itnaガイドォブジェクトごとに独立して定められた方向に、 I己各ガイドォブジェクトを、 対応する ffilE経路に沿って移動させるステップと、
身体の嫌己複数部位を撮像するステップと、
t己撮像によつて得られた画像に基づレ、て、身体の編己各 の動きを検出するステップと、 ΙίΠΒ^出された身体の廳己各 立の動きに応じて、対応する 己カーソルを移動きせるステ ップと、 を含む驗方法。
2. ¾路に沿って移動させる tinsステップは、音楽に合わせて、 tins各ガイドォブジ ェクトを移動させる、 請求項 1記載の練磨方法。
3. itilS複数の経路は、 少なぐとも異なる二つの経路を含む、 請求項 1記載の聽方法。
4. ilB異なる二つの経路の各々は、ループしており、その！:つの経路に対応する二つの ϋίη己ガイドオブジェグトは、それぞれ時計回り及び反時計回りに移 Λ)する、請求項 3記載の練 磨方法。 '
5. 前記異なる二つの経路の各々は、.ループしており、その二つの経路に対応する二つの 廳己ガイドォブジエクトは、時計回りあるいは反時計回りのレ、ずれか同じ方向に移動する、請 求項 3記載の練磨方法。 . "
6. Ml ^なる二つの経路に対応する二つの嫌己ガイドオブジェクトは、互レ、に異なる速 . ' さで移動する、 請求項 3から 5記載の聽方法。
7. 廳己複数の経路は、 少なくとも同じ二つの経路を含む、 請求項 1記載の聽方法。
8. 前記同じ二つの経路の各々は、ノレープしており、その二つの経路に対応する二つの前 記ガイドオブジェクトは、それぞれ時計回り及び反時計回りに移動する、請求項 7記載の聽 方法。
9. 前記同じ二つの経路の各々は、ノレープしており、その二つの経路に対応する二つの前 記ガイドオブジェクトは、時計回りあるいは反時計回りのレヽずれか同じ方向に移動する、請求 項 7記載の練磨方法。
1 0. 前記同じ二つの経路に対応する二つの前記ガイドォブジェクトは、互いに異なる速 さで移動する、 請求項 7力 ら 9記載の聽方法。
1 1 . 廳 の各々は、単数又は複数のセグメントにより構成される、請求項 1記載の 歸方法。
1 2 . 前記セグメン卜の端部に前記ガイドオズジェク卜が到 るタイミングで、当該セ グメン卜の当該端部に補助オブジェクトを表示するステップをさらに含む請求項 1 1記載の 練磨方法。 ' . '
1 3. 前記ガイドオブジェクトの移動方向及び Ζ又は前 路を変更するステップをさら に含む請求項 1力ら 1 2記載の練磨方法。 .
1 4 . ,廳己カーソルが、対応する tii!Eガイドォブジェク卜に動きに沿って動いた力^かを 判定するステップをさらに含む請求項 1から 1 3記載の練磨方法。 ，
1 5 . 撮像する gjf己ステップでは、身体 filf己各部位に装着あるいは把持された再帰 Sli 体を撮像し、
方法は、嫌己各部位に装着あるいは把持された編己再帰反射体に間欠的に光を照射 するステ ' ブをさらに含む、 請求項 1から 1 4記載の練磨方法。
1 6 . 撮像する filEステップでは、.身体の IB各部位に装着あるいは把持された発光体を 撮像する、 請求項 1から 1 4記載の聽方法。
1 7 . 身体の,複数部位は両手である、 請求項 1から 1 記載の 方法。
1 8 . 人間の身体の複数部位に対応した複数のガイドオブジェ ト、及び、身体の前記複 数部位に対応した複数のカーソルを表示装置に表示するステップと、
己ガイドオブジェクトごとに独立して定められた経路に従って、 ΐίΙ己各ガイドオブジェク トを移動させるステップと、
身体の ttltS各部位の動きを検出するステップと、 ― tiit¾ 出された身体の tifiH各部位の動きに応じて、対応する tinsカーソルを移動させるステ ' ップと、 を含む練磨方法。
1 9 . 人間の身体の部位ごとに独立して定められた動作指示を表示装置を通じて行うステ ップを含み、
身体の tins各 立に财る ins各動作指示は、身体の嫌己各 立を同時に纖して動力すこ とをリアルタイムで指示する内容を含む、 練磨方法。
2 0 . 人間の身体の複数部位に対応した複数の入力装置と、
人間の身体の «ごとに独立して定められた複数の経路、 ή ΙΕ複数の に対応した複数の ガイドォブジェクト、及び、身体の ΙΞ複数部位に対応した複数のカーソルを表示装置に表示 する表示制御手段と、
ΙΞガイドォブジェクトごとに独立して定められた方向に、 ΙΞ各ガイドォブジヱクトを、 対応する ffjfa経路に沿って移動させる第 1の移動制御手段と、 身体の嫌己複数部位に装着又は把持された前記複数の入力装置を撮像する撮像手段と.、 tins撮像手段によって得られた画像に基づいて、前記複数の入力装置の動きを検出する検出 手段と、
廳¾¾出 れた ΙίίϊΒ入力装置の »きに応じて、対応する tinsカーソルを移動させる第 2の移 動制御手段と、 を備え 装置。
2 1. Ιίϊ 入力装置は、人間が負荷状態で身体の部位を動力すように、所定重量の重りを 含む、 請 項 2 0記載の練磨装置。
2 2. 、
Ι¾路に沿って移動させる膽己ステップは、対応する廳己カーソルが対応する tfifEガイド オブジェクトに重なったときに、 ガイ-ドォブジェクトの移動を開始する、請求項 1記載の 練磨方法。'
2 3.
所定の!^を！！ ^として表示装置に出力し、及び Z又は、 ffflH所定の 1¾Sを音声として音声 出力装置に出力するステップと、 .
身体の複数部位を撮像するステップと、
tilt己撮像によつて得られた画像に基づレ、て、身体の filf己各部位の »きを検出するステップと、 身体の廳己各部位の動きの検知結果と膽己所定の灘とに基づレ、て籠を行うステップと、 を含み、
tfiis所定め繊は、身体の 各部位と協働して、人間の定位能力、変換能力、リズム能力、 ^能力、バランス能力、連結能力、若しくは f^glj能力又はそれらの任意の組み合わせをト 一ユングするための課題である、 コーディネーショントレーニング方法。
2 4. '
身体の廳己複数部位に対応した複数のカーソルを ΙΐίΙΕ表示装置に表示するステップをさら に含む請求項 2 3記載のコーディネーショントレーニング方法。
PCT/JP2006/324788 2005-12-12 2006-12-06 練磨方法、練磨装置、及び、コーディネーショントレーニング方法 WO2007069618A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2007550184A JPWO2007069618A1 (ja) 2005-12-12 2006-12-06 練磨方法、練磨装置、及び、コーディネーショントレーニング方法
US12/096,791 US20090305207A1 (en) 2005-12-12 2006-12-06 Training method, training device, and coordination training method
EP06834543A EP1970104A4 (en) 2005-12-12 2006-12-06 DRIVING METHOD, DRIVING DEVICE AND COORDINATION TRAINING METHOD

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2005357666 2005-12-12
JP2005-357666 2005-12-12
JP2006147462 2006-05-26
JP2006-147462 2006-05-26
JP2006-297185 2006-10-31
JP2006297185 2006-10-31

Publications (1)

Publication Number Publication Date
WO2007069618A1 true WO2007069618A1 (ja) 2007-06-21

Family

ID=38162925

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/324788 WO2007069618A1 (ja) 2005-12-12 2006-12-06 練磨方法、練磨装置、及び、コーディネーショントレーニング方法

Country Status (4)

Country Link
US (1) US20090305207A1 (ja)
EP (1) EP1970104A4 (ja)
JP (1) JPWO2007069618A1 (ja)
WO (1) WO2007069618A1 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090191968A1 (en) * 2008-01-25 2009-07-30 Ian Johnson Methods and apparatus for a video game magic system
JP2010273741A (ja) * 2009-05-26 2010-12-09 Michie Mitsuyama 運動機能回復訓練器
JP2011253164A (ja) * 2010-06-04 2011-12-15 Mitsunori Ishida タッチブレイン・トレーニング装置
EP2039402A3 (en) * 2007-09-12 2012-01-04 Namco Bandai Games Inc. Input instruction device, input instruction method, and dancing simultation system using the input instruction device and method
WO2012001750A1 (ja) * 2010-06-28 2012-01-05 株式会社ソニー・コンピュータエンタテインメント ゲーム装置、ゲーム制御方法、及びゲーム制御プログラム
JP2015019705A (ja) * 2013-07-16 2015-02-02 ラピスセミコンダクタ株式会社 操作装置の制御方法
JP2015041097A (ja) * 2013-08-23 2015-03-02 株式会社元気広場 認知機能低下予防装置、及び、認知機能低下予防装置の制御方法
JP2017146607A (ja) * 2013-06-07 2017-08-24 株式会社ソニー・インタラクティブエンタテインメント ヘッドマウントディスプレイでユーザーの動きに応答する画像レンダリング

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11136234B2 (en) 2007-08-15 2021-10-05 Bright Cloud International Corporation Rehabilitation systems and methods
US20090131225A1 (en) * 2007-08-15 2009-05-21 Burdea Grigore C Rehabilitation systems and methods
WO2009141855A1 (ja) * 2008-05-23 2009-11-26 新世代株式会社 入力システム、入力方法、コンピュータプログラム、及び、記録媒体
US20110199303A1 (en) * 2010-02-18 2011-08-18 Simpson Samuel K Dual wrist user input system
JP5148660B2 (ja) * 2010-06-11 2013-02-20 株式会社バンダイナムコゲームス プログラム、情報記憶媒体及び画像生成システム
US8845431B2 (en) * 2011-05-31 2014-09-30 Microsoft Corporation Shape trace gesturing
WO2013098791A1 (en) * 2011-12-30 2013-07-04 Koninklijke Philips Electronics N.V. A method and apparatus for tracking hand and/or wrist rotation of a user performing exercise
CN104023634B (zh) * 2011-12-30 2017-03-22 皇家飞利浦有限公司 用于追踪正在执行锻炼的用户的手部和/或腕部旋转的方法和设备
US8992324B2 (en) * 2012-07-16 2015-03-31 Wms Gaming Inc. Position sensing gesture hand attachment
CN103677259B (zh) * 2012-09-18 2018-05-29 三星电子株式会社 用于引导控制器的方法、多媒体装置及其目标跟踪装置
CN104887238A (zh) * 2015-06-10 2015-09-09 上海大学 基于动作捕捉的手康复训练评估系统和方法
US10609414B2 (en) 2017-05-08 2020-03-31 Qualcomm Incorporated Context modeling for transform coefficient coding
CN107224697B (zh) * 2017-06-30 2022-07-01 泰好康电子科技（福建）有限公司 一种协调性感统训练的测评系统及其测评方法
US10486023B1 (en) * 2017-09-21 2019-11-26 James Winter Cole Method to exercise and coordinate both the hands and/or feet
US12090363B2 (en) 2018-03-26 2024-09-17 Khaled SHAHRIAR Bilateral left and right brain coordination activity system
CN110123337B (zh) * 2019-05-30 2023-05-16 垒途智能教科技术研究院江苏有限公司 一种儿童运动协调能力测评系统及测评方法
CN114796790B (zh) * 2022-06-23 2022-09-27 深圳市心流科技有限公司 基于脑电的大脑训练方法、装置、智能终端及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3033756U (ja) * 1996-03-13 1997-02-07 良昭 小林 左右の手における同時、かつ、異なる運動の訓練具
JP2001321564A (ja) * 1999-09-07 2001-11-20 Sega Corp ゲーム装置、これに使用する入力手段、及び記憶媒体
JP2002306846A (ja) * 2001-04-12 2002-10-22 Saibuaasu:Kk ゲーム装置用コントローラ
JP2004216083A (ja) 2003-01-10 2004-08-05 Masaji Suzuki 鏡を利用したゲーム機

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62179023A (ja) * 1986-02-02 1987-08-06 Takuo Hattori 操作制御ユニツト
KR970705350A (ko) * 1994-08-23 1997-10-09 오퍼 아브니 사용자 제어 비디오 게임 및 운동 결합 시스템(a user controlled combination video game and exercise system)
EP0837418A3 (en) * 1996-10-18 2006-03-29 Kabushiki Kaisha Toshiba Method and apparatus for generating information input using reflected light image of target object
US20020036617A1 (en) * 1998-08-21 2002-03-28 Timothy R. Pryor Novel man machine interfaces and applications
US6749432B2 (en) * 1999-10-20 2004-06-15 Impulse Technology Ltd Education system challenging a subject's physiologic and kinesthetic systems to synergistically enhance cognitive function
DE20008085U1 (de) * 2000-05-05 2000-08-24 Heppner, Michael, 87600 Kaufbeuren Steuerungssystem, insbesondere Spielsystem mit Hocker
US6554706B2 (en) * 2000-05-31 2003-04-29 Gerard Jounghyun Kim Methods and apparatus of displaying and evaluating motion data in a motion game apparatus
US20030109322A1 (en) * 2001-06-11 2003-06-12 Funk Conley Jack Interactive method and apparatus for tracking and analyzing a golf swing in a limited space with swing position recognition and reinforcement
US8206219B2 (en) * 2002-10-30 2012-06-26 Nike, Inc. Interactive gaming apparel for interactive gaming

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3033756U (ja) * 1996-03-13 1997-02-07 良昭 小林 左右の手における同時、かつ、異なる運動の訓練具
JP2001321564A (ja) * 1999-09-07 2001-11-20 Sega Corp ゲーム装置、これに使用する入力手段、及び記憶媒体
JP2002306846A (ja) * 2001-04-12 2002-10-22 Saibuaasu:Kk ゲーム装置用コントローラ
JP2004216083A (ja) 2003-01-10 2004-08-05 Masaji Suzuki 鏡を利用したゲーム機

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
AKITO AZUMANE; KEIJI MIYASHITA: "Motto motto undonoryoku ga tsuku mahou no houhou", 15 November 2004, SHUFU-TO-SEIKATSUSHA LTD.
See also references of EP1970104A4

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2039402A3 (en) * 2007-09-12 2012-01-04 Namco Bandai Games Inc. Input instruction device, input instruction method, and dancing simultation system using the input instruction device and method
US20090191968A1 (en) * 2008-01-25 2009-07-30 Ian Johnson Methods and apparatus for a video game magic system
US9545571B2 (en) * 2008-01-25 2017-01-17 Nintendo Co., Ltd. Methods and apparatus for a video game magic system
JP2010273741A (ja) * 2009-05-26 2010-12-09 Michie Mitsuyama 運動機能回復訓練器
JP2011253164A (ja) * 2010-06-04 2011-12-15 Mitsunori Ishida タッチブレイン・トレーニング装置
WO2012001750A1 (ja) * 2010-06-28 2012-01-05 株式会社ソニー・コンピュータエンタテインメント ゲーム装置、ゲーム制御方法、及びゲーム制御プログラム
JP2017146607A (ja) * 2013-06-07 2017-08-24 株式会社ソニー・インタラクティブエンタテインメント ヘッドマウントディスプレイでユーザーの動きに応答する画像レンダリング
JP2015019705A (ja) * 2013-07-16 2015-02-02 ラピスセミコンダクタ株式会社 操作装置の制御方法
JP2015041097A (ja) * 2013-08-23 2015-03-02 株式会社元気広場 認知機能低下予防装置、及び、認知機能低下予防装置の制御方法

Also Published As

Publication number Publication date
US20090305207A1 (en) 2009-12-10
EP1970104A1 (en) 2008-09-17
JPWO2007069618A1 (ja) 2009-05-21
EP1970104A4 (en) 2010-08-04

Similar Documents

Publication Publication Date Title
WO2007069618A1 (ja) 練磨方法、練磨装置、及び、コーディネーショントレーニング方法
US10953336B2 (en) Role simulation method and terminal apparatus in VR scene
US20170221379A1 (en) Information terminal, motion evaluating system, motion evaluating method, and recording medium
US8111239B2 (en) Man machine interfaces and applications
JP6306442B2 (ja) プログラム及びゲームシステム
US8614668B2 (en) Interactive video based games using objects sensed by TV cameras
US9224377B2 (en) Computerized percussion instrument
WO2007069752A1 (ja) 運動支援方法、運動器具、及び情報処理装置
JP6834614B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP2008168143A (ja) ゲーム装置及び情報記憶媒体
JP7488867B2 (ja) プログラムおよびシステム
JP2018075259A (ja) ゲームシステム及びプログラム
JP2018075260A (ja) ゲームシステム及びプログラム
JP6794390B2 (ja) シミュレーションシステム及びプログラム
JP6622832B2 (ja) プログラム及びゲームシステム
WO2012001750A1 (ja) ゲーム装置、ゲーム制御方法、及びゲーム制御プログラム
Brander Virtual Reality Avatar Therapy for People Hearing Voices
JPWO2008126419A1 (ja) 運動支援方法
JP2008134991A (ja) 入力方法
JP3138822U (ja) ビンゴゲーム装置
JP2017217212A (ja) ゲーム端末装置及びプログラム
SINGH Gesture based interaction: a survey
Coulter et al. Physical Division: Jingju in Performance and Theory

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2007550184

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2006834543

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 12096791

Country of ref document: US