WO2022059228A1 - 運動評価装置および運動評価システム - Google Patents

運動評価装置および運動評価システム Download PDF

Info

Publication number
WO2022059228A1
WO2022059228A1 PCT/JP2021/007906 JP2021007906W WO2022059228A1 WO 2022059228 A1 WO2022059228 A1 WO 2022059228A1 JP 2021007906 W JP2021007906 W JP 2021007906W WO 2022059228 A1 WO2022059228 A1 WO 2022059228A1
Authority
WO
WIPO (PCT)
Prior art keywords
evaluation
exercise
motion
training
evaluation device
Prior art date
Application number
PCT/JP2021/007906
Other languages
English (en)
French (fr)
Inventor
崇 豊村
昌宏 荻野
子盛 黎
浩嗣 大窪
達也 伊東
景子 藤咲
シャヘッド サルワル
Original Assignee
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立製作所 filed Critical 株式会社日立製作所
Publication of WO2022059228A1 publication Critical patent/WO2022059228A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities

Definitions

  • the present invention relates to training of the human body, that is, a technique for evaluating an exercise effect in exercise.
  • Patent Document 1 a method for analyzing muscle movement and obtaining muscle tension is shown.
  • Patent Document 1 shows that the muscle tension is estimated from the captured image during the training operation, and the state of the muscle is superimposed and displayed on the captured image.
  • the displayed content is an exercise result and needs to be interpreted by an expert in order to know the exercise effect, it is particularly difficult for a general user without specialized knowledge to grasp the exercise effect.
  • Patent Document 2 it is shown that the movable range is estimated from the captured image during the rehabilitation operation in order to grasp the rehabilitation effect, and compared with the movable range due to the human body structure.
  • this method it is compared with the range that can be moved due to the structure of the human body. For this reason, since the range of movement differs depending on the type of training movement, the gender of the user, and the age, the point that the range of comparison targets should be changed has not been considered. That is, it was difficult to grasp the exercise effect even in Patent Document 2.
  • an evaluation value indicating the exercise effect is calculated using time-series data related to the movement of the human body.
  • an input unit for inputting motion data indicating the state of the motion of the human body
  • a skeletal recognition unit for specifying the joint coordinates of the human body from the motion data
  • the joint Based on the joint angle calculation unit that calculates the joint angle of the human body from the coordinates and the joint angle, the status of increase / decrease in the time-series data of the feature amount related to the movement is specified, and the status of the specified increase / decrease change is used.
  • It is an exercise evaluation device having an evaluation value calculation unit for calculating an evaluation value indicating the effect of the exercise.
  • the present invention also includes an exercise evaluation system including the above-mentioned exercise evaluation device, a detection device for detecting the state of training, and a training device for performing training. Further, the present invention also includes an exercise evaluation method using an exercise evaluation device or an exercise evaluation system. Further, the present invention also includes a program for functioning the motion evaluation device as a computer and a storage medium for storing the program.
  • Flow chart showing the processing flow of the training device in the first embodiment Flow chart showing the processing flow of the motion evaluation device in the first embodiment
  • FIG. 1 is a diagram showing the configuration of the exercise evaluation system according to the first embodiment.
  • This exercise evaluation system includes an exercise evaluation device 101, an imaging device 102, and a training device 104 used by a user 103 who exercises.
  • the training device 104 is a device for the user 103 to perform training interactively, gives an operation start instruction to the user 103, and receives the result of the operation of the user 103. That is, the training device 104 is a device for giving exercise to the user 103, and includes a so-called treadmill. Therefore, the training device 104 is configured in a plate shape installed on the floor, for example, and lights the light emitting unit 302 built therein. As a result, the user 103 steps on the training device 104 with his / her foot when he / she recognizes the lighting. Then, the training device 104 detects that the user 103 has stepped on it.
  • the training intensity of the user 103 can be changed by changing the installation position on the floor of the training device 104 and the lighting interval.
  • a device that performs lower body training by touching an object displayed on the touch panel with a foot can be considered.
  • the photographing device 102 acquires a state in which the user 103 is exercising as an image. Therefore, the photographing device 102 can use either a still image or a moving image as an image. In this embodiment, it is desirable that there are a plurality of still images that can be treated as time-series data as still images.
  • the exercise evaluation device 101 wirelessly communicates with the training device 104 and the photographing device 102, for example.
  • the exercise evaluation device 101 receives image data showing the state of exercise and training results.
  • image data showing the state of exercise and training results.
  • motion capture data for the human body myoelectric data detected by the myoelectric sensor, acceleration in the movement detected by the acceleration sensor, and the like may be used.
  • various detection devices instead of the photographing device 102.
  • various detection data including image data are used as motion data indicating the state of motion. The detailed configuration of each of these devices will be described below with reference to FIGS. 2 to 4.
  • FIG. 2 is a diagram showing an example of the configuration of the motion evaluation device 101 according to this embodiment.
  • the motion evaluation device 101 has an operation input unit 202 that receives an instruction from a user by a mouse operation, a touch panel operation, or the like, and a display unit 203 that presents a screen to a user such as a user 103. By configuring these with a touch panel, the operation input unit 202 and the display unit 203 can be integrated and realized.
  • the motion evaluation device 101 includes a control unit 201 that controls the operation of each unit, a memory 204 that temporarily holds processing data related to the operation control in the control unit 201, a wireless communication unit 205 that communicates wirelessly, a USB, and the like.
  • the peripheral device connection unit 206 for connecting to the peripheral device is provided.
  • the peripheral device connection unit 206 functions as an input unit that receives input of various information.
  • the motion evaluation device 101 has a skeleton recognition unit 207, a joint angle calculation unit 208, a muscle tension estimation unit 209, and a muscle tension evaluation unit 210 that execute the functions of this device.
  • the skeleton recognition unit 207, the joint angle calculation unit 208, and the muscle tension estimation unit 209 may be provided in the control unit 201.
  • the exercise evaluation device 101 has a storage unit 21 for storing various information.
  • the skeleton recognition unit 207, the joint angle calculation unit 208, the muscle tension estimation unit 209, and the muscle tension evaluation unit 210 can each be realized by a program. That is, the control unit 201 can also realize the operation of this embodiment according to these programs.
  • each of the skeleton recognition unit 207, the joint angle calculation unit 208, the muscle tension estimation unit 209, and the muscle tension evaluation unit 210 is realized as a skeleton recognition program, a joint angle calculation program, a muscle tension estimation program, and a muscle tension evaluation program. You may. Further, each of these programs may be integrated and realized. Further, each program is stored in the storage unit 21 and read out to the memory 204. Then, the control unit 201 executes the process described later according to the program read into the memory 204.
  • image data 211, training result 212, musculoskeletal model 213, muscle tension data 214, muscle tension database 215, and muscle tension evaluation value are stored as data input to each part or program and data of processing results. Hold 216.
  • the motion evaluation device 101 can be realized by a so-called computer, and when the above-mentioned skeleton recognition unit 207 or the like is realized by a program, the program may be stored in a storage medium or may be distributed via a network.
  • FIG. 3 is a diagram showing an example of the configuration of the training device 104 according to this embodiment.
  • the training device 104 includes a control unit 301 that controls the operation of each unit, and a memory 304 that temporarily holds processing data related to the operation control in the control unit. Further, the training device 104 includes a light emitting unit 302 instructing the user 103 to start operation, an operation detection unit 303 for detecting the operation result of the user 103, and a wireless communication unit for transmitting and receiving control signals and data to and from the motion evaluation device. Equipped with 305.
  • the light emitting unit 302 can be realized by, for example, an LED.
  • the training device 104 uses the detection result of the motion detection unit 303 to store the number of stepping motions and the required time of the user 103 as the training result 306 in the storage unit for each training.
  • the wireless communication unit 305 transmits to the exercise evaluation device 101 at a predetermined timing such as after the training is completed.
  • the training device 104 may have a function of performing wired communication as the wireless communication unit 305.
  • a wired communication unit may be provided instead of the wireless communication unit 305.
  • FIG. 3 focuses on the information processing part of the training device 104. Therefore, the training device 104 has or is connected to a training portion.
  • the training site includes a stepping part, a belt conveyor, and a drive device for driving the belt conveyor.
  • FIG. 4 is a diagram showing an example of the configuration of the photographing apparatus 102 according to this embodiment.
  • the photographing device 102 includes a control unit 401 that controls the operation of each unit, a memory 402 that temporarily holds processing data related to the operation control in the control unit 401, and peripherals for transmitting and receiving control signals and data to and from the motion evaluation device 101. It is equipped with a device connection unit 403. Further, the photographing apparatus 102 includes an infrared projector 404 that irradiates infrared rays and infrared cameras 405 and 406 that acquire images using infrared rays as the main parts in photographing.
  • the infrared cameras 405 and 406 are used, but other cameras may be used.
  • the number of cameras does not matter.
  • the type of camera is not limited to infrared cameras. These are the same in other examples described later.
  • the peripheral device connection unit 403 is provided, but this may be omitted and the camera may be configured as a single unit.
  • the image data can be sent to the motion evaluation device 101 via the storage medium.
  • the shooting may be controlled by the camera itself, or may be controlled manually.
  • the expression of image data is used, but the expression is not particularly limited as long as it is based on the data photographed or detected by the photographing apparatus 102. Therefore, the image data includes the data as it is taken and the data subjected to some conversion such as noise reduction and compression.
  • FIG. 5 is a diagram showing a processing sequence between each device according to this embodiment.
  • the processing contents of each device will be described with reference to FIG.
  • step S501 the motion evaluation device 101 transmits a shooting start instruction to the shooting device 102 via the peripheral device connection unit 206.
  • the photographing device 102 receives this via the peripheral device connection unit 403.
  • step S502 the imaging device 102 starts imaging in a predetermined training area in response to the imaging start instruction. That is, according to the control of the control unit 401, the infrared projector 404 irradiates infrared rays, and the infrared cameras 405 and 406 start shooting and acquire image data.
  • step S503 the exercise evaluation device 101 transmits a training start instruction to the training device 104 via the wireless communication unit 205. Then, the training device 104 receives the training start instruction via the wireless communication unit 305.
  • the order of step S501 and step S503 can be exchanged, such as performing in parallel, but it is desirable that step S503 precedes step S504. This is to capture the training without omission.
  • step S504 the training device 104 starts a predetermined training menu according to the training start instruction. Details of the operation of the training device 104 during this training will be described later. Further, in step S505, the control unit 301 of the training device 104 detects that the training has been completed.
  • step S506 the training device 104 is connected to the wireless communication unit 305 via the wireless communication unit 305.
  • the training end notification and the training data summarizing the exercise results of the user 103 are transmitted to the exercise evaluation device 101. This transmission may be performed at different timings or at the same timing for each data.
  • the wireless communication unit 205 of the exercise evaluation device 101 receives the training end notification and the training data.
  • step 507 the wireless communication unit 205 of the motion evaluation device 101 transmits a shooting end instruction to the shooting device 102. Then, the peripheral device connection unit 403 of the photographing device 102 receives the photographing end instruction.
  • the photographing apparatus 102 ends the imaging according to the received imaging end instruction according to the control of the control unit 301. That is, the infrared irradiation of the infrared projector 404 and the shooting of the infrared cameras 405 and 406 are completed.
  • the imaging device 102 notifies the motion evaluation device 101 that the imaging has been completed via the peripheral device connection unit 403. Further, the photographing device 102 transmits the image data photographed by the infrared cameras 405 and 406 to the motion evaluation device 101 via the peripheral device connection unit 403. In this embodiment, the image data is transmitted via the peripheral device connection unit 403, but the motion evaluation device 101 may acquire the image data via the storage medium. Further, the completion of shooting may be received from the user via the operation input unit 202.
  • the photographing apparatus 102 of this embodiment generates depth information as an example of the photographed image data.
  • the method of generating depth information is generally known. For example, a method of detecting a corresponding object from two images taken by two cameras and calculating the depth from the parallax in the manner of triangulation. Exists (see JP-A-2020-53950).
  • an example of generating depth information in the manner of triangulation is shown, but a method of irradiating infrared rays to receive reflected light and calculating the depth from the delay time, such as the ToF (Time of Flight) method, is shown. You may use it.
  • ToF Time of Flight
  • step S510 the skeleton recognition unit 207 of the motion evaluation device 101 recognizes the skeleton of the user 103 from the image data transmitted in step S509.
  • a method of recognizing a skeleton from image data is generally known, and for example, a technique of applying depth information obtained by the ToF method to a human body model to obtain three-dimensional coordinates of feature points is disclosed (International Publication 12 / No. 528398).
  • For skeleton recognition there is also a method of constructing a model for identifying feature points from a large number of images using deep learning, which has been developed in recent years.
  • the predetermined unit includes data for each frame in the moving image data and a predetermined number of still image data in the case of a plurality of still images.
  • the joint angle calculation unit 208 of the motion evaluation device 101 calculates the joint angle of the user 103 using the three-dimensional coordinates.
  • step S511 the muscle tension estimation unit 209 of the motion evaluation device 101 estimates the muscle tension using the obtained skeletal coordinates or the joint angle.
  • step S512 the muscle tension evaluation unit 210 of the exercise evaluation device 101 evaluates the effect of training of the user 103, that is, the effect of exercise, using the estimated muscle tension.
  • the evaluation of the muscle tension evaluation unit 210 will be described later, but the muscle tension evaluation unit 210 calculates a score indicating the effect of exercise, that is, an evaluation value. That is, in this embodiment, the muscle tension evaluation unit 210 functions as an evaluation value calculation unit. Further, the motion evaluation device 101 displays the calculated evaluation value on the display unit 203 according to the control of the control unit 201.
  • FIG. 6 is a flowchart showing the processing flow of the training device 104 according to this embodiment.
  • the training device 104 of this embodiment is a device that causes the user 103 to perform stepping training. Therefore, the training device 104 notifies the user 103 of the timing of stepping by lighting the light emitting unit 302.
  • the stepping is detected by the motion detection unit 303 built in the training device 104, but the detection method may be a pressure sensor, a touch panel, or the like.
  • the example of stepping will be described, but if the method is such that the user 103 is operated interactively and a training effect can be obtained, another operation such as a touch by hand or a treadmill may be performed.
  • the processing of the training device 104 will be described step by step, which corresponds to the processing of steps S504 to S505 in FIG.
  • step S601 the control unit 301 turns on the light emitting unit 302 (LED) in order to instruct the user 103 to start the operation.
  • This process is executed in response to the training start instruction received in step S503.
  • This issuance can be achieved by simple LED emission, but it is possible to use the following configuration in which the training device 104 is built-in or connected. For example, an image or text displayed on a display, a voice output from a speaker, or the like. As described above, the method is not limited to these as long as the method can give an instruction to the user 103.
  • step S602 the control unit 301 determines whether the instruction to end or stop the training has been received from the user 103 who is training according to the lighting of the light emitting unit 302. This instruction is received from an input unit such as a touch panel (not shown). As a result, if the instruction is received, the process proceeds to step S603. If the instruction is not accepted, the process proceeds to step S605.
  • step S603 the control unit 301 turns off the light emitting unit 302. As a result, the user 103 temporarily ends the training. In other words, one set of training is completed in multiple times. At this time, the control unit 301 increments the number of times of the corresponding training included in the training result 306 by +1.
  • step S604 the control unit 301 uses the training result 306 to determine whether or not the corresponding training has been executed a predetermined number of times stored in the training device 104. If it is determined that the execution has not been performed a predetermined number of times, the process returns to step S601, and the control unit 301 turns on the light emitting unit 302 again.
  • control unit 301 turns on the light emitting unit 302 by changing the emission color and timing in step S602, or outputs that the training is completed by voice or the like.
  • step S605 the control unit 301 determines whether a certain time stored in advance in the training device 104 has elapsed from the lighting of step S601. As a result, if it is determined that a certain time has elapsed, the process proceeds to step S603. If it is determined that the fixed time has not elapsed, the process returns to step S602. Note that this step S605 may be omitted. In this case, if it is determined that the operation is not accepted in step S602, the process of step S602 is repeated. Since some users take a long time to operate, it is desirable that the above-mentioned fixed time is sufficiently long.
  • the training is repeated a predetermined number of times, but the control unit 301 may dynamically switch the number of times according to the exercise result and the exercise effect in the user's training.
  • the number of steps is exemplified.
  • the determination may be made using the exercise result (number of steps) or the exercise effect stored in advance.
  • step S506 is executed. This is the end of the description of the processing of the training device 104, and the process of the exercise evaluation device 101 will be described below.
  • FIG. 7 is a flowchart showing a processing flow in which the exercise evaluation device 101 in this embodiment evaluates muscle tension. That is, the details of step S511 in FIG. 5 are shown. Therefore, the exercise evaluation device 101 has received the training data and the image data by the time the process shown in FIG. 7 is executed. Further, in this embodiment, evaluation means calculating an evaluation value which is a score indicating an exercise effect.
  • the skeleton recognition unit 207 acquires the skeleton coordinates recognized in step S510 for one frame.
  • the skeletal coordinates acquired here include the three-dimensional coordinates of feature points such as the user's knees and ankles.
  • the frame unit is used, but other units may be handled.
  • the joint angle calculation unit 208 calculates the angle of each joint from the acquired 1-frame skeleton coordinates.
  • the method of calculating the joint angle from the skeletal coordinates is generally known. For example, there is a method of collating the three-dimensional coordinates of the real marker obtained by motion capture with the virtual marker on the musculoskeletal model, specifying the posture, and then obtaining the joint angle. As an example of this, there is a kinematic parameter estimation method of a human skeleton model using motion capture data proposed by Fukuda et al. In the method shown here, the posture is specified by minimizing the distance error Z between the real marker and the virtual marker represented by the following equation (Equation 1).
  • the muscle tension estimation unit 209 estimates the muscle tension that realizes the joint angle obtained in step S702.
  • Techniques for estimating muscle tension are generally known, for example, by calculating joint torque by inverse dynamics of a rigid link system, calculating Jacobian for the joint value of wire length, and converting joint torque to wire tension.
  • There is a method for estimating tension Patent Document 1).
  • the joint torque that is, the muscle tension can be calculated by the following (Equation 2).
  • Equation 2 The Jacobian J used in (Equation 2) is calculated by the following (Equation 3).
  • step S704 the muscle tension estimation unit 209 determines whether the muscle tension estimation (S7092) has been completed for all frames. As a result, if it is determined that the process has not ended, the process returns to step S701 and the process for the next frame is executed. If it is determined that the process has been completed, the process proceeds to step S705. In this embodiment, when all frames are processed, the processing after step S705 is performed, but when a predetermined number of frames are processed, the processing after step S705 and the processing after step S701 are performed in parallel. It may be carried out.
  • step S705 the muscle tension evaluation unit 210 acquires the muscle tension for each period (for each frame) of the training obtained in steps S701 to S704 as time-series data. Then, the muscle tension evaluation unit 210 extracts information related to the increase / decrease change in the time-series data as a feature amount.
  • the type (index) of the feature amount the peak value of the muscle tension exerted by training and the peak arrival time can be used.
  • the target site for calculating the feature amount may be a specific muscle such as the immediate vicinity of the thigh or the gastrocnemius muscle, or the muscle tension of multiple muscles belonging to the leg is comprehensively judged, and the sum of the peak values of each muscle is used as the feature amount. It doesn't matter.
  • the muscle tension evaluation unit 210 calculates the evaluation value of muscle tension based on the feature amount obtained in step S705.
  • the muscle tension evaluation unit 210 uses the muscle tension database 215 shown in FIG.
  • This muscle tension database 215 acquires muscle tension data of a plurality of potential users in advance, examines the maximum and minimum values of the feature amount, and stores the muscle tension database 215 as the muscle tension database 215.
  • the muscle tension database 215 records the types of feature quantities and their minimum and maximum values for each attribute such as gender, age, height, and weight.
  • the muscle tension database 215 may be manually input by the user of the exercise evaluation device 101, or may be automatically created by the exercise evaluation device 101. Further, the muscle tension evaluation unit 210 may sort and record the records used in the process described later in a higher order than when they are used so that the records can be easily read.
  • the muscle tension evaluation unit 210 calculates the evaluation value by comparing the distribution of the feature amount stored in the muscle tension database 215 with the value of the feature amount obtained this time.
  • the minimum value and the maximum value are divided into 100 equal parts, and the evaluation value is calculated by scoring from 0 to 100 points depending on where the feature amount to be evaluated is located. ..
  • the range of the characteristic amount of muscle tension differs depending on the attributes such as gender, age, height, and weight. Therefore, it is desirable that the muscle tension database 215 stores different minimum and maximum values for each combination.
  • the muscle tension database 215 saves different minimum and maximum values for each type of training motion.
  • the average of the peak values may be used for the evaluation value calculation.
  • representative values such as median and other statistics such as variance may be used.
  • the muscle tension evaluation unit 210 calculates the evaluation value for each type of feature amount.
  • the muscle tension evaluation unit 210 may calculate a comprehensive evaluation value that summarizes a plurality of feature quantities.
  • the muscle tension evaluation unit 210 calculates the evaluation value of each of the plurality of feature quantities, and calculates the comprehensive evaluation value using these.
  • This comprehensive evaluation value includes representative values such as the sum and average of each evaluation value.
  • control unit 301 When the evaluation value is calculated as described above, the control unit 301 outputs the result of the evaluation process using the display unit 203. The contents will be described below.
  • FIG. 9 shows an example of a screen in which the exercise evaluation device 101 according to this embodiment presents the muscle tension evaluation result to the user 103.
  • This screen is the content displayed on the display unit 203 under the control of the control unit 301, and has the following items.
  • the user ID required for data management, the name, and the gender, age, height, and weight for referring to different muscle tension databases in the muscle tension evaluation are input. That is, in response to this input, the muscle tension evaluation unit 210 calculates the evaluation value in step S706. Specifically, the muscle tension evaluation unit 210 searches the muscle tension database 215 using the input attribute and the type of the corresponding feature amount as keys. As a result, the muscle tension evaluation unit 210 performs the above-mentioned evaluation value calculation using the minimum and maximum values of the searched records.
  • the time change of the muscle tension of the rectus femoris muscle which is the target of feature extraction, is displayed in a graph in the center of the screen (903).
  • the user 103 can grasp from a bird's-eye view that the muscle tension fluctuates with repeated exercises.
  • the minimum value, maximum value, and average value of the peak value of muscle tension are displayed below the graph, and the evaluation result of the peak value of muscle tension is displayed as an evaluation value (73 points) (904).
  • the user can quantitatively and intuitively grasp the exercise effect.
  • FIG. 10 shows an example of presenting the result of evaluating the peak arrival time of muscle tension as another display method.
  • This screen is also the content displayed on the display unit 203 according to the control of the control unit 301.
  • the time change of the rectus femoris muscle tension is displayed as a graph in the center of the screen, and below that, the minimum, maximum, and average values of the peak arrival time and the evaluation value, which is the evaluation result, are displayed. (47 points) has been given (1003).
  • the user 103 can grasp how quickly his / her muscle can exert muscle tension during training.
  • FIG. 11 shows an example in which the evaluation result of muscle tension is presented in comparison with the previous training as another display method.
  • This screen is also the content displayed on the display unit 203 according to the control of the control unit 301.
  • the time change of the muscle tension of the rectus femoris muscle is displayed as a graph together with the previous minute (1103). By looking at this graph, the user can visually understand how the change in muscle tension differs between the previous time and this time.
  • the minimum value, maximum value, average value, and evaluation value indicating the evaluation result of the peak value of muscle tension are displayed in comparison with the previous time.
  • the user 103 can understand the exercise effect in comparison with the previous time.
  • you present advice for the next training, recommended training method 1105, etc. you can further support the training of the user.
  • FIG. 12 shows an example of presenting the evaluation result of muscle tension in comparison with other users as yet another display method.
  • This screen is also the content displayed on the display unit 203 according to the control of the control unit 301.
  • the time change of the rectus femoris muscle tension is displayed as a graph in comparison with other users (1203).
  • a user having an average evaluation value may be selected.
  • further efforts can be encouraged to the user, which is considered to lead to improvement of motivation.
  • the distribution of the evaluation values of the entire user (score distribution) and the position of the user 103 in the score distribution may be displayed by the histogram 1205.
  • evaluation values of this embodiment are displayed for each type of feature amount, they may be collectively displayed as a comprehensive evaluation point. Further, the evaluation values related to the plurality of feature quantities may be collectively displayed on the display unit 203 according to the control unit 201 like a radar chart. An example of this is shown in FIG.
  • skeletal coordinates are used to calculate the joint angle, but a method of attaching a reflection marker to the human body and recognizing the position with multiple cameras, and a method of estimating the motion using an inertial sensor such as acceleration. You may use other motion capture methods such as. This is the end of the description of Example 1.
  • Example 1 the muscle tension evaluation unit 210 calculates the evaluation value by calculating the feature amount from the time change of the muscle tension and comparing it with the overall distribution. However, in addition to muscle tension, it is also possible to calculate the evaluation value using the measured value of another sensor such as muscle fatigue. This example will be described below as Example 2.
  • FIG. 13 is a diagram showing a measurement system for modeling the relationship between muscle tension and muscle fatigue.
  • the myoelectric sensor 1301 is added.
  • the myoelectric sensor 1301 is attached directly to the skin such as the user's thigh and acquires a surface EMG during training.
  • the acquired myoelectric data is transmitted to the exercise evaluation device 101 to evaluate muscle fatigue.
  • a method for measuring muscle fatigue using an electromyogram is generally known. For example, a method for detecting muscle fatigue by utilizing the increase in the low frequency component of the electromyogram when muscle fatigue occurs has been shown. (For example, described in JP-A-2000-232).
  • FIG. 14 shows the configuration of the motion evaluation device 101 according to this embodiment.
  • the same components as those of the motion evaluation device described in the first embodiment are given the same numbers.
  • the exercise evaluation device according to this embodiment is newly provided with a muscle fatigue estimation model 1401, a muscle fatigue prediction value 1402, and a muscle fatigue prediction unit 1403.
  • the muscle fatigue prediction unit 1403 may be provided in the control unit 201. Further, the muscle fatigue prediction unit 1403 may be realized as a muscle fatigue prediction program. This is stored in the storage unit 21 and expanded in the memory 204. Then, the control unit 201 executes the function according to the muscle fatigue prediction program expanded in the memory 204.
  • the muscle fatigue prediction unit 1403 also functions as an evaluation value calculation unit.
  • the muscle fatigue estimation model 1401 is a model showing the relationship between the feature amount calculated from the change in muscle tension during training and the muscle fatigue evaluation value, and is constructed using the data set of the feature amount and the muscle fatigue evaluation value acquired in advance.
  • muscle tension data when the same training is performed by different users is collected, and information related to increase / decrease changes such as peak value and peak arrival time is extracted and used as a feature quantity.
  • the data to be collected be collected in a predetermined capacity or more. It is desirable that this data be executed by the exercise evaluation device 101.
  • the muscle fatigue evaluation value is a subjective evaluation result such as VAS (Visual Analogue Scale) after exercise, and the corresponding evaluation value is also acquired when the muscle tension data is acquired.
  • VAS Visual Analogue Scale
  • a model construction method a machine learning algorithm typified by a support vector machine or a neural network may be used. Since the relationship between the feature amount of muscle tension data and the muscle fatigue evaluation value differs depending on gender, age, height, and weight, it is desirable to construct a different muscle fatigue estimation model for each combination.
  • muscle tension data is generated using the system shown in FIG.
  • the above information is executed by the muscle fatigue prediction unit 1403. Further, according to the control of the control unit 201, the display unit 203 presents to the user 103 the prediction result of the muscle fatigue using the constructed muscle fatigue estimation model.
  • Muscle weakness is known as one of the fall risk factors, but it is difficult for general users to easily evaluate fall risk because it requires an assessment by an expert such as TUG (Time Up & Go Test) measurement. If the fall risk assessment value evaluated by an expert is acquired in advance and the relationship between the characteristic amount of muscle tension change during training and this fall risk assessment value is modeled, the fall risk can be easily evaluated only from the muscle tension. be able to.
  • FIG. 15 is an example of a screen that presents the estimated fall risk assessment value to the user. Similar to the first embodiment, this screen is also displayed by the display unit 203 under the control of the control unit 201. As shown in Fig. 15, for example, the one with the higher risk of falling may be set to 5, and the numerical value may be displayed on a 5-point scale (1504). In addition, advice 1505 based on the risk of falling may be displayed as shown in the lower right of the screen in FIG.
  • Example 1 an example in which the muscle tension evaluation value is obtained by using only the information related to the increase / decrease / change of the muscle tension data as a feature amount is shown, but the exercise evaluation device 101 combines the data of the training device 104 and evaluates based on a more detailed analysis. May be done.
  • FIG. 16 shows an example of the internal configuration of the training result 212 as the data of the training device 104.
  • the training result 212 stores the lighting time of the training device 104 and the time when the user operation is detected. Each time is expressed in milliseconds, and it is possible to finely measure the movement that is the training of the user 103.
  • FIG. 17 shows the relationship between the lighting time 1701 of the training device 104 and the user operation detection time 1703 and the change in muscle tension.
  • the operation is started after the user perceives that the light emitting unit is lit, and the operation on the training device 104 is detected.
  • the delay time from the lighting time 1701 to the time 1702 when muscle tension starts to occur represents the delay time until the user 103 perceives the lighting, and from the time 1702 to the user operation detection time 1703 until the user's operation is completed.
  • the perceptual delay time 1704 and the motion delay time 1705 are measured values that evaluate different functions of the body. How the perceived delay time and the operation delay time change in the repetitive motion is quantified by averaging, variance, etc., and used as a feature quantity. This process is executed by the muscle tension estimation unit 209.
  • the muscle tension evaluation unit 210 scores the perceptual delay time and the motion delay time of the training as compared with the muscle tension database generated in advance, that is, as in the procedure shown in the first embodiment. Calculate the evaluation value. Then, it is presented to the user 103 by displaying it on a display screen (not shown) under the control of the control unit 301.
  • Example 1 the muscle tension database 215 is stored in advance, but the muscle tension database 215 may be updated at any time. This example will be described as Example 4.
  • the minimum and maximum values are changed. Therefore, for steps S705 and S706 described above, the changed minimum and maximum values will be used.
  • the minimum value and the maximum value may be changed during the training.
  • the muscle tension evaluation unit 210 uses the changed minimum value or maximum value, a problem may occur in the continuity of the evaluation value. That is, even if the feature amount is the same, the evaluation value may change due to the change of the minimum value or the maximum value. In order to deal with such a situation, in this embodiment, it is desirable that the muscle tension evaluation unit 210 corrects the evaluation value calculated in step S706 in accordance with the update of the muscle tension database 215. This correction can be realized by the muscle tension evaluation unit 210 calculating a correction coefficient according to the difference between the minimum value and the difference before and after the change of the maximum value.
  • Example 4 can be realized by the configurations shown in Examples 1 to 3, a more suitable system configuration is shown in FIG.
  • FIG. 18 is a system configuration diagram according to this embodiment.
  • the exercise evaluation device 101 is connected to the server 1801 via a network, and transmits muscle tension data and receives data stored in the muscle tension database 215.
  • FIG. 18 shows a form in which one motion evaluation device 101 is connected to the server 1801, a plurality of motion evaluation devices 101 installed in various places may be connected.
  • the type of network connecting the server 1801 and the motion evaluation device 101 does not matter.
  • FIG. 19 is a flowchart showing a flow in which the exercise evaluation device 101 according to this embodiment updates the muscle tension database by communicating with the server 1801.
  • step S1901 the motion evaluation device 101 wireless communication unit 205 or the peripheral device connection unit 206 transmits the accumulated muscle tension data 214 for a certain period to the server 1801 according to the control unit 301.
  • the transmission frequency should be set appropriately according to the accumulation pace of muscle tension data such as daily or weekly. This timing may be periodic, or may be when the muscle tension data 214 is updated or changed. In addition, it is desirable that the transmission timing is a time zone such as midnight that does not interfere with the use of the motion evaluation device 101.
  • the server 1801 recalculates the muscle tension database 215 based on the muscle tension data 214 transmitted from the exercise evaluation device 101. Specifically, a predetermined feature amount is calculated from the transmitted muscle tension data 214, and the minimum value and the maximum value for each feature amount are recalculated.
  • the server 1801 collectively recalculates the minimum value and the maximum value.
  • the server 1801 is realized by a so-called computer, and a processing unit such as a CPU executes this processing according to a program. The main body of the processing is the same in the following processing.
  • step S1903 the muscle tension database 215 recalculated by the server 1801 is delivered to the exercise evaluation device 101. It is desirable to set this delivery timing early in the morning in time for the start of use on the 1st. Further, instead of delivering at the timing of the server 1801, it may be delivered based on the request from the motion evaluation device 101.
  • step S1904 the wireless communication unit 205 or the peripheral device connection unit 206 of the exercise evaluation device 101 receives the distributed muscle tension database 215. Then, the control unit 201 updates the muscle tension database 215 by storing this in the storage unit 21.
  • step S1901 if the data capacity becomes enormous when the transmitted data itself is transmitted, the feature amount is extracted in advance by the motion evaluation device 101. Then, the data capacity can be reduced by transmitting only the feature amount to the server 1801. Further, in step S1903, the amount of data transmitted can be reduced by transmitting only the changed data or compressing and transmitting the data. This also applies to step S1901.
  • each embodiment of the present invention it becomes possible for a user or the like to grasp the exercise effect. Therefore, it is possible to improve or maintain the motivation of the user.
  • 101 motion evaluation device 101 motion evaluation device, 102 imaging device, 103 user, 104 training device, 201 control unit, 202 operation input unit, 203 display unit, 204 memory, 205 wireless communication unit, 206 peripheral device connection unit, 207 skeleton recognition unit, 208 joints Angle calculation unit, 209 muscle tension estimation unit, 210 muscle tension evaluation unit, 21 storage unit

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Rehabilitation Tools (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

従来、筋力トレーニングの運動効果が一般ユーザにはわかりにくく、トレーニングの継続のモチベーションが維持しにくかった。そこで、本発明では、ユーザ103が行ったトレーニングにおける運動効果を示す情報を、理解しやすい形で作成することを課題とする。上記の課題を解決するために、本発明では、ユーザ103がトレーニング装置104を用いて行うトレーニング動作を撮影装置102で撮影し、このトレーニング動作の画像から関節位置、角度を算出し、これらに基づいて関節の筋張力を推定し、推定された筋張力をデータベースと比較することで、トレーニングの効果を示す評価値を算出し、これを効果としてユーザ103に提示する運動評価装置101を提案する。

Description

運動評価装置および運動評価システム
　本発明は、人体のトレーニング、つまり、運動における運動効果を評価するための技術に関する。
　高齢者の転倒は、骨折を引き起こすことで寝たきりの要因になることが知られており、QoL（Quality of Life）向上のためには転倒を防止することが重要だと考えられている。
転倒の要因の一つとしては筋力低下が考えられており、介護施設などでは筋力トレーニングにより筋力を維持、向上する取り組みが行われている。また、運動の重要性は、高齢者に限らないことは言うまでもない。
　しかしながら、こうした筋力トレーニングは日常的に少しずつ継続して行うことが重要であり、高齢者のモチベーション維持が課題になっている。モチベーション維持のためには、日々の運動効果を把握できることが重要な要素と考えられる。但し、トレッドミルやフィットネスバイクなどの一般的なトレーニング装置では回転数や走行距離などトレーニング結果が得られるのみで筋肉の活動量を直接把握することは難しい。これを解決する手法として特許文献1や特許文献2に示すように筋肉の動作を解析し筋張力を得る手法が示されている。
国際公開2010/095636号 特開2016-35651号公報
　特許文献1では、トレーニング動作時の撮影画像から筋張力を推定し、筋肉の状態を撮影画像に重畳表示することが示されている。しかしながら、表示される内容は運動結果であり、運動効果を知るためには専門家が解釈する必要があるため、特に、専門知識を持たない一般ユーザが運動効果を把握することは難しかった。
　また、特許文献2では、リハビリ効果を把握するためにリハビリ動作時の撮影画像から可動範囲を推定し、人体構造上可動しうる範囲と比較することが示されている。しかしながら、この手法では人体構造上可動しうる範囲と比較する。このため、本来はトレーニング動作の種類やユーザの性別、年齢によって可動しうる範囲が異なるため比較対象の範囲を変えるべき点について考慮されていなかった。つまり、特許文献2においても運動効果を把握することが困難であった。
　以上のように、従来においては、トレーニングの効果（運動効果）を示す情報、わかり易い形で作成することが困難であった。
　上記課題を解決するために、本発明では、人体の運動に関する時系列データを用いて、当該運動効果を示す評価値を算出する。より具体的な本発明の一態様は、以下のとおりである。
　人体の運動を評価するための運動評価装置において、前記人体の運動の様子を示す運動データを入力する入力部と、前記運動データからの前記人体の関節座標を特定する骨格認識部と、前記関節座標から前記人体の関節角度を算出する関節角度算出部と、前記関節角度に基づいて、前記運動に関する特徴量の時系列データの増減変化の状況を特定し、特定された増減変化の状況に基づいて、前記運動の効果を示す評価値を算出する評価値算出部とを有する運動評価装置である。
　また、本発明には、上記の運動評価装置、トレーニングの様子を検出する検出装置およびトレーニングを行うためのトレーニング装置を備える運動評価システムも含まれる。さらに、本発明には、運動評価装置ないし運動評価システムを用いた運動評価方法も含まれる。またさらに、運動評価装置をコンピュータとして機能されるためのプログラムおよび当該プログラムを記憶した記憶媒体も本発明に含まれる。
　本発明によれば、運動を行うユーザ自身を含む運動に関する関係者が運動効果を把握することが可能になる。
実施例1にかかる運動評価システムの構成の一例を示す図 実施例1にかかる運動評価装置の構成の一例を示すブロック図 実施例1にかかるトレーニング装置の構成の一例を示すブロック図 実施例1にかかる撮影装置の構成の一例を示すブロック図 実施例1における各装置の処理シーケンスを示す図 実施例1におけるトレーニング装置の処理フローを示すフローチャート 実施例1における運動評価装置の処理フローを示すフローチャート 実施例1における筋張力データベースの構成の一例を示す図 実施例1における筋張力ピーク値の評価結果をユーザに提示する画面の一例 実施例1における筋張力ピーク到達時間の評価結果をユーザに提示する画面の一例 実施例1における筋張力ピーク値の評価結果を前回結果と比較してユーザに提示する画面の一例 実施例1において筋張力ピーク値の評価結果を他ユーザと比較してユーザに提示する画面の一例 実施例2にかかる運動評価システムの構成の一例を示す図 実施例2にかかる運動評価装置の構成の一例を示すブロック図 実施例2において転倒リスクの評価結果をユーザに提示する画面の一例を示す図 実施例3において用いられるトレーニング結果の構成の一例を示す図 実施例3において知覚遅延時間と動作遅延時間を算出する方法を示す図 実施例4における運動評価システムの構成の一例を示す図 実施例4における運動評価装置とサーバが通信を行う処理フローを示すフローチャート 実施例1におけるレーダーチャートでの評価値を表示した場合の画面の一例を示す図
　以下、本発明の各実施例について図面を用いて説明する。なお、各実施例では、ユーザ103、つまり、人体におけるトレーニングの運動効果を評価する。
　図1は、実施例1にかかる運動評価システムの構成を示した図である。本運動評価システムは、運動評価装置101、撮影装置102および運動を行うユーザ103が利用するトレーニング装置104で構成される。
　トレーニング装置104は、ユーザ103がインタラクティブにトレーニングを行うための装置であり、ユーザ103に動作開始指示を行ってユーザ103の動作の結果を受け取る。つまり、トレーニング装置104は、ユーザ103に対して運動を施すための装置であり、いわゆるトレッドミルを含む。このため、トレーニング装置104は、例えば床上に設置した板状で構成され、自身が内蔵する発光部302を点灯させる。このことで、ユーザ103はその点灯を認識したら足でトレーニング装置104を踏む。そして、トレーニング装置104はユーザ103により、踏まれたことを検知する。
　以上のトレーニング装置104による点灯とユーザ103の動作を繰り返すことで、ユーザ103の下半身がトレーニングされる。さらに、トレーニング装置104の床上の設置位置や点灯間隔を変えることで、ユーザ103のトレーニング強度を変えることができる。なお、トレーニング装置104の他の例としては、タッチパネルに表示された物体を足でタッチすることで下半身トレーニングを行うような装置も考えられる。
　撮影装置102は、ユーザ103が運動する様子を画像として取得する。このため、撮影装置102は、画像として静止画、動画のいずれを用いることが可能である。なお、本実施例では、静止画として時系列データとして扱える複数の静止画であることが望ましい。
　運動評価装置101は、トレーニング装置104や撮影装置102と例えば無線通信する。運動評価装置101は、運動の様子を示す画像データやトレーニング結果を受信する。なお、運動の様子を示す情報には、人体に対するモーションキャプチャデータ、筋電センサで検出される筋電データおよび加速度センサで検出される運動における加速度などを用いてもよい。このように、撮影装置102の代わりに各種検出装置を用いることが可能である。これは、言い換えると、画像データを含む各種検出データを、運動の様子を示す運動データとして利用することになる。なお、これら、各装置の詳細な構成は、図2～4を用いて、以下説明する。
　図2は、本実施例にかかる運動評価装置101の構成の一例を示した図である。運動評価装置101は、インターフェース機能として、マウス操作やタッチパネル操作などでユーザからの指示を受け付ける操作入力部202と、ユーザ103などの利用者に画面を提示する表示部203を有する。なお、これらをタッチパネルで構成することで、操作入力部202と表示部203を一体化して実現できる。また、運動評価装置101は、各部を動作制御する制御部201、制御部201で動作制御に係る処理データを一時的に保持するメモリ204と、無線により通信を行う無線通信部205と、USB等で周辺機器と接続する周辺機器接続部206を備える。この周辺機器接続部206は、各種情報の入力を受け付ける入力部として機能する。
　また、運動評価装置101は、本装置の機能を実行する骨格認識部207、関節角度算出部208、筋張力推定部209および筋張力評価部210を有する。なお、これら骨格認識部207、関節角度算出部208、筋張力推定部209は、制御部201内に設けてもよい。さらに、運動評価装置101は、各種情報を記憶する記憶部21を有する。
　そして、これら各部が共通バス（データバス、アドレスバスを含む）などの通信経路により接続されて構成されている。なお、骨格認識部207、関節角度算出部208、筋張力推定部209および筋張力評価部210は、それぞれプログラムで実現できる。つまり、制御部201はこれらのプログラムに従って本実施例の動作を実現することも可能である。この場合、骨格認識部207、関節角度算出部208、筋張力推定部209および筋張力評価部210のそれぞれは、骨格認識プログラム、関節角度算出プログラム、筋張力推定プログラムおよび筋張力評価プログラムとして実現してもよい。また、これら各プログラムは一体化して実現してもよい。また、各プログラムは、記憶部21に格納され、メモリ204に読み出される。そして、制御部201はメモリ204に読み出されたプログラムに従って後述する処理を実行する。
　また、記憶部21には、各部ないしプログラムの入力となるデータや処理結果のデータとして、画像データ211、トレーニング結果212、筋骨格モデル213、筋張力データ214、筋張力データベース215、筋張力評価値216を保持する。
　なお、運動評価装置101の処理の詳細は、フローチャートを用いて、後述する。また、運動評価装置101は、いわゆるコンピュータで実現でき、上述の骨格認識部207等をプログラムで実現する場合、当該プログラムは記憶媒体に格納されてもよいし、ネットワーク経由で配信されてもよい。
　次に、図3は、本実施例にかかるトレーニング装置104の構成の一例を示す図である。トレーニング装置104は、各部を動作制御する制御部301と、制御部で動作制御に係る処理データを一時的に保持するメモリ304とを備える。また、トレーニング装置104は、ユーザ103に動作開始を指示する発光部302と、ユーザ103の動作結果を検知する動作検知部303と、運動評価装置と制御信号やデータを送受信するための無線通信部305を備えている。ここで、発光部302は、例えばLEDで実現できる。
　ここで、トレーニング装置104は、動作検知部303の検知結果を用いて、トレーニングごとにユーザ103の踏み込み動作回数や所要時間などをトレーニング結果306として、記憶部に保存する。また、無線通信部305により、トレーニング終了後など所定タイミングに運動評価装置101に送信する。さらに、トレーニング装置104は、無線通信部305として、有線通信を行う機能を有してもよい。もしくは、無線通信部305の代わりに有線の通信部を設けてもよい。
　なお、図3は、トレーニング装置104の情報処理に関する部分に着目して記載したものある。このため、トレーニング装置104は、トレーニング用の部位を有したり、接続したりしている。トレーニング用の部位としては、足踏み部分、ベルトコンベアやこれを駆動させる駆動装置が含まれる。
　次に、図4は、本実施例にかかる撮影装置102の構成の一例を示す図である。撮影装置102は、各部を動作制御する制御部401と、制御部401で動作制御に係る処理データを一時的に保持するメモリ402と、運動評価装置101と制御信号やデータを送受信するための周辺機器接続部403とを備える。また、撮影装置102は、撮影における主要部として、赤外線を照射する赤外線プロジェクタ404と、赤外線を用いて画像を取得する赤外線カメラ405,406を備えている。ここで、本実施例では、赤外線カメラ405,406を用いるが、他のカメラであってもよい。さらに、カメラの数は問わない。またさらに、カメラの種類は赤外線カメラに限らない。これらについては、後述する他の実施例でも同様である。
　なお、本実施例では、周辺機器接続部403を設けているが、これを省略しカメラ単体で構成してもよい。この場合、画像データについては、記憶媒体を介して、運動評価装置101に送ることが可能である。また、運動評価装置101からの制御信号の代わりに、カメラ自身で撮影を制御してもよいし、手動で制御してもよい。なお、本実施例では、画像データとの表現を用いるが、撮影装置102で撮影ないし検出されたデータに基づくものであれば特にその表現は問わない。このため、画像データには、撮影されたデータそのままのデータ、これに対しノイズ低減や圧縮等何らかの変換が施されたデータが含まれる。
　次に、図5は、本実施例にかかる各装置間の処理シーケンスを示す図である。以下、図5に従って、各装置の処理内容を説明する。
　ステップS501において、運動評価装置101が周辺機器接続部206を介して、撮影装置102に対して撮影開始指示を送信する。撮影装置102は、周辺機器接続部403を介してこれを受信する。
　次に、ステップS502において、撮影装置102は、撮影開始指示に応じて、予め定められたトレーニング領域の撮影を開始する。つまり、制御部401の制御に従って、赤外線プロジェクタ404が赤外線を照射し、赤外線カメラ405,406が撮影を開始し、画像データを取得する。
　また、ステップS503において、運動評価装置101が無線通信部205を介して、トレーニング装置104に対してトレーニング開始指示を送信する。そして、トレーニング装置104は、無線通信部305を介して、トレーニング開始指示を受信する。なお、ステップS501とステップS503は並行して実施するなどその順序は入れ替え可能であるが、ステップS503がステップS504より先行することが望ましい。これは、トレーニングの様子を漏れなく撮影するためである。
　次に、ステップS504において、トレーニング装置104は、トレーニング開始指示に応じた所定のトレーニングメニューを開始する。このトレーニング実施中のトレーニング装置104の動作の詳細は後述する。また、ステップS505において、トレーニング装置104の制御部301は、上記トレーニングが終了したことを検出する。
　そして、ステップS506において、トレーニング装置104は無線通信部305を介して、
運動評価装置101に対してトレーニング終了通知およびユーザ103の運動結果をまとめたトレーニングデータを送信する。この送信は、それぞれのデータを別タイミングでも同じタイミングで行ってもよい。そして、運動評価装置101の無線通信部205は、トレーニング終了通知およびトレーニングデータを受信する。
　次に、ステップ507において、運動評価装置101の無線通信部205は、撮影装置102に対して、撮影終了指示を送信する。そして、撮影装置102の周辺機器接続部403は、撮影終了指示を受信する。
　次に、撮影装置102は、制御部301の制御に従って、受信した撮影終了指示に応じて、撮影を終了する。つまり、赤外線プロジェクタ404の赤外線照射および赤外線カメラ405,406の撮影を終了する。
　また、ステップS509において、撮影装置102は周辺機器接続部403を介して、運動評価装置101に対して撮影が終了したことを通知する。また、撮影装置102は周辺機器接続部403を介して、運動評価装置101に対して、赤外線カメラ405,406が撮影した画像データを送信する。なお、本実施例では、周辺機器接続部403を介して画像データを送信しているが、記憶媒体を介して、運動評価装置101が画像データを取得してもよい。また、撮影が終了したことは、利用者から操作入力部202を介して受け付けてもよい。
　ここで、本実施例の撮影装置102では、撮影した画像データの一例として深度情報を生成するものとする。なお、深度情報を生成する方法は一般的に知られており、例えば2台のカメラで撮影した2つの画像から対応する物体をそれぞれ検出し、その視差から三角測量の要領で深度を算出する方法が存在する（特開2020-53950号公報参照）。ここでは、三角測量の要領で深度情報を生成する例を示したが、ToF（Time of Flight）方式のように赤外線を照射して反射光を受光し、その遅延時間から深度を算出する方法を用いても良い。
　次に、ステップS510において、運動評価装置101の骨格認識部207が、ステップS509で送信された画像データからユーザ103の骨格を認識する。画像データから骨格を認識する方法は一般的に知られており、例えばToF方式で得た深度情報を人体モデルに当てはめて特徴点の三次元座標を得る技術が開示されている（国際公開12/528398号）。また、骨格の認識は、近年発展している深層学習を用い大量の画像から特徴点を識別するモデルを構築する手法もある。これら骨格認識技術により、所定単位の画像データの所定単位ごとに、ユーザ103の関節や任意の部位の三次元座標を得ることができる。ここで、所定単位としては、動画データにおけるフレームごとのデータや複数の静止画の場合における所定数の静止画データが含まれる。
　そして、運動評価装置101の関節角度算出部208が、三次元座標を用いて、ユーザ103の関節の角度を算出する。
　次に、ステップS511において、運動評価装置101の筋張力推定部209は、得られた骨格座標ないし関節の角度を用いて筋張力を推定する。そして、ステップS512において、運動評価装置101の筋張力評価部210は、推定された筋張力を用いて、ユーザ103のトレーニングの効果、つまり、運動の効果を評価する。筋張力評価部210の評価については、後述するが、筋張力評価部210は、運動の効果を示すスコア、つまり、評価値を算出する。つまり、本実施例では、筋張力評価部210は、評価値算出部として機能する。また、運動評価装置101は、制御部201の制御に従って、算出された評価値を表示部203に表示する。
　図6は、本実施例にかかるトレーニング装置104の処理フローを示すフローチャートである。本実施例のトレーニング装置104は、ユーザ103に足踏みトレーニングを実施させる装置である。このため、トレーニング装置104は、踏み出しのタイミングを発光部302の点灯によってユーザ103に通知する。足踏みは、トレーニング装置104に内蔵された動作検知部303で検出するが、検出方式は圧力センサやタッチパネルなどを用いればよい。本実施例では足踏みの例で説明するが、ユーザ103をインタラクティブに動作させ、トレーニング効果が得られる方法であれば手によるタッチ、トレッドミルなど別の動作を行うものでも構わない。以下、トレーニング装置104の処理をステップごとに説明するが、これは、図5におけるステップS504－S505の処理に該当する。
　ステップS601において、制御部301は、ユーザ103への動作開始を指示するために発光部302（LED）を点灯させる。この処理は、ステップS503で受信したトレーニング開始指示に応じて、実行する。この発行は、単純なLED発光で実現できるが、トレーニング装置104が内蔵もしくは接続する以下の構成を用いることが可能である。例えば、ディスプレイに表示した画像やテキスト、スピーカから出力する音声などである。このように、ユーザ103に指示を与えられる方法であればこれらに限定するものではない。
　次に、ステップS602において、制御部301は、発光部302の点灯に応じてトレーニングを行っているユーザ103からトレーニングの終了ないし停止の指示を受け付けたかを判断する。この指示は、図示しないタッチパネルのような入力部から受け付ける。この結果、指示を受け付けた場合は、ステップS603に進む。指示を受け付けない場合、ステップS605に進む。
　次に、ステップS603において、制御部301は、発光部302を消灯する。このことで、ユーザ103はトレーニングを一旦終了することになる。つまり、複数回で１セットとするトレーニングの1回分を終了することになる。この際、制御部301は、トレーニング結果306に含まれる該当のトレーニング回数を+1する。
　次に、ステップS604において、制御部301は、トレーニング結果306を用いて、該当のトレーニングが、トレーニング装置104に記憶された所定の回数を実行されたかを判定する。所定の回数を実行されていないと判定した場合、ステップS601に戻り、制御部301は再度、発光部302を点灯する。
　また、所定の回数を実行されたと判定した場合、トレーニングを終了する。この際、制御部301は、ステップS602における発光色やタイミングを変えて発光部302を点灯したり、音声などでトレーニングが終了したことを出力したりすることが望ましい。
　また、ステップS605において、制御部301は、ステップS601の点灯から予めトレーニング装置104に記憶された一定時間が経過したかを判定する。この結果、一定時間が経過したと判定した場合、ステップS603に進む。また、一定時間を経過していないと判定した場合、ステップS602に戻る。なお、このステップS605は省略してもよい。この場合、ステップS602で操作を受け付けていない、と判定した場合、ステップS602の処理を繰り返す。なお、動作に時間がかかるユーザもいるため、上述の一定時間は十分長い時間とすることが望ましい。
　以上のように、本実施例では、トレーニングを所定の回数繰り返す例で説明したが、ユーザのトレーニングにおける運動結果や運動効果に応じて、制御部301は動的にその回数を切り替えてもよい。なお、運動結果としては、足踏み回数が例示される。さらに、ステップS602やステップS605の判定において、予め記憶された運動結果（足踏み回数）や運動効果を用いて判定してもよい。
　以上により、トレーニングが終了すると、制御部301はトレーニング結果306にこの結果を格納する。そして、制御部301は無線通信部305を用いて、トレーニングの終了通知およびトレーニング結果306のうち該当するトレーニングデータを、運動評価装置101に送信する。つまり、ステップS506が実行される。以上で、トレーニング装置104の処理の説明を終了し、以下、運動評価装置101の処理について、説明する。
　図7は、本実施例における運動評価装置101が筋張力を評価する処理フローを示すフローチャートである。つまり、図5のステップS511の詳細を示す。このため、図7に示す処理を実行するまでに、運動評価装置101は、トレーニングデータや画像データを受信している。また、本実施例において、評価をするとは、運動効果を示すスコアである評価値を算出することを示す。
　まず、ステップS701において、骨格認識部20７は、ステップS510で認識された骨格座標を1フレーム分取得する。ここで取得される骨格座標には、ユーザの膝や足首など特徴点の三次元座標が含まれている。なお、本実施例では画像データとして、動画を用いるため、フレーム単位としたが、他の単位分を扱ってもよい。
　次に、ステップS702において、関節角度算出部208は、取得された1フレーム骨格座標から各関節の角度を算出する。骨格座標から関節角度を算出する手法は一般的に知られている。例えばモーションキャプチャで得られた実マーカの三次元座標を筋骨格モデル上の仮想マーカと照合し、姿勢を特定した上で関節角度を求める手法がある。この例として、福田らにより提案された、モーションキャプチャデータを用いた人体骨格モデルの運動学パラメータ推定方法がある。ここに示された手法では、以下の（数１）式で表される実マーカと仮想マーカの距離誤差Zを最小化することで、姿勢を特定している。
Figure JPOXMLDOC01-appb-M000001
　本実施例では1フレームごとに関節角度を算出する例を説明するが、公知技術で述べられているように複数フレームにわたって誤差を最小化することで特定した姿勢が滑らかに推移する効果が得られる。
　次に、ステップS703において、筋張力推定部209が、ステップS702で得られた関節角度を実現する筋張力を推定する。筋張力を推定する手法は一般的に知られており、例えば剛体リンク系の逆動力学による関節トルクの計算、ワイヤ長さの関節値に対するヤコビアンの計算、関節トルクのワイヤ張力への変換により筋張力を推定する手法がある（特許文献1）。具体的には、下記（数２）により関節トルク、つまり、筋張力を算出できる。
Figure JPOXMLDOC01-appb-M000002
　なお、（数２）で用いられるヤコビアンJは、以下の（数３）で算出される。
Figure JPOXMLDOC01-appb-M000003
　次に、ステップS704において、筋張力推定部209は、筋張力の推定（S7092）が全フレーム分終了したかを判定する。この結果、終了していないと判定した場合は、ステップS701に戻って、次のフレームについての処理を実行する。終了していると判定した場合は、ステップS705に進む。なお、本実施例では、全フレームを処理した場合、ステップS705以降の処理を行うとしているが、予め定めた一定数のフレームを処理した場合、ステップS705以降とステップS701以降の処理を並行して実施してもよい。
　次に、ステップS705において、筋張力評価部210が、ステップS701からS704で得られたトレーニングの各期間（各フレーム分）の筋張力を時系列データとして取得する。そして、筋張力評価部210は、その時系列データにおける増減変化に関わる情報を特徴量として抽出する。特徴量の種類（指標）として、トレーニングに伴って発揮される筋張力のピーク値やピーク到達時間を用いることができる。特徴量を算出する対象の部位は大腿直近や腓腹筋など特定の筋でもよいし、脚部に属する複数の筋の筋張力を総合的に判断し、各筋のピーク値の合計などを特徴量としてもかまわない。
　次に、ステップS706において、筋張力評価部210は、ステップS705で得られた特徴量に基づいて、筋張力の評価値を算出する。このために、筋張力評価部210は、図8に示す筋張力データベース215を用いる。この筋張力データベース215は、予めユーザとなり得る複数人の筋張力データを取得し、特徴量の最大値および最小値を調べておき、筋張力データベース215として保存する。筋張力データベース215は、図8に示すように、性別、年齢、身長、体重といった属性ごとに、特徴量の種類とその最小値および最大値が記録されている。
　この筋張力データベース215は、運動評価装置101の利用者が手作業で入力して作成もよいし、運動評価装置101が自動で作成してもよい。さらに、後述する処理で利用されたレコードを読み出しやすいように、筋張力評価部210は、利用した場合より上位にソートして記録してもよい。
　そして、筋張力評価部210は、筋張力データベース215に保存された特徴量の分布と今回得られた特徴量の値を比較して評価値を算出する。具体的な評価値の決定方法は、例えば最小値と最大値の間を100等分し、評価対象の特徴量がどこに位置するかで0点から100点でスコア化して、評価値を算出する。ここで、性別、年齢、身長、体重などの属性によって筋張力の特徴量の範囲が異なる。このため、筋張力データベース215ではその組み合わせごとに異なる最小値、最大値を保存することが望ましい。
　また、トレーニング動作ごとに筋張力の特徴量の範囲が異なるため、筋張力データベース215はトレーニング動作の種類ごとに異なる最小値、最大値を保存することが望ましい。さらに、繰り返し運動によってピーク値が複数得られる場合は、ピーク値の平均を評価値算出に用いればよい。また、平均のほかに中央値や分散などほかの統計量などの代表値を用いても構わない。
　以上では、筋張力評価部210は、評価値を特徴量の種類ごとに算出している。但し、筋張力評価部210は、複数の特徴量をまとめた総合的な評価値を算出してもよい。この場合、筋張力評価部210は、複数の特徴量それぞれの評価値を算出し、これらを用いて総合的な評価値を算出することになる。この総合的な評価値には、各評価値の合算、平均などの代表値が含まれる。
　以上のように評価値の算出がなされると、制御部301は、表示部203を用いて、評価処理の結果を出力する。以下、その内容を説明する。
　図9に、本実施例にかかる運動評価装置101が筋張力評価結果をユーザ103に提示する画面の一例を示す。この画面は、制御部301の制御に従って表示部203に表示される内容であり、以下の項目を有する。入力欄902にはデータ管理に必要なユーザID、氏名、筋張力評価において異なる筋張力データベースを参照するための性別、年齢、身長、体重を入力するようになっている。つまり、この入力に応じて、筋張力評価部210は、ステップS706の評価値の算出を行う。具体的には、筋張力評価部210が、入力された属性および該当する特徴量の種類をキーに筋張力データベース215を検索する。この結果、検索されたレコードの最小値と最大値を用いて、上述する評価値算出を筋張力評価部210が行う。
　また、画面中央には特徴量の抽出対象とした大腿直筋の筋張力の時間変化がグラフで表示される（903）。ユーザ103はこのグラフを見ることで、繰り返し運動に伴って筋張力が変動していることを俯瞰的に把握することができる。また、グラフの下には筋張力のピーク値の最小値、最大値、平均値が表示され、筋張力ピーク値の評価結果が評価値として（73点）表示される（904）。これにより、ユーザは運動効果を定量的かつ直感的に把握することができる。
　また、図10は、別の表示方法として筋張力のピーク到達時間を評価した結果を提示する例を示す。本画面も、制御部301の制御に従って表示部203に表示される内容である。画面中央には図9と同様に大腿直筋の筋張力の時間変化がグラフとして表示され、その下にはピーク到達時間の最小値、最大値、平均値とその評価結果である評価値が表示（47点）されている（1003）。この筋張力のピーク到達時間を定量的に見ることで、ユーザ103はトレーニングの際に自身の筋がどれだけ迅速に筋張力を発揮できているかを把握することができる。
　さらに、図11は、別の表示方法として筋張力の評価結果を前回トレーニングと比較して提示する例を示す。本画面も、制御部301の制御に従って表示部203に表示される内容である。画面中央には大腿直筋の筋張力の時間変化が前回分とともにグラフ表示される（1103）。ユーザはこのグラフを見ることで、筋張力の変化が前回と今回でどのように異なるか視覚的に理解することができる。
　また、グラフの下には筋張力のピーク値の最小値、最大値、平均値、評価結果を示す評価値がそれぞれ前回との比較で表示される。これを見ることで、ユーザ103は運動効果を前回と比較して理解することができる。また、前回との比較にもとづき、次回トレーニングでのアドバイス、おすすめのトレーニング方法1105などを提示すれば、さらにユーザのトレーニングを支援することができる。
　まさらに、図12は、さらに別の表示方法として筋張力の評価結果を他のユーザと比較して提示する例を示す。本画面も、制御部301の制御に従って表示部203に表示される内容である。画面中央には大腿直筋の筋張力の時間変化が他のユーザとの比較でグラフ表示される（1203）。ここで比較対象とするユーザとしては、例えば評価値が平均的なユーザを選択することが挙げられる。また、比較対象のユーザとして最高値を出したユーザを選択すれば、ユーザに対してさらなる努力を促すことができ、モチベーション向上につながると考えられる。また、画面右下のようにユーザ全体の評価値の分布（スコア分布）と、当該ユーザ103がそのスコア分布でどこに位置するかをヒストグラム1205で表示してもよい。
　なお、本実施例の評価値の表示を、特徴量の種類ごとに行っているが、総合的な評価点にまとめて表示してもよい。さらに、制御部201に従って表示部203に、複数の特徴量に関する評価値をレーダーチャートのようにまとめて表示してもよい。この一例を図20に示す。
　また本実施例では関節角度を算出するために骨格座標を用いたが、反射マーカを人体に貼り付けて複数カメラでその位置を認識する手法や、加速度など慣性センサを用いて動作を推定する手法など、ほかのモーションキャプチャ方式を使っても構わない。以上で、実施例1の説明を終了する。
　実施例1では、筋張力の時間変化から特徴量を算出して全体分布と比較することで、筋張力評価部210が評価値を算出する例を示した。しかし、筋張力の他、筋疲労など別のセンサの計測値を用いて、評価値を算出することも可能である。この例を、実施例2として、以下説明する。
　ここで、筋疲労については、例えば筋電図を用いて計測する手法が知られているが、筋電図は電極の装着が煩雑であったり、貼り付け部位の決定に専門知識を要するなど一般ユーザが手軽に計測することは困難である。そこで、本実施例では筋電図から得られる筋疲労と筋張力の関係をあらかじめモデル化しておき、トレーニング時には筋張力のみから筋疲労を推定する例について説明する。
　図13は、筋張力と筋疲労の関係をモデル化する際の計測システムを示した図である。実施例1で示したシステム構成に加えて、筋電センサ1301が追加されている。筋電センサ1301はユーザの大腿部などの皮膚に直接貼付され、トレーニング中の表面筋電図を取得する。取得された筋電データは運動評価装置101に送信され、筋疲労の評価が行われる。筋電図を用いた筋疲労計測手法は一般的に知られており、例えば筋疲労が発生すると筋電図の低周波成分が増加することを利用して筋疲労を検知する手法が示されている（例えば、特開2000-232号公報に記載）。
　図14は、本実施例にかかる運動評価装置101の構成を示している。なお、実施例1で説明した運動評価装置と同じ構成要素については同じ番号を付与してある。本実施例にかかる運動評価装置では新たに筋疲労推定モデル1401と、筋疲労予測値1402と、筋疲労予測部1403を備える。なお、筋疲労予測部1403は、制御部201内に設けてもよい。さらに、筋疲労予測部1403については、筋疲労予測プログラムとして、実現してもよい。これは、記憶部21に格納され、メモリ204に展開される。そして、制御部201がメモリ204に展開された筋疲労予測プログラムに従ってその機能を実行する。なお、筋疲労予測部1403も、評価値算出部として機能する。
　筋疲労推定モデル1401は、トレーニング中の筋張力変化から算出される特徴量と筋疲労評価値の関係を示すモデルであり、あらかじめ取得した特徴量と筋疲労評価値のデータセットを用いて構築される。このために、同一のトレーニングを異なるユーザに実施させたときの筋張力データを収集し、ピーク値やピーク到達時間など増減変化に関わる情報を抽出し特徴量とする。ここで、収集するデータは、予め定められた容量以上を収集することが望ましい。このデータは、運動評価装置101が実行することが望ましい。
　ここで、筋疲労評価値は、例えば運動後にVAS（Visual Analogue Scale）などの主観評価結果であり、筋張力データを取得したときに対応する評価値を併せて取得しておく。モデル構築手法としては、サポートベクターマシンやニューラルネットワークに代表される機械学習アルゴリズムを用いればよい。筋張力データの特徴量と筋疲労評価値の関係は性別、年齢、身長、体重によって異なるため、その組み合わせごとに異なる筋疲労推定モデルを構築することが望ましい。トレーニングを実施し、筋疲労予測値を得たいときには、図1に示すシステムを用いて筋張力データを生成する。以上の情報は、筋疲労予測部1403が実行する。また、制御部201の制御に従って、表示部203が、構築した筋疲労推定モデルを用いた筋疲労の予測結果をユーザ103に提示する。
　また、本実施例の応用例としては、高齢者の転倒リスク評価値の予測に用いることが考えられる。転倒リスク要因の一つとしては筋力低下が知られているが、転倒リスク評価はTUG（Time Up & Go Test）測定など専門家によるアセスメントを要するため、一般ユーザが手軽に評価することは難しい。あらかじめ専門家が評価した転倒リスク評価値を取得しておき、トレーニング時の筋張力変化の特徴量とこの転倒リスク評価値の関係をモデル化すれば、筋張力のみから容易に転倒リスクを評価することができる。
　図15は、推定した転倒リスク評価値をユーザに提示する画面の一例である。この画面も実施例1と同様に、制御部201の制御に従って、表示部203が表示する。図15に示すように、例えば転倒リスクが高いほうを5とし、5段階評価で数値を表示すればよい（1504）。また、図15中の画面右下に示すように転倒リスクをもとにしたアドバイス1505を表示してもよい。
　実施例1では筋張力データの増減変化に関わる情報のみを特徴量として筋張力評価値を得る例を示したが、運動評価装置101がトレーニング装置104のデータを組み合わせてさらに詳細な解析に基づく評価を行ってもよい。トレーニング装置104のデータとして、トレーニング結果212の内部構成の一例を図16に示す。トレーニング結果212には、トレーニング装置104の点灯時刻とユーザ操作を検知した時刻が格納されている。それぞれの時刻はミリ秒単位で表現され、ユーザ103のトレーニングである動作を細かく計測することが可能である。
　図17には、トレーニング装置104の点灯時刻1701およびユーザ操作検知時刻1703と筋張力変化の関係を示している。本実施例にかかるトレーニング装置104では、発光部が点灯したことをユーザが知覚してから動作を開始し、トレーニング装置104での操作が検知される流れになる。このうち点灯時刻1701から筋張力が発生し始める時刻1702まではユーザ103が点灯を知覚するまでの遅延時間を表しており、時刻1702からユーザ操作検知時刻1703まではユーザの動作が完了するまでの遅延時間を表している。つまり知覚遅延時間1704と動作遅延時間1705は身体の異なる機能を評価した計測値だと言うことができる。繰り返し動作において知覚遅延時間と動作遅延時間がそれぞれどのように変化するかを、平均や分散等で数値化し特徴量とする。この処理は、筋張力推定部209で実行される。
　その他の処理については、実施例1で示した手順と同様に、筋張力評価部210が、あらかじめ生成した筋張力データベースと比較して当該トレーニングの知覚遅延時間および動作遅延時間をスコア化、つまり、評価値を算出する。そして、制御部301の制御により図示しない表示画面にこれを表示することで、ユーザ103に提示する。
　実施例1では、筋張力データベース215をあらかじめ保存しておく例を示したが、筋張力データベース215は、随時更新されてもよい。この例を実施例4として、説明する。
　この例では、最小値や最大値が変更される。このため、上述のステップS705およびS706については、変更された最小値や最大値が用いられることになる。ここで、ユーザ103が継続的にトレーニングを行うと、トレーニングの間で最小値や最大値が変更されることもあり得る。
　このような場合に、筋張力評価部210が変更後の最小値や最大値を用いると、評価値の継続性に問題が生じることがある。つまり、同じ特徴量でも最小値や最大値が変わることで、評価値が変わってしまうことがある。このようなことに対応するために、本実施例では、筋張力データベース215の更新に合わせて、ステップS706で算出される評価値を、筋張力評価部210が補正することが望ましい。この補正は、最小値および最大値の変更前後の差分に応じた補正係数を、筋張力評価部210が算出することで実現できる。
　実施例4は、実施例1～3で示す構成でも実現できるが、より好適なシステム構成を図18に示す。図18は、本実施例にかかるシステム構成図である。運動評価装置101はネットワークを経由してサーバ1801と接続され、筋張力データの送信および筋張力データベース215に格納するデータの受信を行う。図18にはサーバ1801にひとつの運動評価装置101が接続される形態を示したが、様々な場所に設置された複数の運動評価装置101が接続されてもよい。また、サーバ1801と運動評価装置101を接続するネットワークの形式は問わない。
　次に、図19は、本実施例にかかる運動評価装置101がサーバ1801との通信により筋張力データベースを更新するフローを示すフローチャートである。
　ステップS1901において、運動評価装置101無線通信部205ないし周辺機器接続部206が制御部301に従って、蓄積された一定期間分の筋張力データ214をサーバ1801に送信する。送信頻度は1日ごとや1週間ごとなど筋張力データの蓄積ペースに合わせて適切に設定する。
このタイミングは周期的であってもよいし、筋張力データ214の更新ないし変更があった場合としてもよい。また、送信タイミングは深夜など運動評価装置101の使用の妨げにならない時間帯が望ましい。
　次に、ステップS1902において、サーバ1801が運動評価装置101から送信された筋張力データ214に基づいて、筋張力データベース215を再計算する。具体的には、送信された筋張力データ214から所定の特徴量を算出し、特徴量ごとの最小値、最大値を再計算する。複数の運動評価装置101から筋張力データ214を受信する場合は、サーバ1801は、それらをまとめて最小値、最大値を再計算する。なお、サーバ1801は、いわゆるコンピュータで実現され、この処理をＣＰＵのような処理部が、プログラムに従って実行する。以下の処理でも処理の主体は同様である。
　次に、ステップS1903において、サーバ1801が再計算した筋張力データベース215を運動評価装置101に配信する。この配信タイミングは1日の利用開始に間に合うように早朝などに行うことが望ましい。また、サーバ1801のタイミングで配信するのではなく、運動評価装置101からの要求に基づいて配信しても構わない。
　そして、ステップS1904において、運動評価装置101の無線通信部205ないし周辺機器接続部206は、配信された筋張力データベース215を受信する。そして、制御部201が、記憶部21にこれを格納することで、筋張力データベース215を更新する。
　なお、ステップS1901において、送信されるデータそのものを送信するとデータ容量が膨大になる場合は、あらかじめ運動評価装置101で特徴量を抽出しておく。そして、その特徴量のみをサーバ1801に送信するようにすればデータ容量を低減することができる。また、ステップS1903において、変更されたデータに限定した送信や圧縮して送信することで、データの送信量を削減できる。このことは、ステップS1901でも同様である。
　以上で、本発明の各実施例の説明を終了するが、これら実施例の機能を組み合わせることも可能である。また、本発明の各実施例によれば、ユーザなどが運動効果を把握することが可能になる。このため、ユーザのモチベーションの向上ないし維持を図ることも可能になる。
101　運動評価装置、102　撮影装置、103　ユーザ、104　トレーニング装置、201　制御部、202　操作入力部、203　表示部、204　メモリ、205　無線通信部、206　周辺機器接続部、207　骨格認識部、208　関節角度算出部、209筋張力推定部、210　筋張力評価部、21　記憶部

Claims (10)

  1. 　人体の運動を評価するための運動評価装置において、
    　前記人体の運動の様子を示す運動データを入力する入力部と、
    　前記運動データからの前記人体の関節座標を特定する骨格認識部と、
    　前記関節座標から前記人体の関節角度を算出する関節角度算出部と、
    　前記関節角度に基づいて、前記運動に関する特徴量の時系列データの増減変化の状況を特定し、特定された増減変化の状況に基づいて、前記運動の効果を示す評価値を算出する評価値算出部とを有する運動評価装置。
  2. 　請求項１に記載の運動評価装置と、
    　前記人体に対し、前記運動を施すためのトレーニング装置と、
    　前記人体の運動の様子を検出し、前記運動評価装置に対して、前記運動データを送信する検出装置とを備える運動評価システム。
  3. 　請求項２に記載の運動評価システムにおいて、
    　前記運動評価装置は、予め属性ごとに記憶されている前記特徴量における最大値および最小値と、前記特徴量の代表値の関係に基づいて、前記評価値を算出する運動評価システム。
  4. 　請求項３に記載の運動評価システムにおいて、
    　前記運動評価装置は、前記最大値および前記最小値を記憶するデータベースサーバとネットワークを介して接続され、
    　前記運動評価装置は、前記データベースサーバへ前記最大値および前記最小値に変化が生じた場合、当該変化に関する情報を限定的に送信する運動評価システム。
  5. 　請求項１に記載の運動評価装置において、
    　さらに、前記特徴量として、前記運動における前記人体の筋張力を推定する筋張力算出部有する運動評価装置。
  6. 　請求項１に記載の運動評価装置において、
    　前記評価値算出部は、予め属性ごとに記憶されている前記特徴量における最大値および最小値と、前記特徴量の代表値の関係に基づいて、前記評価値を算出する運動評価装置。
  7. 　請求項６に記載の運動評価装置において、
    　前記代表値は、前記特徴量の時系列データにおける平均値である運動評価装置。
  8. 　請求項６に記載の運動評価装置において、
    　前記評価値算出部は、前記最大値および前記最小値の変化に応じて、前記評価値を補正する運動評価装置。
  9. 　請求項６に記載の運動評価装置において、
    　前記評価値算出部は、前記評価値を予め定められる前記特徴量の種類ごとの評価値もしくは複数の前記特徴量の種類を総合した評価値を算出する運動評価装置。
  10. 　請求項１に記載の運動評価装置において、
    　前記運動データは、撮影装置で撮影される前記人体の画像データ、前記人体に対するモーションキャプチャデータ、筋電センサで検出される前記人体の筋電データおよび加速度センサで検出される前記人体の運動における加速度の少なくとも１つを含む運動評価装置。
PCT/JP2021/007906 2020-09-18 2021-03-02 運動評価装置および運動評価システム WO2022059228A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-157508 2020-09-18
JP2020157508A JP2022051173A (ja) 2020-09-18 2020-09-18 運動評価装置および運動評価システム

Publications (1)

Publication Number Publication Date
WO2022059228A1 true WO2022059228A1 (ja) 2022-03-24

Family

ID=80777423

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/007906 WO2022059228A1 (ja) 2020-09-18 2021-03-02 運動評価装置および運動評価システム

Country Status (2)

Country Link
JP (1) JP2022051173A (ja)
WO (1) WO2022059228A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2024025863A (ja) 2022-08-15 2024-02-28 株式会社アシックス 歩行評価システムおよび歩行評価方法
US20240078842A1 (en) * 2022-09-02 2024-03-07 Htc Corporation Posture correction system and method
JP7559811B2 (ja) 2022-09-14 2024-10-02 カシオ計算機株式会社 運動評価方法、情報処理装置、運動評価システム及びプログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999061110A1 (fr) * 1998-05-27 1999-12-02 Japan Science And Technology Corporation Machine d'entrainement pour exercice de reaction dynamique et systeme d'evaluation d'exercice de reaction dynamique
WO2013153635A1 (ja) * 2012-04-11 2013-10-17 システム・インスツルメンツ株式会社 トレーニング装置
JP2016035651A (ja) * 2014-08-01 2016-03-17 株式会社日立ソリューションズ 在宅リハビリテーションシステム
WO2018179664A1 (ja) * 2017-03-28 2018-10-04 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP2019154489A (ja) * 2018-03-07 2019-09-19 社会福祉法人兵庫県社会福祉事業団 運動能力評価システム
JP2020141806A (ja) * 2019-03-05 2020-09-10 株式会社Ｓｐｏｒｔｉｐ 運動評価システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999061110A1 (fr) * 1998-05-27 1999-12-02 Japan Science And Technology Corporation Machine d'entrainement pour exercice de reaction dynamique et systeme d'evaluation d'exercice de reaction dynamique
WO2013153635A1 (ja) * 2012-04-11 2013-10-17 システム・インスツルメンツ株式会社 トレーニング装置
JP2016035651A (ja) * 2014-08-01 2016-03-17 株式会社日立ソリューションズ 在宅リハビリテーションシステム
WO2018179664A1 (ja) * 2017-03-28 2018-10-04 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP2019154489A (ja) * 2018-03-07 2019-09-19 社会福祉法人兵庫県社会福祉事業団 運動能力評価システム
JP2020141806A (ja) * 2019-03-05 2020-09-10 株式会社Ｓｐｏｒｔｉｐ 運動評価システム

Also Published As

Publication number Publication date
JP2022051173A (ja) 2022-03-31

Similar Documents

Publication Publication Date Title
WO2022059228A1 (ja) 運動評価装置および運動評価システム
JP5314224B1 (ja) ランニングフォーム診断システムおよびランニングフォームを得点化する方法
US9374522B2 (en) Video generating apparatus and method
US20160073614A1 (en) System and Method for Detection of Lameness in Sport Horses and other Quadrupeds
KR102245338B1 (ko) 웨어러블 기반 셀프형 운동관리 시스템 및 그 방법
JPWO2008093406A1 (ja) 歩行能力診断システム
WO2016200564A1 (en) System and method for detection of lameness in sport horses and other quadrupeds
KR102556863B1 (ko) 사용자 맞춤형 운동 훈련 방법 및 시스템
CN111937078A (zh) 身体功能自主辅助装置及其方法
JP6509406B1 (ja) 歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置
CN104412269A (zh) 使用交互场景系统进行神经运动康复的方法和装置
KR20190097361A (ko) 자세 교정을 위한 자세 평가 시스템 및 그 방법
KR20220106448A (ko) 맞춤형 운동처방을 위한 인공지능 동작인식 평가 및 근전도 측정 시스템
US11497962B2 (en) System and method for human motion detection and tracking
JP3569188B2 (ja) ウォーキング判定装置
CN112494034B (zh) 基于3d体态检测分析的数据处理分析系统及方法
KR102395937B1 (ko) 보행 시간-주파수 분석에 기초한 건강 상태 예측 방법 및 시스템
KR102412841B1 (ko) 고령자 헬스케어를 위한 스마트 보행 시뮬레이터
JP6997228B2 (ja) 深層筋状態の推定装置
JP6552875B2 (ja) 移動運動解析装置、方法及びプログラム
CN114642424A (zh) 一种基于体感交互技术的体能评估方法和装置
US20220406206A1 (en) Recording medium recorded with cardiopulmonary resuscitation training program, cardiopulmonary resuscitation training method, apparatus, and system
JP6492375B2 (ja) 歩行測定機の作動方法
WO2022249746A1 (ja) 身体機能推定システム、身体機能推定方法、及び、プログラム
CN114642423B (zh) 基于体验质量的下肢外骨骼机器人步态规划方法及系统

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21868916

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21868916

Country of ref document: EP

Kind code of ref document: A1