CN113842622B - 一种运动教学方法、装置、系统、电子设备及存储介质 - Google Patents

一种运动教学方法、装置、系统、电子设备及存储介质 Download PDF

Info

Publication number
CN113842622B
CN113842622B CN202111114066.XA CN202111114066A CN113842622B CN 113842622 B CN113842622 B CN 113842622B CN 202111114066 A CN202111114066 A CN 202111114066A CN 113842622 B CN113842622 B CN 113842622B
Authority
CN
China
Prior art keywords
target user
information
action
user
movement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111114066.XA
Other languages
English (en)
Other versions
CN113842622A (zh
Inventor
任一帆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN202111114066.XA priority Critical patent/CN113842622B/zh
Publication of CN113842622A publication Critical patent/CN113842622A/zh
Application granted granted Critical
Publication of CN113842622B publication Critical patent/CN113842622B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0625Emitting sound, noise or music
    • A63B2071/0627Emitting sound, noise or music when used improperly, e.g. by giving a warning
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B2071/0647Visualisation of executed movements
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/806Video cameras
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/83Special sensors, transducers or devices therefor characterised by the position of the sensor
    • A63B2220/833Sensors arranged on the exercise apparatus or sports implement

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

本发明实施例提供了一种运动教学方法、装置、系统、电子设备及存储介质,所述方法包括:获取目标用户跟随运动课程进行运动过程中的运动图像,对运动图像进行人体检测,提取运动图像中目标用户的第一骨骼关键点以及第一肌肉信息,基于第一骨骼关键点以及第一肌肉信息确定目标用户对应的动作信息,将动作信息与预先确定的目标用户的动作标准范围进行对比,确定目标用户做出的动作的标准情况,基于标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。这样,可以将动作信息与标准范围进行对比确定标准情况,根据标准情况播放更改后的语音指导信息,从而使目标用户可以更适合自身情况的完成动作,可以使目标用户运动效果更佳。

Description

一种运动教学方法、装置、系统、电子设备及存储介质
技术领域
本发明涉及运动辅助技术领域,特别是涉及一种运动教学方法、装置、系统、电子设备及存储介质。
背景技术
随着科技的发展以及人们对身体健康的关注,越来越多的运动APP(应用程序,Application)进入人们的生活。目前用户在使用运动APP进行健身运动时,可以选择自己感兴趣的运动课程,例如,瑜伽、普拉提、有氧健身操等。用户可以播放该运动课程对应的运动视频,进而跟随运动视频做出相应的健身动作。
在上述运动过程中,用户在做出健身动作时,只是模仿运动视频中的动作做出自己认为正确的健身动作,但是,实际上用户所做出的健身动作很可能只是姿势看上去类似,实际上并不正确。因此,目前用户利用运动APP进行健身运动的效果并不理想。
发明内容
本发明实施例的目的在于提供一种运动教学方法、装置、系统、电子设备及存储介质,以使目标用户在跟随运动课程进行运动的过程中达到的效果更佳。具体技术方案如下:
第一方面,本发明实施例提供了一种运动教学方法,所述方法包括:
获取目标用户跟随运动课程进行运动过程中的运动图像;
对所述运动图像进行人体检测,提取所述运动图像中所述目标用户的第一骨骼关键点以及第一肌肉信息;
基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息;
将所述动作信息与预先确定的所述目标用户的动作标准范围进行对比,确定所述目标用户做出的动作的标准情况;
基于所述标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。
可选的,在所述获取目标用户跟随运动课程进行运动过程中的运动图像的步骤之前,所述方法还包括:
获取所述目标用户的用户类型以及所述目标用户输入的运动目的信息;
基于所述用户类型以及所述运动目的信息,按照预设标准制定规则确定所述目标用户适用的动作标准范围。
可选的,所述获取所述目标用户的用户类型的步骤,包括:
获取所述目标用户的用户信息,其中,所述用户信息包括身体状态信息、年龄信息以及病例信息中的至少一种;
基于所述用户信息以及预设分类规则,确定所述目标用户的用户类型。
可选的,所述用户信息包括所述身体状态信息;
所述获取所述目标用户的用户信息的步骤,包括:
获取所述目标用户处于站立状态下的待检测图像,其中,所述待检测图像包括针对所述目标用户的正面方向、侧面方向以及背面方向所采集的图像;
对所述待检测图像进行人体检测,提取所述待检测图像中所述目标用户的第二骨骼关键点以及第二肌肉信息;
基于所述第二骨骼关键点以及所述第二肌肉信息,确定所述目标用户的身体状态信息。
可选的,所述方法还包括:
在所述目标用户跟随运动课程进行运动过程中,若所述标准情况表示所述目标用户做出的动作符合所述动作标准范围,获取所述目标用户的运动时长;
若所述运动时长未达到所述运动课程的时长,增加所述运动课程包括的动作数量;
若所述运动时长达到所述运动课程的时长,减少所述运动课程包括的动作数量。
可选的,所述方法还包括:
在所述目标用户跟随运动课程运动结束后,统计所述目标用户的动作对应的标准情况;
基于所述标准情况,调整所述目标用户的运动课程的难度。
可选的,所述基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息的步骤,包括:
基于所述第一骨骼关键点以及所述第一肌肉信息,确定所述目标用户对应的姿态信息和动作发力点信息,作为所述目标用户对应的动作信息。
第二方面,本发明实施例提供了一种运动教学装置,所述装置包括:
第一获取模块,用于获取目标用户跟随运动课程进行运动过程中的运动图像;
提取模块,用于对所述运动图像进行人体检测,提取所述运动图像中所述目标用户的第一骨骼关键点以及第一肌肉信息;
第一确定模块,用于基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息;
对比模块,用于将所述动作信息与预先确定的所述目标用户的动作标准范围进行对比,确定所述目标用户做出的动作的标准情况;
语音指导模块,用于基于所述标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。
可选的,所述装置还包括:
第二获取模块,用于获取所述目标用户的用户类型以及所述目标用户输入的运动目的信息;
第二确定模块,用于基于所述用户类型以及所述运动目的信息,按照预设标准制定规则确定所述目标用户适用的动作标准范围。
可选的,所述第二获取模块,包括:
第一获取单元,用于获取所述目标用户的用户信息,其中,所述用户信息包括身体状态信息、年龄信息以及病例信息中的至少一种;
第一确定单元,用于基于所述用户信息以及预设分类规则,确定所述目标用户的用户类型。
可选的,所述用户信息包括所述身体状态信息;
所述第一获取单元,包括:
获取子单元,用于获取所述目标用户处于站立状态下的待检测图像,其中,所述待检测图像包括针对所述目标用户的正面方向、侧面方向以及背面方向所采集的图像;
提取子单元,用于对所述待检测图像进行人体检测,提取所述待检测图像中所述目标用户的第二骨骼关键点以及第二肌肉信息;
确定子单元,用于基于所述第二骨骼关键点以及所述第二肌肉信息,确定所述目标用户的身体状态信息。
可选的,所述装置还包括:
第三获取模块,用于在所述目标用户跟随运动课程进行运动过程中,若所述标准情况表示所述目标用户做出的动作符合所述动作标准范围,获取所述目标用户的运动时长;
增加模块,用于若所述运动时长未达到所述运动课程的时长,增加所述运动课程包括的动作数量;
减少模块,用于若所述运动时长达到所述运动课程的时长,减少所述运动课程包括的动作数量。
可选的,所述装置还包括:
统计模块,用于在所述目标用户跟随运动课程运动结束后,统计所述目标用户的动作对应的标准情况;
调整模块,用于基于所述标准情况,调整所述目标用户的运动课程的难度。
可选的,所述第一确定模块,包括:
第二确定单元,用于基于所述骨骼关键点以及所述肌肉信息,确定所述目标用户对应的姿态信息和动作发力点信息,作为所述目标用户对应的动作信息。
第三方面,本发明实施例提供了一种运动教学系统,所述系统包括图像采集设备和电子设备,其中:
所述图像采集设备,用于在运动过程中采集目标用户的运动图像;
所述电子设备,用于接收所述运动图像,并执行上述第一方面任一项所述的方法步骤。
第四方面,本发明实施例提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述第一方面任一所述的方法步骤。
第五方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面任一所述的方法步骤。
本发明实施例有益效果:
本发明实施例提供的方案中,电子设备可以获取目标用户跟随运动课程进行运动过程中的运动图像,对运动图像进行人体检测,提取运动图像中目标用户的第一骨骼关键点以及第一肌肉信息,基于第一骨骼关键点以及第一肌肉信息确定目标用户对应的动作信息,将动作信息与预先确定的目标用户的动作标准范围进行对比,确定目标用户做出的动作的标准情况,基于标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。通过上述方案,电子设备可以从运动图像中获取目标用户的第一骨骼关键点和第一肌肉信息,进而确定当前时刻目标用户的动作,将该动作的动作信息与目标用户自身的标准范围进行对比,确定出目标用户做出的动作的标准情况,并且,根据标准情况,更改预设的语音指导信息,并播放更改后的语音指导信息,从而使目标用户可以跟随语音指导完成更适合自身情况的动作,而不是目标用户一味的模仿运动视频中的动作,这样,可以使目标用户在跟随运动课程进行运动的过程中达到的效果更佳。当然,实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的实施例。
图1为本发明实施例所提供的一种运动教学方法的流程图;
图2为本发明实施例所提供的运动教学方法的应用场景的一种示意图;
图3为基于图1所示实施例的动作标准范围确定方式的一种流程图;
图4为图3所示实施例中步骤S301的一种具体流程图;
图5为图4所示实施例中步骤S401的一种具体流程图;
图6为基于图1所示实施例的动作数量调整方式的一种流程图;
图7为基于图1所示实施例的课程难度调整方式的一种流程图;
图8为本发明实施例所提供的一种运动教学装置的结构示意图;
图9为本发明实施例所提供的一种运动教学系统的结构示意图;
图10为本发明实施例所提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员基于本发明所获得的所有其他实施例,都属于本发明保护的范围。
为了能够使目标用户在跟随运动课程进行运动的过程中达到的效果更佳,本发明实施例提供了一种运动教学方法、装置、系统、电子设备、计算机可读存储介质以及计算机程序产品。下面首先对本发明实施例所提供的一种运动教学方法进行介绍。
本发明实施例所提供的一种运动教学方法可以应用于任一进行运动教学的电子设备,例如,可以为服务器或终端,例如,电脑、手机、平板电脑等,在此不做具体限定,为了描述清楚,后续称为电子设备。
如图1所示,一种运动教学方法,所述方法包括:
S101,获取目标用户跟随运动课程进行运动过程中的运动图像;
S102,对所述运动图像进行人体检测,提取所述运动图像中所述目标用户的第一骨骼关键点以及第一肌肉信息;
S103,基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息;
S104,将所述动作信息与预先确定的所述目标用户的动作标准范围进行对比,确定所述目标用户做出的动作的标准情况;
S105,基于所述标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。
可见,本发明实施例提供的方案中,电子设备可以获取目标用户跟随运动课程进行运动过程中的运动图像,对运动图像进行人体检测,提取运动图像中目标用户的第一骨骼关键点以及第一肌肉信息,基于第一骨骼关键点以及第一肌肉信息确定目标用户对应的动作信息,将动作信息与预先确定的目标用户的动作标准范围进行对比,确定目标用户做出的动作的标准情况,基于标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。通过上述方案,电子设备可以从运动图像中获取目标用户的第一骨骼关键点和第一肌肉信息,进而确定当前时刻目标用户的动作,将该动作的动作信息与目标用户自身的标准范围进行对比,确定出目标用户做出的动作的标准情况,并且,根据标准情况,更改预设的语音指导信息,并播放更改后的语音指导信息,从而使目标用户可以跟随语音指导完成更适合自身情况的动作,而不是目标用户一味的模仿运动视频中的动作,这样,可以使目标用户在跟随运动课程进行运动的过程中达到的效果更佳。
当目标用户想要进行运动锻炼时,可以通过终端设备中的运动应用程序来实现运动锻炼的目的。具体来说,用户可以点击运动应用程序的开始运动按钮或点击运动课程中的运动视频播放按钮等来开始播放运动课程的视频。这样,目标用户便可以跟随运动课程的视频进行运动,也就是做出与运动课程的视频中相同的动作。运动课程可以为瑜伽课程、普拉提课程、有氧操课程、舞蹈课程等,在此不做具体限定。
为了确定目标用户做出的动作是否标准,电子设备可以获取目标用户跟随运动课程进行运动过程中的运动图像,也就是执行上述步骤S101。为了能够获取运动图像,可以在目标用户所在场景中预先安装图像采集设备,该图像采集设备可以为一个或多个,在此不做具体限定。
例如,如图2所示,目标用户210所在场景中可以安装3个图像采集设备,即摄像头220、摄像头230以及摄像头240。该3个摄像头可以分别安装于目标用户进行运动锻炼时的前方、后方以及侧方,可以分别采集不同方位的运动图像。在一种实施方式中,电子设备可以在接收到能够表征目标用户开始运动的指令时,发送图像采集指令至各个图像采集设备,这样,图像采集设备便开始采集目标用户跟随运动课程进行运动过程中的运动图像,并发送至电子设备。
其中,上述运动图像可以为目标用户占图像比例较大的清晰人物图像,例如,目标用户A在运动过程中,获取的运动图像可以为目标用户A占图像比例大于75%及以上的图像。这样,可以保证后续提取的骨骼关键点以及肌肉信息的准确性。
获取到上述运动图像后,电子设备可以执行上述步骤S102,即对运动图像进行人体检测,提取运动图像中目标用户的第一骨骼关键点以及第一肌肉信息。
在一种实施方式中,电子设备可以利用目标检测算法,检测得到运动图像中的所有关键点,并提取所有关键点中位于人体的关键点,作为有效关键点,基于有效关键点标注出第一骨骼关键点。由于骨骼关键点在运动图像中可能有三种状态:可见、不可见、以及不再图内或不可推测,因此,电子设备可以对多张运动图像进行检测,进而获取完整的第一骨骼关键点。
其中,第一骨骼关键点包括肩膀、手肘、手腕、髋骨、膝盖、脚踝、脖子和头顶等,在此不做具体限定。例如,电子设备可以利用目标检测算法,检测目标用户C的运动图像1中的所有关键点,提取所有关键点中位于目标用户C上的关键点,作为有效关键点,并从有效关键点中标注出第一骨骼关键点,具体可以为:1、右肩,2、右肘,3、右腕,4、左肩,5、左肘,6、左腕,7、右髋,8、右膝,9、右踝,10、左髋,11、左膝,12、左踝,13、头顶,14、脖子。
电子设备可以利用边缘检测算法等对运动图像中的目标用户进行边缘检测,从而确定目标用户的肢体的外形轮廓,由于进行运动锻炼时一般穿着比较紧身的运动服装,并且一般胳膊和腿部等肢体是没有衣物覆盖的,所以目标用户的肢体的外形轮廓,可以反映目标用户做出动作而发力时的肌肉轮廓,可以作为目标用户的第一肌肉信息。
在获取到目标用户的第一骨骼关键点以及第一肌肉信息后,电子设备可以基于第一骨骼关键点以及第一肌肉信息确定目标用户对应的动作信息,其中,该动作信息为能够标识目标用户做出的动作的形态、发力点等的信息。在一种实施方式中,电子设备可以将第一骨骼关键点所包含的关键点按照人体结构连接构成人体骨架图,进而根据人体骨架图确定出当前目标用户的身体与四肢的相对位置信息。在此基础上,还可以结合第一肌肉信息确定出目标用户做出该动作时的发力点信息,进而,将该相对位置信息和发力点信息作为动作信息。
在得到当前目标用户的动作信息后,为了使目标用户在跟随运动课程进行运动过程中,能够尽量标准地完成动作,从而达到更加的运动效果,电子设备可以将目标用户的动作信息与预先确定的目标用户的动作标准范围进行对比,从而确定出目标用户做出的动作的标准情况,即执行上述步骤S104。
在一种实施方式中,目标用户的动作标准范围可以预先基于目标用户在运动应用程序的注册页面输入的年龄信息、历史运动频率、病例信息以及运动目标信息等信息确定,其中,运动目标信息为运动所要达成的效果。该动作标准范围为根据这些信息确定的适合该目标用户的身体状况以及运动目标的标准范围,针对不同的用户,动作标准范围可以根据相应用户的具体情况确定,保证动作标准范围更加适合相应的用户,同时实现个性化定制的目的。
例如,瑜伽拜日式动作中的站立前屈式动作的普遍标准为:以站立姿势,身体上半身向腿部靠拢直至脸部与膝盖贴近,膝盖不能弯曲,手臂从头部两侧向头部上方举起,并落于双脚两侧。而针对目标用户D,其年龄信息为54,历史运动频率为1周/次,病例信息为肩周炎,运动目标信息为强身健体。由于目标用户D的年龄较大,运动频率不高,患有肩周炎,所以对于其动作的要求可以不必太高,大致达到要求,可以强身健体即可。那么,针对站立前屈式动作,目标用户D的动作标准范围为:以站立姿势,身体上半身向腿部靠拢直至脸部与膝盖贴近,膝盖可以弯曲,手臂可以向后背方向绷直抬起,手臂与后背的夹角至少大于5°,头部与腿部之间的水平距离不得超过20cm。
作为一种实施方式,目标用户做出的动作的标准情况可以基于上述动作信息与目标用户的动作标准范围的对比结果、以及完成该动作过程中肢体行为的重要程度共同确定。电子设备可以逐一将该动作中用户的四肢等各部位与其对应的动作标准范围中相应部位的要求进行对比,并根据对比结果以及该部位对于该动作的重要程度确定目标用户做出的动作的标准情况。
例如,目标用户E在原地高抬腿动作中,对比结果为双手摆臂幅度不符合要求,其他动作达标,而在原地高抬腿动作中,双手摆臂幅度的重要程度较低,那么电子设备可以确定目标用户E对应的标准情况为基本达标,可以即为A-。
在确定出目标用户做出的动作的标准情况后,电子设备可以执行上述步骤S105,即基于标准情况更改预设的语音指导信息,并播放更改后的语音指导信息,其中,上述预设的语音指导信息为运动课程中,为帮助目标用户完成当前动作语音指导信息。
由于目标用户做出的动作的标准情况可能存在不同的情况,而预设的语音指导信息一般为一套标准信息,例如,“双手向前伸展”、“再坚持1分钟”、“吸气”等,并不能很好的适应不同的标准情况。所以为了针对不同情况更好地提示目标用户,帮助其尽量标准地完成各个动作,电子设备可以基于上述标准情况更改预设的语音指导信息。具体的,更改语音指导信息的方式包括但不限于以下几种方式:
第一种方式,当目标用户做出的动作的标准情况标识达到其自身的动作标准范围时,电子设备可以更改语音指导信息为表扬式语音信息,例如,可以其为“你做的很好”、“继续保持”、“你很棒”等。
第二种方式,当目标用户做出的动作的标准情况标识未达到其自身的动作标准范围,且相差较近时,电子设备可以更改语音指导信息为激励式语音信息,例如,可以其为“再弯曲一些就可以了”、“加油”、“腹部再用力一点”等。
第三种方式,当目标用户做出的动作的标准情况标识未达到其自身的动作标准范围,且相差较远时,电子设备可以更改语音指导信息为指导式语音信息,例如,当前动作为调息动作,语音信息可以其为“请跟随语音进行呼吸”、“呼气”、“吸气”、“闭眼”等。
本实施例所提供的方案中,由于电子设备可以从运动图像中获取目标用户的第一骨骼关键点和第一肌肉信息,进而确定当前时刻目标用户的动作,将该动作的动作信息与目标用户自身的标准范围进行对比,确定出用户做出的动作的标准情况,并且,根据标准情况,更改预设的语音指导信息,并播放更改后的语音指导信息,从而使目标用户可以跟随语音指导完成更适合自身情况的动作,而不是目标用户一味的模仿运动视频中的动作,这样,可以使目标用户在跟随运动课程进行运动的过程中达到的效果更佳。
作为本发明实施例的一种实施方式,上述运动课程可以为用户在开始运动锻炼之前根据用户注册信息所生成的。
如果目标用户为首次注册的用户,则目标用户可以在运动应用程序的注册页面输入自己的性别信息、年龄信息、历史运动频率、病例信息、运动部位信息、锻炼目标等注册信息,具体不做限定。电子设备可以根据用户输入的注册信息进行用户注册,注册完成后用户可登录运动应用程序。
在一种实施方式中,电子设备便可以根据注册信息确定出课程难度等级,推送运动推荐课程至目标用户,目标用户可以从推送的运动推荐课程中,根据个人喜好选择运动课程。
电子设备还可以将目标用户的信息与运动课程进行对应记录,方便后续用户再次登录运动应用程序进行锻炼时,可以快速确定该目标用户对应的运动课程。例如,目标用户的信息与运动课程可以采用如下表进行记录:
Figure BDA0003274852220000111
Figure BDA0003274852220000121
在另一种实施方式中,电子设备可以根据目标用户的注册信息以及各个运动课程对应的适合人群、锻炼的部位、锻炼强度以及注意事项等,自动确定适合该目标用户的运动课程。
如果目标用户为非首次注册的用户,则电子设备可以根据已记录的目标用户与运动课程的对应关系,确定该目标用户的运动课程。
可见,在本实施例中,由于目标用户的运动课程为基于目标用户的自身的身体情况以及锻炼目标等信息确定的,所以电子设备确定的目标用户的运动课程更加适合目标用户的身体情况和个人意愿,能够使目标用户达到更好的运动效果。
作为本发明实施例的一种实施方式,如图3所示,在上述步骤S101之前,上述方法还可以包括:
S301,获取所述目标用户的用户类型以及所述目标用户输入的运动目的信息;
电子设备可以获取目标用户的用户类型以及目标用户输入的运动目的信息,其中,目标用户输入的运动目的信息可以包括目标用户通过运动所要锻炼的部位,例如,可以为腹部、腿部、腰部等,和/或,目标用户进行锻炼的目标,例如,减肥、改善驼背、强身健体等。
目标用户的用户类型可以包括目标用户的人群类型,例如,可以包括孕妇、老年人、儿童等。还可以包括目标用户的身体状态类型,例如,可以包括骨盆前倾、关节超伸、头部前倾等。还可以包括目标用户的病例类型,例如,可以包括心脏病、哮喘病、风湿性关节炎等。
S302,基于所述用户类型以及所述运动目的信息,按照预设标准制定规则确定所述目标用户适用的动作标准范围。
获取了目标用户的用户类型以及运动目的信息后,电子设备便可以基于该用户类型以及该运动目的信息,按照预设标准制定规则确定目标用户适用的动作标准范围。
由于目标用户适用的动作标准范围是用于评判目标用户在跟随运动课程进行运动过程中所做出的动作是否标准的,所以该动作标准范围应该匹配于目标用户的身体情况和运动目的,那么在一种实施方式中,预设标准制定规则可以为:根据目标用户的用户类型以及运动目的信息,调整通用的动作标准范围,生成该目标用户适用的动作标准范围。
在另一种实施方式中,预设标准制定规则可以为:基于已存储的用户的用户类型以及运动目的信息与动作标准范围之间的对应关系,确定出目标用户对应的动作标准范围。其中,该对应关系可以预先根据各种用户的历史运动记录进行大数据分析确定,在此不做具体限定。
可见,在本实施例中,电子设备可以获取目标用户的用户类型以及目标用户输入的运动目的信息,基于用户类型以及运动目的信息,按照预设标准制定规则确定目标用户适用的动作标准范围,由于目标用户所适用的动作标准范围是根据其自身的用户类型以及其所输入的运动目的信息确定,那么不同的用户会拥有不同的动作标准范围,实现了不同用户的动作标准范围的个性化,进而使目标用户在运动的过程中,可以以自身适用的动作标准范围为基准进行运动,而不是目标用户一味的模仿运动视频中的动作,这样,可以使目标用户在跟随运动课程进行运动时的效果更佳。
作为本发明实施例的一种实施方式,如图4所示,上述获取所述目标用户的用户类型的步骤,可以包括:
S401,获取所述目标用户的用户信息。
为了准确确定目标用户的用户类型,电子设备可以获取目标用户的用户信息,其中,用户信息可以包括身体状态信息、年龄信息以及病例信息中的至少一种,身体状态信息可以为用户在注册时所输入的自身的身体状态,例如,孕妇、骨盆前倾、肩胛翼状或高低肩等信息。
年龄信息可以为目标用户在注册时输入的年龄信息。病例信息可以为目标用户在注册时输入的自身存在的疾病信息,也可以为根据用户输入的身体状态信息以及数据库中存储的疾病相关信息,确定的目标用户的疾病信息,这都是合理的。
S402,基于所述用户信息以及预设分类规则,确定所述目标用户的用户类型。
电子设备可以基于上述用户信息中的身体状态信息、年龄信息以及病例信息中的至少一种以及预设分类规则,确定目标用户的用户类型,其中,预设分类规则可以根据实际需求设定。例如,可以为根据已存储的历史用户的用户信息与目标用户的用户信息之间的相似程度,将目标用户划分为历史用户所属类型中的一个用户类型。
当然,预设分类规则也可以预先建立的用户信息与用户类型之间的对应关系,进而电子设备便可以基于该对应关系确定目标用户的用户类型。
可见,在本实施例中,电子设备可以获取目标用户的用户信息,其中,用户信息包括身体状态信息、年龄信息以及病例信息中的至少一种,基于用户信息以及预设分类规则,确定目标用户的用户类型,由于目标用户的用户类型是根据身体状态信息、年龄信息以及病例信息中的至少一种确定的,所以该用户类型可以更加精准的标识目标用户的身体状况,进而保证后续确定的目标用户的动作标准范围可以很好地适用于目标用户。
作为本发明实施例的一种实施方式,针对上述用户信息包括身体状态信息的情况,如图5所示,上述获取所述目标用户的用户信息的步骤,可以包括:
S501,获取所述目标用户处于站立状态下的待检测图像。
为了确定目标用户的身体状态信息,电子设备可以获取目标用户处于站立状态下的待检测图像,其中,待检测图像包括针对目标用户的正面方向、侧面方向以及背面方向所采集的图像,目标图像可以为目标用户的身体占图像比例较大的清晰人物图像,这样可以保证能够准确确定目标用户的身体状态信息。
在一种实施方式中,可以通过语音提示的方式,告知目标用户保持站立状态,当然也可以在运动应用程序的界面中显示提示信息,提示目标用户保持站立状态。
例如,目标用户可以站立于图2所示的场景中,摄像头220-摄像头240便可以分别采集目标用户处于站立状态下的正面方向、侧面方向以及背面方向的图像,作为待检测图像,进而发送待检测图像至电子设备。
S502,对所述待检测图像进行人体检测,提取所述待检测图像中所述目标用户的第二骨骼关键点以及第二肌肉信息;
第二骨骼关键点以及第二肌肉信息的确定方式,分别与第一骨骼关键点以及第一肌肉信息的确定方式相同,可以参见上述第一骨骼关键点以及第一肌肉信息的确定方式部分的描述,在此不再赘述。
S503,基于所述第二骨骼关键点以及所述第二肌肉信息,确定所述目标用户的身体状态信息。
第二骨骼关键点以及第二肌肉信息可以表征目标用户在站立状态下,骨骼整体构架以及肌肉情况,电子设备可以将第二骨骼关键点按照人体结构连接构成人体骨架图,进而根据人体骨架图和第二肌肉信息与人体标准骨架图以及肌肉信息进行对比,可以确定出目标用户的身体状态信息。
可见,在本实施例中,电子设备可以对待检测图像进行人体检测,提取待检测图像中目标用户的第二骨骼关键点以及第二肌肉信息,基于第二骨骼关键点以及第二肌肉信息,确定目标用户的身体状态信息,这样,可以准确确定出目标用户的身体状态信息,以保证后续确定的用户类型的准确性。
作为本发明实施例的一种实施方式,如图6所示,上述方法还可以包括:
S601,在所述目标用户跟随运动课程进行运动过程中,若所述标准情况表示所述目标用户做出的动作符合所述动作标准范围,获取所述目标用户的运动时长,若所述运动时长未达到所述运动课程的时长,执行步骤S602;若所述运动时长达到所述运动课程的时长,执行步骤S603;
在目标用户跟随运动课程进行运动过程中,若上述标准情况表示目标用户做出的动作符合动作标准范围,说明目标用户已经能够很好的完成当前工作,电子设备可以获取目标用户的运动时长。
S602,增加所述运动课程包括的动作数量;
如果目标用户的运动时长未达到运动课程的时长,为了使目标用户能够运动到足够长的时间,而又不去做已经可以完成的很标准的动作,电子设备可以增加运动课程包括的动作数量,这样,目标用户便可以跟随运动课程继续学习一些其他动作。
例如,目标用户想要减脂,那么,为了使目标用户可以更好的达到减脂效果,若运动时长未达到运动课程的时长,电子设备可以在运动课程中增加一些能够减脂的动作。
S603,减少所述运动课程包括的动作数量。
如果目标用户的运动时长已经达到运动课程的时长,说明目标用户将已学习的动作做到符合标准的程度已经耗费了很长时间,也就是说明当前的运动课程的难度对于目标用户来说是比较大的,那么电子设备便可以减少运动课程包括的动作数量,这样,目标用户在下次按照调整后的运动课程进行运动锻炼时,由于调整后的运动课程更加适合该目标用户,可以达到更好的运动效果。
当然在该目标用户已经可以很好的完成运动课程中的动作时,还可以将删除的动作恢复至运动课程中,这都是合理的。
可见,在本实施例中,在目标用户跟随运动课程进行运动过程中,若标准情况表示目标用户做出的动作符合动作标准范围,电子设备可以获取目标用户的运动时长,若运动时长未达到运动课程的时长,电子设备可以增加运动课程包括的动作数量,若运动时长达到运动课程的时长,电子设备可以减少运动课程包括的动作数量。这样,可以在目标用户跟随运动课程进行运动过程中,根据目标用户的实际情况进行运动课程中动作数量的调整,进而能够使目标用户在跟随运动课程进行运动的过程中达到的效果更佳。
作为本发明实施例的一种实施方式,如图7所示,上述方法还可以包括:
S701,在所述目标用户跟随运动课程运动结束后,统计所述目标用户的动作对应的标准情况;
在目标用户跟随运动课程运动结束后,电子设备可以统计目标用户针对该运动课程中各个动作的标准情况,还可以将该运动课程中的其他相关数据保存至数据库中。其中,运动中的其他相关数据可以包括动作数量增减情况、运动时长等,在此不做具体限定。
S702,基于所述标准情况,调整所述目标用户的运动课程的难度。
在一种方式中,电子设备可以根据每个动作的标准情况,分别调整每个动作的难度,例如,针对目标用户的没有达到动作标准范围的动作,可以降低该动作难度,增加该动作时长。
在另一种方式中,电子设备可以根据每个动作的标准情况,整体调整运动课程的难度。例如,如果该标准情况表示目标用户没有达到动作标准范围的动作的较多,那么可以降低所有动作的难度。
可见,在本实施例中,在目标用户跟随运动课程运动结束后,电子设备可以统计目标用户的动作对应的标准情况,基于标准情况,电子设备可以调整目标用户的运动课程的难度,这样,电子设备可以根据目标用户每次的运动的标准情况优化目标用户的运动课程,进而能够生成个性化的目标用户的运动课程,并且,目标用户的运动课程可以循序渐进的帮助目标用户完成其运动目的。
作为本发明实施例的一种实施方式,在目标用户跟随运动课程运动结束后,如果对于运动课程中的动作存在疑问,可以通过运动应用程序中的在线联系功能联系专业人员,由专业人员对目标用户进行解惑以及指导。其中,可以采用语音通话或者视频通话的方式对目标用户进行解惑以及指导。
作为本发明实施例的一种实施方式,在目标用户跟随运动课程进行运动前,可以在运动应用程序中输入当前的突发身体状况信息,其中,突发身体状况信息可以为身体短期内所产生的异常状况,例如,肚子疼、崴脚、头疼等,在此不做具体限定。
电子设备获取到上述突发身体状况信息后,可以基于该突发身体状况信息临时调整当天的运动课程。例如,突发身体状况信息包括崴脚,那么可以删除运动课程需要脚步发力的动作,还可以增加一些上肢的锻炼动作。
作为本发明实施例的一种实施方式,上述基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息的步骤,可以包括:
基于所述第一骨骼关键点以及所述第一肌肉信息,确定所述目标用户对应的姿态信息和动作发力点信息,作为所述目标用户对应的动作信息。
确定了上述第一骨骼关键点以及第一肌肉信息后,电子设备可以基于第一骨骼关键点以及第一肌肉信息,确定目标用户对应的姿态信息和动作发力点信息,作为目标用户对应的动作信息。其中,姿态信息为能够标识用户身体姿态的信息,可以为用户的四肢与身体之间的相对位置、关节角度等,动作发力点信息为能够标识目标用户做出该动作时的发力点的信息,例如,某个关节、某个部位等。
在一种实施方式中,电子设备可以将目标用户的运动图像输入至目标检测模型中,通过目标检测模型获得目标检测模型输出的第一骨骼关键点以及第一肌肉信息。其中,运动图像可以包括针对目标用户的正面方向、侧面方向以及背面方向所采集的图像。目标检测模型可以为OpenPose检测模型等任意可以从图像中确定骨骼关键点和肌肉信息的模型。目标检测模型可以包括卷积层、池化层以及全连接层。其中,池化层可以包括:最大池、最小池、平均池以及和池。
卷积层具体可以为VGG-19,用于对运动图像进行图像特征提取。在卷积层中,卷积内核扫描运动图像进行自动提取特征图,将提取出的图像特征输入至卷积层中两个平行分支,第一分支预测出一组组件置信图,其中,每个组件置信图可以表示人体骨架图中的相应组件,即第一骨骼关键点,第二分支预测出一组部件亲和力字段,其中部件亲和力字段可以表征组件之间的关联程度,即关节连接。使用组件置信图,在组件对之间形成二分图,通过部件亲和力字段修剪二分图中的较弱连接,得到运动图像所包括的第一骨骼关键点以及第一肌肉信息。
具体来说,在卷积过程中,滤波器大小可以比运动图像小,施加在运动图图像上,然后根据步长移动,生成特征映射。步长的大小与特征图的大小成反比,一个大于或等于2的步长会导致卷积过程中失去图像的一些特征,所以为了获取更多的特征,滤波器的步长可以设置的小一些。
目标检测模型的其他部分用于优化每个分支的预测,即输出结果。在一种实施方式中,为了在目标检测模型中增加非线性关系,降低计算复杂度,在卷积之后的池化层可以应用非线性激活函数,以在特征图上向下采样来减少特征图尺寸,以确保卷积层在不同形式的图像中能够识别相同的对象,并降低目标检测模型的内存需求。其中,最大池保存的特征最好。在全连接层中可以形成列矩阵输入到神经网络中之后进行计算,它的输出可以由激活函数响应得到。
对于目标检测模型的训练,可以采用正向传播和反向传播算法,根据训练输入的图像数据和标签调整层连接权重、偏差以及其他参数,在此不做具体限定及说明。
电子设备获得目标检测模型输出的第一骨骼关键点以及第一肌肉信息,可以基于第一骨骼关键点以及第一肌肉信息所表示的目标用户的肢体动作和肌肉形态等,确定目标用户对应的姿态信息和动作发力点信息。
可见,在本实施例中,电子设备可以基于第一骨骼关键点以及第一肌肉信息,确定目标用户对应的姿态信息和动作发力点信息,作为目标用户对应的动作信息,这样,可以更加精准的确定出当前目标用户做出该动作时的动作信息,保证后续与预先确定的目标用户的动作标准范围进行对比,可以准确确定出用户做出的动作的标准情况。
下面针对瑜伽学习场景,对本发明实施例所提供的运动教学方法进行举例介绍。目标用户X想要学习瑜伽课程,并且为首次注册的用户。发明实施例所提供的运动教学方法可以包括以下步骤:
步骤A,目标用户X开启运动应用程序,进入运动应用程序后,目标用户X可以在注册页面中输入注册信息,可以包括:性别信息、年龄信息、病例信息以及运动目标等。电子设备基于注册信息完成目标用户X的注册。
步骤B,目标用户X登录运动应用程序后,电子设备可以获取图像采集设备采集的目标用户X的正面方向、侧面方向以及背面方向的图像,作为待检测图像。并对待检测图像进行人体检测,提取待检测图像中所述目标用户X的骨骼关键点以及肌肉信息,并基于骨骼关键点以及肌肉信息,确定目标用户X的身体状态信息。
步骤C,电子设备基于步骤B确定出的目标用户X的身体状态信息、上述注册信息结合数据库中的病例信息,确定目标用户X的用户类型。可以将上述信息更新至数据库,以备下次使用。
步骤D,电子设备综合分析上述信息智能生成目标用户X的瑜伽课程安排,并标注出瑜伽课程中对应的动作详细信息,可以包括适合人群、运动部位以及益处等。
步骤E,目标用户X查看瑜伽课程安排及体式解读,目标用户X可根据自身需要及当天的身体状况修改课程。
步骤F,瑜伽课程编排后,电子设备可以根据步骤C获取的信息及目标用户X的运动目标,生成针对目标用户X的动作标准范围。
步骤G,进入课程后,运动应用程序可以显示课程排列顺序,目标用户X可选择对所有体式进行课前的详细解析并可以观看3D模型示范,包括发力点信息等注意事项。
步骤H,在调息动作中,目标用户X可以跟随语音指导信息进行调息,电子设备可以检测目标用户X的状态,实时更改语音指导信息,使目标用户X进入调息状态。
步骤I,调息结束后,目标用户X跟随语音指导信息进入第一个体式。电子设备对图像采集设备实时采集的目标用户X的运动图像进行人体检测,提取运动图像中目标用户X的骨骼关键点以及肌肉信息,进而确定目标用户X对应的动作信息,将动作信息与步骤F的动作标准范围进行比对。如果目标用户X没有达到动作标准范围,则根据标准情况实时更改预设的语音指导信息,并播放更改后的语音指导信息,以纠正目标用户X所做出的动作。如果目标用户X做出符合动作标准范围,电子设备可以根据课程时长灵活增减体式。
步骤J,目标用户X完成各个体式后,目标用户X跟随语音指导信息进入放松部分,电子设备根据检测到目标用户X的状态,实时更改语音指导信息,使目标用户X进入放松状态。
步骤K,在课程结束后,若目标用户X对于个别体式存有疑问,可以通过视频在线联系专业人员进行解惑和指导。以此同时,电子设备可以将本次目标用户X的运动过程中的相关数据更新至数据库,作为历史信息。
目标用户X再次进行瑜伽课程时,可根据历史信息对用户无法达到标准范围的动作更改为更易于练习的体式,生成个性化的课程安排循序渐进,直到达到用户的锻炼意愿。
在本实施例中,运动教学方法更具有针对性,可以生成个性化的课程安排使用户循序渐进,直到达到用户的锻炼意愿。全程通过语音对使用者进行指导,结合特定场景对人体特征进行分析,首先通过人体检测算法将人体特征进行实时信息提取,对用户进行分类、生成针对用户的动作评判标准及结合数据库中的用户的的病例信息,可定制对用户个性化的瑜伽课程。同时在练习的过程中,实时更改体式引导词及计算课程时间增减课程安排,若使用者在课程结束对指导存有疑惑,还可以通过视频在线联系专业人员进行解惑。
相应于上述运动教学方法,本发明实施例还提供了一种运动教学装置,下面对本发明实施例所提供的一种运动教学装置进行介绍。
如图8所示,一种运动教学装置,所述装置可以包括:
第一获取模块801,用于获取目标用户跟随运动课程进行运动过程中的运动图像;
提取模块802,用于对所述运动图像进行人体检测,提取所述运动图像中所述目标用户的第一骨骼关键点以及第一肌肉信息;
第一确定模块803,用于基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息;
对比模块804,用于将所述动作信息与预先确定的所述目标用户的动作标准范围进行对比,确定所述目标用户做出的动作的标准情况;
语音指导模块805,用于基于所述标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。
可见,本发明实施例提供的方案中,电子设备可以获取目标用户跟随运动课程进行运动过程中的运动图像,对运动图像进行人体检测,提取运动图像中目标用户的第一骨骼关键点以及第一肌肉信息,基于第一骨骼关键点以及第一肌肉信息确定目标用户对应的动作信息,将动作信息与预先确定的目标用户的动作标准范围进行对比,确定目标用户做出的动作的标准情况,基于标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。通过上述方案,电子设备可以从运动图像中获取目标用户的第一骨骼关键点和第一肌肉信息,进而确定当前时刻目标用户的动作,将该动作的动作信息与目标用户自身的标准范围进行对比,确定出目标用户做出的动作的标准情况,并且,根据标准情况,更改预设的语音指导信息,并播放更改后的语音指导信息,从而使目标用户可以跟随语音指导完成更适合自身情况的动作,而不是目标用户一味的模仿运动视频中的动作,这样,可以使目标用户在跟随运动课程进行运动的过程中达到的效果更佳。
作为本发明实施例的一种实施方式,上述装置还可以包括:
第二获取模块,用于获取所述目标用户的用户类型以及所述目标用户输入的运动目的信息;
第二确定模块,用于基于所述用户类型以及所述运动目的信息,按照预设标准制定规则确定所述目标用户适用的动作标准范围。
作为本发明实施例的一种实施方式,上述第二获取模块,可以包括:
第一获取单元,用于获取所述目标用户的用户信息,其中,所述用户信息包括身体状态信息、年龄信息以及病例信息中的至少一种;
第一确定单元,用于基于所述用户信息以及预设分类规则,确定所述目标用户的用户类型。
作为本发明实施例的一种实施方式,上述第一获取单元,可以包括:
获取子单元,用于获取所述目标用户处于站立状态下的待检测图像;
其中,所述待检测图像包括针对所述目标用户的正面方向、侧面方向以及背面方向所采集的图像。
提取子单元,用于对所述待检测图像进行人体检测,提取所述待检测图像中所述目标用户的第二骨骼关键点以及第二肌肉信息;
确定子单元,用于基于所述第二骨骼关键点以及所述第二肌肉信息,确定所述目标用户的身体状态信息。
作为本发明实施例的一种实施方式,上述装置还可以包括:
第三获取模块,用于在所述目标用户跟随运动课程进行运动过程中,若所述标准情况表示所述目标用户做出的动作符合所述动作标准范围,获取所述目标用户的运动时长;
增加模块,用于若所述运动时长未达到所述运动课程的时长,增加所述运动课程包括的动作数量;
减少模块,用于若所述运动时长达到所述运动课程的时长,减少所述运动课程包括的动作数量。
作为本发明实施例的一种实施方式,上述装置还可以包括:
统计模块,用于在所述目标用户跟随运动课程结束后,统计所述目标用户的动作对应的标准情况;
调整模块,用于基于所述标准情况,调整所述目标用户的运动课程的难度。
作为本发明实施例的一种实施方式,上述第一确定模块803,可以包括:
第二确定单元,用于基于所述骨骼关键点以及所述肌肉信息,确定所述目标用户对应的姿态信息和动作发力点信息,作为所述目标用户对应的动作信息。
相应与上述一种运动教学方法,本发明实施例还提供了一种运动教学系统,下面对本发明实施例所提供的一种运动教学系统进行介绍。
如图9所示,一种运动教学系统,所述系统包括图像采集设备901和电子设备902,其中:
所述图像采集设备901,用于在运动过程中采集目标用户的运动图像;
所述电子设备902,用于接收所述运动图像,并执行上述实施例中任一所述的运动教学的方法步骤。
可见,本发明实施例提供的方案中,图像采集设备可以在运动过程中采集目标用户的运动图像,电子设备可以获取运动图像,对运动图像进行人体检测,提取运动图像中目标用户的第一骨骼关键点以及第一肌肉信息,基于第一骨骼关键点以及第一肌肉信息确定目标用户对应的动作信息,将动作信息与预先确定的目标用户的动作标准范围进行对比,确定目标用户做出的动作的标准情况,基于标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。通过上述方案,电子设备可以从运动图像中获取目标用户的第一骨骼关键点和第一肌肉信息,进而确定当前时刻目标用户的动作,将该动作的动作信息与目标用户自身的标准范围进行对比,确定出目标用户做出的动作的标准情况,并且,根据标准情况,更改预设的语音指导信息,并播放更改后的语音指导信息,从而使目标用户可以跟随语音指导完成更适合自身情况的动作,而不是目标用户一味的模仿运动视频中的动作,这样,可以使目标用户在跟随运动课程进行运动的过程中达到的效果更佳。
本发明实施例还提供了一种电子设备,如图10所示,包括处理器1001、通信接口1002、存储器1003和通信总线1004,其中,处理器1001,通信接口1002,存储器1003通过通信总线1004完成相互间的通信,
存储器1003,用于存放计算机程序;
处理器1001,用于执行存储器1003上所存放的程序时,实现上述任一实施例所述的运动教学方法步骤。
可见,本发明实施例提供的方案中,电子设备可以获取目标用户跟随运动课程进行运动过程中的运动图像,对运动图像进行人体检测,提取运动图像中目标用户的第一骨骼关键点以及第一肌肉信息,基于第一骨骼关键点以及第一肌肉信息确定目标用户对应的动作信息,将动作信息与预先确定的目标用户的动作标准范围进行对比,确定目标用户做出的动作的标准情况,基于标准情况更改预设的语音指导信息,并播放更改后的语音指导信息。通过上述方案,电子设备可以从运动图像中获取目标用户的第一骨骼关键点和第一肌肉信息,进而确定当前时刻目标用户的动作,将该动作的动作信息与目标用户自身的标准范围进行对比,确定出用户做出的动作的标准情况,并且,根据标准情况,更改预设的语音指导信息,并播放更改后的语音指导信息,从而使目标用户可以跟随语音指导更适合自身情况的完成动作,而不是目标用户一味的模仿运动视频中的动作,这样,可以使目标用户在跟随运动课程进行运动的过程中达到的效果更佳。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述实施例中任一所述的运动教学方法的步骤。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的运动教学方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于一种运动教学方法、装置、系统、电子设备、计算机可读存储介质以及计算机程序产品而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (17)

1.一种运动教学方法,其特征在于,所述方法包括:
获取目标用户跟随运动课程进行运动过程中的运动图像;
对所述运动图像进行人体检测,提取所述运动图像中所述目标用户的第一骨骼关键点以及第一肌肉信息;
基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息;
将所述动作信息中所述目标用户的各部位的动作信息分别与预先确定的所述目标用户的动作标准范围中相对应部位的要求进行对比,根据各部位的对比结果和该部位对于动作的重要程度确定所述目标用户做出的动作的标准情况,其中,所述动作标准范围是根据所述目标用户的用户类型和运动目的信息,预先设定的各身体部位的动作标准;
基于所述标准情况确定用户对运动课程的完成情况,并实时调整所述运动课程的内容,包括所述运动课程的动作种类、动作数量、课程时长中的至少一者;
基于所述标准情况和调整后的运动课程的内容,更改预设的语音指导信息,并播放更改后的语音指导信息。
2.根据权利要求1所述的方法,其特征在于,确定所述动作标准范围的步骤,包括:
在所述获取目标用户跟随运动课程进行运动过程中的运动图像的步骤之前;获取所述目标用户的用户类型以及所述目标用户输入的运动目的信息;
基于所述用户类型以及所述运动目的信息,按照预设标准制定规则确定所述目标用户适用的动作标准范围。
3.根据权利要求2所述的方法,其特征在于,所述获取所述目标用户的用户类型的步骤,包括:
获取所述目标用户的用户信息,其中,所述用户信息包括身体状态信息、年龄信息以及病例信息中的至少一种;
基于所述用户信息以及预设分类规则,确定所述目标用户的用户类型。
4.根据权利要求3所述的方法,其特征在于,所述用户信息包括所述身体状态信息;
所述获取所述目标用户的用户信息的步骤,包括:
获取所述目标用户处于站立状态下的待检测图像,其中,所述待检测图像包括针对所述目标用户的正面方向、侧面方向以及背面方向所采集的图像;
对所述待检测图像进行人体检测,提取所述待检测图像中所述目标用户的第二骨骼关键点以及第二肌肉信息;
基于所述第二骨骼关键点以及所述第二肌肉信息,确定所述目标用户的身体状态信息。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述基于所述标准情况确定用户对运动课程的完成情况,并实时调整所述运动课程的内容,包括:
在所述目标用户跟随运动课程进行运动过程中,若所述标准情况表示所述目标用户做出的动作符合所述动作标准范围,获取所述目标用户的运动时长;
若所述运动时长未达到所述运动课程的时长,增加所述运动课程包括的动作数量;
若所述运动时长达到所述运动课程的时长,减少所述运动课程包括的动作数量。
6.根据权利要求1-4任一项所述的方法,其特征在于,所述基于所述标准情况确定用户对运动课程的完成情况,并实时调整所述运动课程的内容,包括:
在所述目标用户跟随运动课程运动结束后,统计所述目标用户的动作对应的标准情况;
基于所述标准情况,调整所述目标用户的运动课程的难度。
7.根据权利要求1-4任一项所述的方法,其特征在于,所述基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息的步骤,包括:
基于所述第一骨骼关键点以及所述第一肌肉信息,确定所述目标用户对应的姿态信息和动作发力点信息,作为所述目标用户对应的动作信息。
8.一种运动教学装置,其特征在于,所述装置包括:
第一获取模块,用于获取目标用户跟随运动课程进行运动过程中的运动图像;
提取模块,用于对所述运动图像进行人体检测,提取所述运动图像中所述目标用户的第一骨骼关键点以及第一肌肉信息;
第一确定模块,用于基于所述第一骨骼关键点以及所述第一肌肉信息确定所述目标用户对应的动作信息;
对比模块,用于将所述动作信息中所述目标用户的各部位的动作信息分别与预先确定的所述目标用户的动作标准范围中相对应部位的要求进行对比,根据各部位的对比结果和该部位对于动作的重要程度确定所述目标用户做出的动作的标准情况,其中,所述动作标准范围是根据所述目标用户的用户类型和运动目的信息,预先设定的各身体部位的动作标准;
课程调整模块,用于基于所述标准情况确定用户对运动课程的完成情况,并实时调整所述运动课程的内容,包括所述运动课程的动作种类、动作数量、课程时长中的至少一者;
语音指导模块,用于基于所述标准情况和调整后的运动课程的内容,更改预设的语音指导信息,并播放更改后的语音指导信息。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第二获取模块,用于获取所述目标用户的用户类型以及所述目标用户输入的运动目的信息;
第二确定模块,用于基于所述用户类型以及所述运动目的信息,按照预设标准制定规则确定所述目标用户适用的动作标准范围。
10.根据权利要求9所述的装置,其特征在于,所述第二获取模块,包括:
第一获取单元,用于获取所述目标用户的用户信息,其中,所述用户信息包括身体状态信息、年龄信息以及病例信息中的至少一种;
第一确定单元,用于基于所述用户信息以及预设分类规则,确定所述目标用户的用户类型。
11.根据权利要求10所述的装置,其特征在于,所述用户信息包括所述身体状态信息;
所述第一获取单元,包括:
获取子单元,用于获取所述目标用户处于站立状态下的待检测图像,其中,所述待检测图像包括针对所述目标用户的正面方向、侧面方向以及背面方向所采集的图像;
提取子单元,用于对所述待检测图像进行人体检测,提取所述待检测图像中所述目标用户的第二骨骼关键点以及第二肌肉信息;
确定子单元,用于基于所述第二骨骼关键点以及所述第二肌肉信息,确定所述目标用户的身体状态信息。
12.根据权利要求8-11任一项所述的装置,其特征在于,所述装置还包括:
第三获取模块,用于在所述目标用户跟随运动课程进行运动过程中,若所述标准情况表示所述目标用户做出的动作符合所述动作标准范围,获取所述目标用户的运动时长;
增加模块,用于若所述运动时长未达到所述运动课程的时长,增加所述运动课程包括的动作数量;
减少模块,用于若所述运动时长达到所述运动课程的时长,减少所述运动课程包括的动作数量。
13.根据权利要求8-11任一项所述的装置,其特征在于,所述装置还包括:
统计模块,用于在所述目标用户跟随运动课程运动结束后,统计所述目标用户的动作对应的标准情况;
调整模块,用于基于所述标准情况,调整所述目标用户的运动课程的难度。
14.根据权利要求8-11任一项所述的装置,其特征在于,所述第一确定模块,包括:
第二确定单元,用于基于所述骨骼关键点以及所述肌肉信息,确定所述目标用户对应的姿态信息和动作发力点信息,作为所述目标用户对应的动作信息。
15.一种运动教学系统,其特征在于,所述系统包括图像采集设备和电子设备,其中:
所述图像采集设备,用于在运动过程中采集目标用户的运动图像;
所述电子设备,用于接收所述运动图像,并执行权利要求1-7任一项所述的方法步骤。
16.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-7任一所述的方法步骤。
17.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-7任一所述的方法步骤。
CN202111114066.XA 2021-09-23 2021-09-23 一种运动教学方法、装置、系统、电子设备及存储介质 Active CN113842622B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111114066.XA CN113842622B (zh) 2021-09-23 2021-09-23 一种运动教学方法、装置、系统、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111114066.XA CN113842622B (zh) 2021-09-23 2021-09-23 一种运动教学方法、装置、系统、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN113842622A CN113842622A (zh) 2021-12-28
CN113842622B true CN113842622B (zh) 2023-05-30

Family

ID=78978794

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111114066.XA Active CN113842622B (zh) 2021-09-23 2021-09-23 一种运动教学方法、装置、系统、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN113842622B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117198529A (zh) * 2023-08-31 2023-12-08 深圳市恒安特斯网络科技有限公司 一种运动图像处理方法、装置和可读存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106984027B (zh) * 2017-03-23 2019-07-26 华映科技(集团)股份有限公司 一种动作对比分析方法、装置及一种显示器
CN108519818A (zh) * 2018-03-29 2018-09-11 北京小米移动软件有限公司 信息提示方法及装置
CN110495889B (zh) * 2019-07-04 2022-05-27 平安科技(深圳)有限公司 体态评估方法、电子装置、计算机设备及存储介质
CN111680562A (zh) * 2020-05-09 2020-09-18 北京中广上洋科技股份有限公司 一种基于骨骼关键点的人体姿态识别方法、装置、存储介质及终端
CN111652078A (zh) * 2020-05-11 2020-09-11 浙江大学 一种基于计算机视觉的瑜伽动作指导系统和方法
CN112364785B (zh) * 2020-11-13 2023-07-25 中移雄安信息通信科技有限公司 一种运动训练指导方法、装置、设备及计算机存储介质

Also Published As

Publication number Publication date
CN113842622A (zh) 2021-12-28

Similar Documents

Publication Publication Date Title
US12033076B2 (en) Systems and methods for assessing balance and form during body movement
CN108734104B (zh) 基于深度学习图像识别的健身动作纠错方法及系统
Chen et al. Computer-assisted yoga training system
CN112464918B (zh) 健身动作纠正方法、装置、计算机设备和存储介质
KR102320960B1 (ko) 사용자 신체 맞춤형 홈 트레이닝 동작 안내 및 교정 시스템
CN110428486B (zh) 虚拟互动的健身方法、电子设备及存储介质
JP2020174910A (ja) 運動支援システム
CN114022512A (zh) 运动辅助方法、装置及介质
CN113409651B (zh) 直播健身方法、系统、电子设备、存储介质
KR102356685B1 (ko) 온라인 그룹을 기반으로 하는 홈 트레이닝 제공 시스템 및 그 방법
US20210060385A1 (en) Advancement Manager In A Handheld User Device
CN113842622B (zh) 一种运动教学方法、装置、系统、电子设备及存储介质
Hirasawa et al. Promotion system for home-based squat training using openpose
KR20230063954A (ko) 게이미피케이션을 이용한 인공지능 기반 운동 코칭 장치
JP2023168557A (ja) プログラム、方法、情報処理装置
US20230201696A1 (en) Method of providing exercise video guide and apparatus thereof
Cai et al. PoseBuddy: Pose estimation workout mobile application
US20140073383A1 (en) Method and system for motion comparison
CN112784699B (zh) 一种运动教练姿势评估指导的实现方法和系统
CN113641856A (zh) 用于输出信息的方法和装置
Lei et al. Ballet Form Training Based on MediaPipe Body Posture Monitoring
Luangaphirom et al. Real-time weight training counting and correction using MediaPipe
KR102691115B1 (ko) 인체 스켈레톤 좌표 및 관절 간 각도 기반 ai 퍼스널 트레이너 서비스 제공 시스템
JP7150387B1 (ja) プログラム、方法、および電子機器
WO2023162159A1 (ja) 動作生成装置、動作生成システム、動作生成方法、及び非一時的なコンピュータ可読媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant