CN110302524A - 肢体训练方法、装置、设备和存储介质 - Google Patents

肢体训练方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN110302524A
CN110302524A CN201910430868.8A CN201910430868A CN110302524A CN 110302524 A CN110302524 A CN 110302524A CN 201910430868 A CN201910430868 A CN 201910430868A CN 110302524 A CN110302524 A CN 110302524A
Authority
CN
China
Prior art keywords
user
limb action
training
virtual trainer
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910430868.8A
Other languages
English (en)
Inventor
吴中勤
李颖超
赵晨
宫延河
白超
董玉华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201910430868.8A priority Critical patent/CN110302524A/zh
Publication of CN110302524A publication Critical patent/CN110302524A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0669—Score-keepers or score display devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0638—Displaying moving images of recorded environment, e.g. virtual environment
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B2071/0647—Visualisation of executed movements
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B2071/065—Visualisation of specific exercise parameters

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Multimedia (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明实施例提供一种肢体训练方法、装置、设备和存储介质，该方法包括：获取用户的训练项目，获取训练项目对应的人工智能AI虚拟教练，AI虚拟教练用于对用户的肢体动作进行指导，根据终端设备上的摄像头，获取用户的肢体动作，根据AI虚拟教练以及用户的肢体动作，对用户进行肢体动作训练。因此，本发明实施例提供的肢体训练方法应用于肢体动作的教学和训练场景，大大降低了成本。

Description

肢体训练方法、装置、设备和存储介质
技术领域
本发明实施例涉及游戏技术领域，尤其涉及一种肢体训练方法、装置、设备和存储介质。
背景技术
目前，市面上结合终端设备的肢体技术大部分应用于游戏互动和试穿试戴场景，主要用于娱乐活动，其主要是通过肢体检测的视觉算法、特殊的双目摄像头或设备，在硬件层和软件层进行适配来实现的。然而，目前没有应用于肢体动作教学和训练的场景的具体方案，同时现有技术普及成本高，难以覆盖市面上已有的大部分的智能终端设备。
发明内容
本发明实施例提供一种肢体训练方法、装置、设备和存储介质，用于肢体动作教学和训练的场景，提高了训练效率，同时大大降低了成本。
第一方面，本发明实施例提供了一种肢体训练方法，包括：
获取用户的训练项目；
获取所述训练项目对应的人工智能(Artificial Intelligence，AI)虚拟教练，所述AI虚拟教练用于对用户的肢体动作进行指导；
根据终端设备上的摄像头，获取用户的肢体动作；
根据所述AI虚拟教练以及所述用户的肢体动作，对所述用户进行肢体动作训练。
可选的，所述根据所述AI虚拟教练以及所述用户的肢体动作，对所述用户进行肢体动作训练，包括：
获取所述AI虚拟教练的肢体动作；
根据所述AI虚拟教练的肢体动作和所述用户的肢体动作，向所述用户推送评分结果；
若所述评分结果小于预设值，向所述用户推送调节指令，所述调节指令用于使所述用户根据所述AI虚拟对象的肢体动作，进行肢体动作训练。
可选的，所述方法还包括：
若所述评分结果大于所述预设值，向所述用户推送增强特效反馈。
可选的，所述方法还包括：
将所述AI虚拟教练和所述用户在增强现实(Augmented Reality，AR)场景中进行重叠显示。
可选的，所述根据所述AI虚拟教练的肢体动作和所述用户的肢体动作，向所述用户推送评分结果，包括：
根据人体骨骼关键点检测算法，获取所述用户的肢体动作的关键点；
根据所述用户的肢体动作的关键点与所述AI虚拟教练的肢体动作的关键点的相似度，向所述用户推送评分结果。
可选的，所述方法还包括：
对所述用户的训练过程进行录制，获取录制结果；
将所述录制结果推送给用户。
可选的，所述用户的数目为多个，所述AI虚拟教练的数目为多个。
可选的，所述获取用户的训练项目之前，所述方法还包括：
获取多个训练项目的多个教学视频；
根据人体骨骼关键点检测算法，获取每个教学视频中教学者的关键点；
根据所述每个教学视频中教学者的关键点，创建每个训练项目对应的肢体动作；
根据所述每个训练项目对应的肢体动作，采用实镜叠加渲染技术，创建对应的AI虚拟教练，并建立AI虚拟教练和训练项目的映射关系。
第二方面，本发明实施例提供一种肢体训练装置，包括：
获取模块，用于获取用户的训练项目；
所述获取模块，还用于获取所述训练项目对应的人工智能AI虚拟教练，所述AI虚拟教练用于对用户的肢体动作进行指导；
所述获取模块，还用于根据所述终端设备上的摄像头，获取用户的肢体动作；
处理模块，用于根据所述AI虚拟教练以及所述用户的肢体动作，对所述用户进行肢体动作训练。
可选的，所述处理模块具体用于：
获取所述AI虚拟教练的肢体动作；
根据所述AI虚拟教练的肢体动作和所述用户的肢体动作，向所述用户推送评分结果；
若所述评分结果小于预设值，向所述用户推送调节指令，所述调节指令用于使所述用户根据所述AI虚拟对象的肢体动作，进行肢体动作训练。
可选的，还包括：
发送模块，用于若所述评分结果大于所述预设值，向所述用户推送增强特效反馈。
可选的，还包括：
显示模块，用于将所述AI虚拟教练的肢体动作和所述用户的肢体动作在增强现实AR场景中进行重叠显示。
可选的，所述发送模块具体用于：
根据人体骨骼关键点检测算法，获取所述用户的肢体动作的关键点；
根据所述用户的肢体动作的关键点与所述AI虚拟教练的肢体动作的关键点的相似度，向所述用户推送评分结果。
可选的，所述处理模块，还用于：
对所述用户的训练过程进行录制，获取录制结果；
将所述录制结果推送给用户。
可选的，所述用户的数目为多个，所述AI虚拟教练的数目为多个。
可选的，所述获取模块，还用于：
获取多个训练项目的多个教学视频；
根据人体骨骼关键点检测算法，获取每个教学视频中教学者的关键点；
所述处理模块，还用于：
根据所述每个教学视频中教学者的关键点，创建每个训练项目对应的肢体动作；
根据所述每个训练项目对应的肢体动作，采用实镜叠加渲染技术，创建对应的AI虚拟教练，并建立AI虚拟教练和训练项目的映射关系。
第三方面，本发明实施例提供一种终端设备，包括：
存储器和处理器；
所述存储器，用于存储程序代码；
所述处理器，用于调用所述程序代码执行第一方面所述的肢体训练方法。
第四方面，本发明实施例提供一种可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序；所述计算机程序在被执行时，实现第一方面所述的肢体训练方法。
本发明实施例提供一种肢体训练方法、装置、设备和存储介质，该方法包括：获取用户的训练项目，获取训练项目对应的人工智能AI虚拟教练，AI虚拟教练用于对用户的肢体动作进行指导，根据终端设备上的摄像头，获取用户的肢体动作，根据AI虚拟教练以及用户的肢体动作，对用户进行肢体动作训练。因此，本发明实施例提供的肢体训练方法应用于肢体动作的教学和训练场景，大大降低了成本。
附图说明
图1为本发明实施例提供的肢体训练系统的应用场景示意图；
图2为本发明实施例提供的肢体训练方法的流程图示意图一；
图3为本发明实施例提供的训练项目菜单的示意图；
图4为本发明实施例提供的肢体训练方法的流程图示意图二；
图5为本发明实施例提供的肢体训练方法的流程图示意图三；
图6为本发明实施例提供的AR场景的示意图；
图7为本发明实施例提供的终端的结构示意图；
图8为本发明实施例提供的终端的硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明实施例提供的肢体训练系统的应用场景示意图，如图1所示，本实施例的肢体训练系统包括终端设备，该终端设备可以为智能互动大屏、智能电视、电脑等。本实施例对终端设备的实现方式不做特别限制。
目前，市面上结合终端设备的肢体技术大部分应用于游戏互动和试穿试戴场景，主要用于娱乐活动，其主要是通过肢体检测的视觉算法、特殊的双目摄像头或设备，在硬件层和软件层进行适配来实现的。
然而，目前没有应用于肢体动作教学和训练的场景的具体方案，同时现有技术普及成本高，难以覆盖市面上已有的大部分的智能终端设备。为了解决该技术问题，本发明实施例提供一种肢体训练方法，该肢体训练方法基于普通的单目摄像头，通过AI虚拟教练对用户进行肢体动作训练，从而提高了训练效率，大大降低了成本。下面采用详细的实施例进行详细说明。
图2为本发明实施例提供的肢体训练方法的流程图示意图一，如图2所示，本实施例的执行主体可以为图1所示实施例中的终端设备。如图2所示，该方法包括：
S201、获取用户的训练项目。
在实施例中，该训练项目可以是武术、太极或其它体育项目，本实施例对此不做限制。举例来说，终端设备上配置有训练项目的菜单，用户点击某一训练项目对应的按键后，终端设备获取用户的训练项目，或者，该终端设备具有语音识别功能，用户输入一语音指令，终端设备识别该语音指令，从而可以获取用户的训练项目，或者还可以通过终端设备的摄像头采集的用户的肢体动作，确定用户的训练项目。本领域技术人员可以采用任何方式实现终端设备获取用户的训练项目，此处不再赘述。
S202、获取训练项目对应的人工智能AI虚拟教练，AI虚拟教练用于对用户的肢体动作进行指导。
在本实施例中，训练项目和AI虚拟教练具有一个映射关系，终端设备获取用户的训练项目后，通过查询该映射关系，获取该训练项目对应的AI虚拟教练。
可选的，将该AI虚拟教练在终端设备的显示屏上进行显示。
图3为本发明实施例提供的训练项目菜单的示意图，如图3所示，终端设备的显示屏上显示的训练项目菜单包括多个训练项目，武术、太极、民族舞、瑜伽等，该终端设备支持触控操作，用户触控“太极”后，调出太极对应的AI虚拟教练。
S203、根据终端设备上的摄像头，获取用户的肢体动作。
终端设备上的摄像头可以为普通的单目摄像头，现有技术中的摄像头为特殊的双目摄像头，与现有技术相比，本实施例中摄像头成本更低，因此，在更易在终端设备上的普及。在本实施例中，可以通过终端设备上的摄像头实时获取用户的肢体动作，并将用户的实时肢体动作同步在终端设备上，进行显示。
S204、根据AI虚拟教练以及用户的肢体动作，对用户进行肢体动作训练。
举例来说，在本实施例中，用户的肢体动作显示在终端设备的显示屏上，AI虚拟教练在一旁实时观察用户的肢体动作是否偏差，当用户的某一肢体动作出现偏差，AI虚拟教练根据用户的肢体动作做出正确示范，并在显示屏上显示，从而对用户进行肢体动作训练，以使该用户根据该正确示范动作来矫正自己的肢体动作，从而对用户进行肢体训练。
或者，AI虚拟教练进行肢体动作的示范，并在终端设备的显示屏上进行显示，用户根据AI虚拟教练的肢体动作矫正自己的肢体动作，从而对用户进行肢体训练。
需要说明的是，一个训练项目包括一个或者多个肢体动作，一般来说是一套，但是每一个动作都是按照上述方式执行的。
本实施例提供的肢体训练方法，通过获取用户的训练项目，获取训练项目对应的人工智能AI虚拟教练，AI虚拟教练用于对用户的肢体动作进行指导，根据终端设备上的摄像头，获取用户的肢体动作，根据AI虚拟教练以及用户的肢体动作，对用户进行肢体动作训练。本实施例提供的肢体训练方法基于普通的单目摄像头，通过AI虚拟教练对用户进行肢体动作训练，从而提高了训练效率，大大降低了成本。
图4为本发明实施例提供的肢体训练方法的流程图示意图二，在图2实施例的基础上，对本实施例的具体实现过程进行了详细说明。如图4所示，该方法包括：
S301、获取用户的训练项目。
终端设备可以通过摄像头采集的用户的肢体动作，确定用户的训练项目，还可以通过用户输入的操作指令来确定用户的训练项目，该操作指令可以为语音指令，也可以为用户输入文字指令等，本实施例对此不做限制。
S302、获取训练项目对应的人工智能AI虚拟教练，AI虚拟教练用于对用户的肢体动作进行指导。
S303、根据终端设备上的摄像头，获取用户的肢体动作。
步骤301-303的执行过程与图2所示的步骤202-203的执行过程类似，此处不再赘述。
S304、获取AI虚拟教练的肢体动作。
在本实施例中，当用户的肢体动作在终端设备的显示屏上进行显示时，AI虚拟教练开始做与所述用户对应的肢体动作，从而终端设备获取AI虚拟教练的肢体动作。
S305、根据AI虚拟教练的肢体动作和用户的肢体动作，向用户推送评分结果。
具体地，该评分结果可以是根据用户的肢体动作和AI虚拟教练的肢体动作的相似度确定的。终端设备根据AI虚拟教练的肢体动作和用户的肢体动作，获取评分结果，并向用户推送评分结果，显示在终端设备的显示屏上，以使用户及时发现对该训练项目中某一个肢体动作的完成情况。
可选的，所述根据所述AI虚拟教练的肢体动作和所述用户的肢体动作，向所述用户推送评分结果，包括：
S3051、根据人体骨骼关键点检测算法，获取用户的肢体动作的关键点。
其中，人体骨骼关键点检测算法，用于检测人体的一些关键点，如关节、五官等，在本实施例中，根据人体骨骼关键点检测算法，获取用户的肢体动作的关键点，通过关键点描述人体的肢体动作，并获取关键点的位置坐标。
S3052、根据用户的肢体动作的关键点与AI虚拟教练的肢体动作的关键点的相似度，向用户推送评分结果。
在本实施例中，获取AI虚拟教练的肢体动作的关键点，并根据用户的肢体动作的关键点与AI虚拟教练的肢体动作的关键点的相似度，获取评分结果，并向用户推送该评分结果，关键点的相似度的具体计算同现有技术类似，在此不再赘述。
若评分结果小于预设值，执行S306；若评分结果大于所述预设值，执行S307。
S306、向用户推送调节指令，调节指令用于使所述用户根据AI虚拟对象的肢体动作，进行肢体动作训练。
若评分结果小于预设值，说明用户的该肢体动作不达标，终端设备向用户推送调节指令，以使该用户根据AI虚拟对象的肢体动作，进行肢体动作训练，举例来说，用户输入一操作指令，该操作指令用于使AI虚拟教练重复执行该不达标的肢体动作，从而用户根据AI虚拟教练的肢体动作，进行肢体动作训练。预设值的具体选取可以根据实际情况或经验确定，例如，80分或者85分，本实施例不做限制。
S307、向用户推送增强特效反馈。
若评分结果大于预设值，说明用户的该肢体动作达标，则终端设备可以向用户推送增强特效反馈，例如，鼓掌、鲜花或者竖起大拇指。
需要说明的是，一个训练项目包括一个或者多个肢体动作，一般来说是一套，但是每一个动作都是按照上述方式执行的。
另外，在整个训练项目训练完成后，还可以向用户推送总体的评分汇总，该评分汇总的形式可以为肢体动作评分结果的列表，同时还可以向用户推送哪些肢体动作需要加强训练。
本实施例提供的肢体训练方法，通过获取用户的训练项目，获取训练项目对应的人工智能AI虚拟教练，AI虚拟教练用于对用户的肢体动作进行指导，根据终端设备上的摄像头，获取用户的肢体动作，获取AI虚拟教练的肢体动作，根据AI虚拟教练的肢体动作和用户的肢体动作，向用户推送评分结果，若评分结果小于预设值，向用户推送调节指令，调节指令用于使所述用户根据AI虚拟对象的肢体动作，进行肢体动作训练，若评分结果大于预设值，向用户推送增强特效反馈，通过AI虚拟教练对用户进行肢体动作训练，从而提高了训练效率，大大降低了成本，同时当用户的肢体动作的评分结果小于预设值，向用户推送调节指令，能够使得用户进行肢体动作训练，当评分结果小于预设值，向用户推送增强特效反馈，以鼓励用户，提高了用户体验。
图5为本发明实施例提供的肢体训练方法的流程图示意图三，在图1、图2实施例的基础上，进一步对本实施例的具体实现过程进行了详细说明。如图5所示，该方法包括：
S401、获取用户的训练项目。
S402、获取所述训练项目对应的人工智能AI虚拟教练。
S403、根据终端设备上的摄像头，获取用户的肢体动作。
步骤401-403的执行过程与图2所示的步骤201-203的执行过程类似，此处不再赘述。
S404、根据AI虚拟教练以及用户的肢体动作，对用户进行肢体动作训练。
步骤401-404的执行过程与图2所示的步骤201-204的执行过程类似，此处不再赘述。
在本实施例中，还可以将AI虚拟教练和用户在AR场景中进行重叠显示，在肢体训练过程中，在显示屏上重叠显示AI虚拟教练的肢体动作和用户的肢体动作，使得用户可以观看AI虚拟教练的肢体动作，来矫正自己的肢体动作，虚实结合，寓教于乐，从而实现用户肢体动作的训练。
参照图6进行说明，图6为本发明实施例提供的AR场景的示意图，框线表示AI虚拟教练的当前位姿，即所做的肢体动作(图6中只示意性表示AI虚拟教练和用户在AR场景中重叠显示，以框线表示AI虚拟教练)，用户可以观看AI虚拟教练的肢体动作，来矫正自己的肢体动作。
可选的，所述用户的数目为多个，所述AI虚拟教练的数目为多个。
则在终端设备的显示屏上，每个用户和每个AI虚拟教练都进行重叠显示，实现了摄像头监督下用户的主动学习，当有多个用户时，能够实现对每个用户的一对一指导，提高了用户体验。
S405、对用户的训练过程进行录制，获取录制结果。
S406、将录制结果推送给用户。
在本实施例中，终端设备还可以对用户的训练过程进行录制，获取录制结果，包括视频和/或照片，并推送给用户的个人手机，以供用户反复观看自己的训练过程，提高了用户体验。
可选的，所述获取用户的训练项目之前，所述方法还包括：
S407、获取多个训练项目的多个教学视频。
教学视频为训练项目的视频，举例来说，教学视频为太极教学视频、武术教学视频、民族舞教学视频等，本实施例对于教学视频不做限制。在一种可能的实现方式中，开发人员上传教学视频至终端设备，则终端设备获取该教学视频。
S408、根据人体骨骼关键点检测算法，获取每个教学视频中教学者的关键点。
在本实施例中，根据人体骨骼关键点检测算法，获取每个教学视频中教学者的关键点，获取关键点的位置坐标。关键点的获取过程和现有技术类似，在此不再赘述。
S409、根据每个教学视频中教学者的关键点，创建训练项目对应的肢体动作。
根据教学视频中教学者的关键点，创建训练项目对应的肢体动作，每个训练项目包括至少一个肢体动作。由于关键点用于描述肢体动作，因此，可以根据教学者的关键点创建肢体动作，根据关键点创建肢体动作的具体方式同现有技术类似，在此不再赘述。
S410、根据训练项目对应的肢体动作，采用实镜叠加渲染技术，创建AI虚拟教练，并建立AI虚拟教练和训练项目的映射关系。
在本实施例中，采用实镜叠加渲染技术，根据训练项目的肢体动作，创建AI虚拟教练，并建立AI虚拟教练和训练项目的映射关系。
需要说明的是，训练项目的数目有多个，训练项目和AI虚拟教练的映射关系都是按照上述方式获取的。
本实施例提供的肢体训练方法，获取用户的训练项目，获取所述训练项目对应的人工智能AI虚拟教练，根据终端设备上的摄像头，获取用户的肢体动作，根据AI虚拟教练以及用户的肢体动作，对用户进行肢体动作训练，对用户的训练进行录制，获取录制结果，将录制结果推送给用户，所述获取用户的训练项目之前，所述方法还包括：获取多个训练项目的多个教学视频，根据人体骨骼关键点检测算法，获取每个教学视频中教学者的关键点，根据每个教学视频中教学者的关键点，创建每个训练项目对应的肢体动作，根据每个训练项目对应的肢体动作，采用实镜叠加渲染技术，创建对应的AI虚拟教练，并建立AI虚拟教练和训练项目的映射关系。将人体骨骼关键点检测和AR呈现技术结合起来，通过AI虚拟教练指导与实景用户进行叠加显示，实现实时提示和评分，提高了训练效率，大大降低了成本。
图7为本发明实施例提供的终端的结构示意图，如图7所示，本实施例提供的终端50包括：获取模块501、处理模块502、发送模块503、显示模块504，其中：
获取模块501，用于获取用户的训练项目；
所述获取模块501，还用于获取所述训练项目对应的人工智能AI虚拟教练，所述AI虚拟教练用于对用户的肢体动作进行指导；
所述获取模块501，还用于根据所述终端设备上的摄像头，获取用户的肢体动作；
处理模块502，用于根据所述AI虚拟教练以及所述用户的肢体动作，对所述用户进行肢体动作训练。
可选的，所述处理模块502具体用于：
获取所述AI虚拟教练的肢体动作；
根据所述AI虚拟教练的肢体动作和所述用户的肢体动作，向所述用户推送评分结果；
若所述评分结果小于预设值，向所述用户推送调节指令，所述调节指令用于使所述用户根据所述AI虚拟对象的肢体动作，进行肢体动作训练。
可选的，还包括：
发送模块503，用于若所述评分结果大于所述预设值，向所述用户推送增强特效反馈。
可选的，还包括：
显示模块504，用于将所述AI虚拟教练的肢体动作和所述用户的肢体动作在增强现实AR场景中进行重叠显示。
可选的，所述发送模块503具体用于：
根据人体骨骼关键点检测算法，获取所述用户的肢体动作的关键点；
根据所述用户的肢体动作的关键点与所述AI虚拟教练的肢体动作的关键点的相似度，向所述用户推送评分结果。
可选的，所述处理模块502，还用于：
对所述用户的训练过程进行录制，获取录制结果；
将所述录制结果推送给用户。
可选的，所述用户的数目为多个，所述AI虚拟教练的数目为多个。
可选的，所述获取模块501，还用于：
获取多个训练项目的多个教学视频；
根据人体骨骼关键点检测算法，获取每个教学视频中教学者的关键点；
所述处理模块502，还用于：
根据所述每个教学视频中教学者的关键点，创建每个训练项目对应的肢体动作；
根据所述每个训练项目对应的肢体动作，采用实镜叠加渲染技术，创建对应的AI虚拟教练，并建立AI虚拟教练和训练项目的映射关系。
本实施例的终端，可以用于执行上述各方法实施例中的技术方案，其实现原理和技术效果类似，此处不再赘述。
图8为本发明实施例提供的终端的硬件结构示意图，如图8所示，本实施例提供的终端60包括：
存储器601和处理器602；其中存储器601与处理器602例如可以通过总线603连接。
所述存储器601，用于存储程序代码；
所述处理器602，用于调用所述程序代码执行第一方面所述的肢体训练方法。
本实施例的终端，可以用于执行上述各方法实施例中的技术方案，其实现原理和技术效果类似，此处不再赘述。
本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上所述的肢体训练方法。
在本发明所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。例如，以上所描述的设备实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能模块可以集成在一个处理单元中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个单元中。上述模块成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能模块的形式实现的集成的模块，可以存储在一个计算机可读取存储介质中。上述软件功能模块存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(英文：processor)执行本申请各个实施例所述方法的部分步骤。
应理解，上述处理器可以是中央处理单元(英文：Central Processing Unit，简称：CPU)，还可以是其他通用处理器、数字信号处理器(英文：Digital Signal Processor，简称：DSP)、专用集成电路(英文：Application Specific Integrated Circuit，简称：ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合发明所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。
存储器可能包含高速RAM存储器，也可能还包括非易失性存储NVM，例如至少一个磁盘存储器，还可以为U盘、移动硬盘、只读存储器、磁盘或光盘等。
总线可以是工业标准体系结构(Industry Standard Architecture，ISA)总线、外部设备互连(Peripheral Component，PCI)总线或扩展工业标准体系结构(ExtendedIndustry Standard Architecture，EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示，本申请附图中的总线并不限定仅有一根总线或一种类型的总线。
上述存储介质可以是由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。存储介质可以是通用或专用计算机能够存取的任何可用介质。
一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于专用集成电路(Application Specific Integrated Circuits，简称：ASIC)中。当然，处理器和存储介质也可以作为分立组件存在于电子设备或主控设备中。
本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (18)

1.一种肢体训练方法，其特征在于，包括：
获取用户的训练项目；
获取所述训练项目对应的人工智能AI虚拟教练，所述AI虚拟教练用于对用户的肢体动作进行指导；
根据终端设备上的摄像头，获取用户的肢体动作；
根据所述AI虚拟教练以及所述用户的肢体动作，对所述用户进行肢体动作训练。
2.根据权利要求1所述的方法，其特征在于，所述根据所述AI虚拟教练以及所述用户的肢体动作，对所述用户进行肢体动作训练，包括：
获取所述AI虚拟教练的肢体动作；
根据所述AI虚拟教练的肢体动作和所述用户的肢体动作，向所述用户推送评分结果；
若所述评分结果小于预设值，向所述用户推送调节指令，所述调节指令用于使所述用户根据所述AI虚拟对象的肢体动作，进行肢体动作训练。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
若所述评分结果大于所述预设值，向所述用户推送增强特效反馈。
4.根据权利要求1-3任一项所述的方法，其特征在于，所述方法还包括：
将所述AI虚拟教练和所述用户在增强现实AR场景中进行重叠显示。
5.根据权利要求3所述的方法，其特征在于，所述根据所述AI虚拟教练的肢体动作和所述用户的肢体动作，向所述用户推送评分结果，包括：
根据人体骨骼关键点检测算法，获取所述用户的肢体动作的关键点；
根据所述用户的肢体动作的关键点与所述AI虚拟教练的肢体动作的关键点的相似度，向所述用户推送评分结果。
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
对所述用户的训练过程进行录制，获取录制结果；
将所述录制结果推送给用户。
7.根据权利要求6所述的方法，其特征在于，所述用户的数目为多个，所述AI虚拟教练的数目为多个。
8.根据权利要求1所述的方法，其特征在于，所述获取用户的训练项目之前，所述方法还包括：
获取多个训练项目的多个教学视频；
根据人体骨骼关键点检测算法，获取每个教学视频中教学者的关键点；
根据所述每个教学视频中教学者的关键点，创建每个训练项目对应的肢体动作；
根据所述每个训练项目对应的肢体动作，采用实镜叠加渲染技术，创建对应的AI虚拟教练，并建立AI虚拟教练和训练项目的映射关系。
9.一种肢体训练装置，其特征在于，应用于终端设备，包括：
获取模块，用于获取用户的训练项目；
所述获取模块，还用于获取所述训练项目对应的人工智能AI虚拟教练，所述AI虚拟教练用于对用户的肢体动作进行指导；
所述获取模块，还用于根据所述终端设备上的摄像头，获取用户的肢体动作；
处理模块，用于根据所述AI虚拟教练以及所述用户的肢体动作，对所述用户进行肢体动作训练。
10.根据权利要求9所述的装置，其特征在于，所述处理模块具体用于：
获取所述AI虚拟教练的肢体动作；
根据所述AI虚拟教练的肢体动作和所述用户的肢体动作，向所述用户推送评分结果；
若所述评分结果小于预设值，向所述用户推送调节指令，所述调节指令用于使所述用户根据所述AI虚拟对象的肢体动作，进行肢体动作训练。
11.根据权利要求10所述的装置，其特征在于，还包括：
发送模块，用于若所述评分结果大于所述预设值，向所述用户推送增强特效反馈。
12.根据权利要求9-11任一项所述的装置，其特征在于，还包括：
显示模块，用于将所述AI虚拟教练的肢体动作和所述用户的肢体动作在增强现实AR场景中进行重叠显示。
13.根据权利要求11所述的装置，其特征在于，所述发送模块具体用于：
根据人体骨骼关键点检测算法，获取所述用户的肢体动作的关键点；
根据所述用户的肢体动作的关键点与所述AI虚拟教练的肢体动作的关键点的相似度，向所述用户推送评分结果。
14.根据权利要求13所述的装置，其特征在于，所述处理模块，还用于：
对所述用户的训练过程进行录制，获取录制结果；
将所述录制结果推送给用户。
15.根据权利要求14所述的装置，其特征在于，所述用户的数目为多个，所述AI虚拟教练的数目为多个。
16.根据权利要求9所述的装置，其特征在于，所述获取模块，还用于：
获取多个训练项目的多个教学视频；
根据人体骨骼关键点检测算法，获取每个教学视频中教学者的关键点；
所述处理模块，还用于：
根据所述每个教学视频中教学者的关键点，创建每个训练项目对应的肢体动作；
根据所述每个训练项目对应的肢体动作，采用实镜叠加渲染技术，创建对应的AI虚拟教练，并建立AI虚拟教练和训练项目的映射关系。
17.一种终端设备，其特征在于，包括：存储器和处理器；
所述存储器，用于存储程序代码；
所述处理器，用于调用所述程序代码执行如权利要求1-8任意一项所述的肢体训练方法。
18.一种可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序；所述计算机程序在被执行时，实现如权利要求1-8任意一项所述的肢体训练方法。
CN201910430868.8A 2019-05-22 2019-05-22 肢体训练方法、装置、设备和存储介质 Pending CN110302524A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910430868.8A CN110302524A (zh) 2019-05-22 2019-05-22 肢体训练方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910430868.8A CN110302524A (zh) 2019-05-22 2019-05-22 肢体训练方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN110302524A true CN110302524A (zh) 2019-10-08

Family

ID=68075320

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910430868.8A Pending CN110302524A (zh) 2019-05-22 2019-05-22 肢体训练方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN110302524A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112090062A (zh) * 2020-09-14 2020-12-18 成都拟合未来科技有限公司 交互式练习虚拟场景显示方法、系统、终端及介质
CN112221107A (zh) * 2020-08-31 2021-01-15 广州市美图现电子有限公司 一种智能健身镜控制方法及智能健身镜
CN112386882A (zh) * 2020-10-14 2021-02-23 珠海格力电器股份有限公司 虚拟运动系统、方法、计算机设备及计算机可读存储介质
CN112587903A (zh) * 2020-11-30 2021-04-02 珠海大横琴科技发展有限公司 一种基于深度学习的短跑运动员起跑训练方法及系统
CN113593348A (zh) * 2021-08-11 2021-11-02 中国人民解放军联勤保障部队大连康复疗养中心 虚拟训练控制系统、方法、装置、设备及存储介质
CN113935921A (zh) * 2021-10-19 2022-01-14 成都拟合未来科技有限公司 一种镜面式健身信息交互方法及系统
CN114237777A (zh) * 2020-09-09 2022-03-25 乔山健身器材（上海）有限公司 线上运动的动态领先榜与动态评等系统及显示介面

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105635669A (zh) * 2015-12-25 2016-06-01 北京迪生数字娱乐科技股份有限公司 基于三维运动捕捉数据与实拍视频的动作对比系统及方法
CN207117835U (zh) * 2017-08-21 2018-03-16 尉捷 基于人工智能关节捕捉技术的健身辅助系统
US20180126241A1 (en) * 2016-11-10 2018-05-10 National Taiwan University Augmented learning system for tai-chi chuan with head-mounted display
CN108853946A (zh) * 2018-07-10 2018-11-23 燕山大学 一种基于Kinect的健身指导训练系统及方法
CN109745163A (zh) * 2019-01-05 2019-05-14 张伟 身体姿势指导方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105635669A (zh) * 2015-12-25 2016-06-01 北京迪生数字娱乐科技股份有限公司 基于三维运动捕捉数据与实拍视频的动作对比系统及方法
US20180126241A1 (en) * 2016-11-10 2018-05-10 National Taiwan University Augmented learning system for tai-chi chuan with head-mounted display
CN207117835U (zh) * 2017-08-21 2018-03-16 尉捷 基于人工智能关节捕捉技术的健身辅助系统
CN108853946A (zh) * 2018-07-10 2018-11-23 燕山大学 一种基于Kinect的健身指导训练系统及方法
CN109745163A (zh) * 2019-01-05 2019-05-14 张伟 身体姿势指导方法及系统

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112221107A (zh) * 2020-08-31 2021-01-15 广州市美图现电子有限公司 一种智能健身镜控制方法及智能健身镜
CN114237777A (zh) * 2020-09-09 2022-03-25 乔山健身器材（上海）有限公司 线上运动的动态领先榜与动态评等系统及显示介面
CN112090062A (zh) * 2020-09-14 2020-12-18 成都拟合未来科技有限公司 交互式练习虚拟场景显示方法、系统、终端及介质
CN112386882A (zh) * 2020-10-14 2021-02-23 珠海格力电器股份有限公司 虚拟运动系统、方法、计算机设备及计算机可读存储介质
CN112587903A (zh) * 2020-11-30 2021-04-02 珠海大横琴科技发展有限公司 一种基于深度学习的短跑运动员起跑训练方法及系统
CN113593348A (zh) * 2021-08-11 2021-11-02 中国人民解放军联勤保障部队大连康复疗养中心 虚拟训练控制系统、方法、装置、设备及存储介质
CN113935921A (zh) * 2021-10-19 2022-01-14 成都拟合未来科技有限公司 一种镜面式健身信息交互方法及系统

Similar Documents

Publication Publication Date Title
CN110302524A (zh) 肢体训练方法、装置、设备和存储介质
CN109191588B (zh) 运动教学方法、装置、存储介质及电子设备
CN109815776B (zh) 动作提示方法和装置、存储介质及电子装置
CN106652590B (zh) 教学方法、教学识别体及教学系统
CN108021896B (zh) 基于增强现实的拍摄方法、装置、设备及计算机可读介质
CN111080759B (zh) 一种分镜效果的实现方法、装置及相关产品
CN106774937A (zh) 一种增强现实技术中的图像交互方法及其装置
CN109241956B (zh) 合成图像的方法、装置、终端及存储介质
CN112198959A (zh) 虚拟现实交互方法、装置及系统
CN112911393B (zh) 部位识别方法、装置、终端及存储介质
CN111880659A (zh) 虚拟人物控制方法及装置、设备、计算机可读存储介质
CN108416832B (zh) 媒体信息的显示方法、装置和存储介质
CN112791417B (zh) 游戏画面的拍摄方法、装置、设备及存储介质
CN114332374A (zh) 一种虚拟显示方法、设备以及存储介质
CN109660714A (zh) 基于ar的图像处理方法、装置、设备及存储介质
CN110213668A (zh) 视频标题的生成方法、装置、电子设备和存储介质
CN109784134A (zh) 计算机可读存储介质、信息处理装置以及信息处理方法
CN110110647A (zh) 基于ar设备进行信息显示的方法、装置及存储介质
CN109739353A (zh) 一种基于手势、语音、视线追踪识别的虚拟现实交互系统
CN107065164B (zh) 图像展示方法及装置
CN106816054A (zh) 用于智能机器人的交互教学方法及终端
CN109407826B (zh) 球类运动模拟方法、装置、存储介质及电子设备
KR102176805B1 (ko) 뷰 방향이 표시되는 vr 컨텐츠 제공 시스템 및 방법
US20140098138A1 (en) Method and system for augmented reality based smart classroom environment
CN111650953B (zh) 飞行器避障处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination