CN108566520B - 视频数据和运动效果动画的同步方法及装置 - Google Patents
视频数据和运动效果动画的同步方法及装置 Download PDFInfo
- Publication number
- CN108566520B CN108566520B CN201710377650.1A CN201710377650A CN108566520B CN 108566520 B CN108566520 B CN 108566520B CN 201710377650 A CN201710377650 A CN 201710377650A CN 108566520 B CN108566520 B CN 108566520B
- Authority
- CN
- China
- Prior art keywords
- muscle group
- myoelectric
- image frame
- video data
- video image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/389—Electromyography [EMG]
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/80—2D [Two Dimensional] animation, e.g. using sprites
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Abstract
本发明适用于运动监测领域,提供了视频数据和运动效果动画的同步方法及装置,该方法包括:对用户的运动过程进行视频录制,得到视频数据,并在录制视频数据时,同步采集各帧视频图像对应的肌电数据;解析各视频图像帧所分别对应的肌电数据,以确定各视频图像帧所分别对应的运动肌肉群及肌电强度;在终端界面中对视频数据进行回放;在回放视频数据的同时,根据当前回放的视频图像帧对应的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画。本发明确保了运动效果动画以及视频数据的同步精度,使得用户可以直观地了解自己所做的每个动作都达到了怎样的训练效果,因而能够科学、有效地对自己的健身方式进行改进,提高了用户锻炼的有效性。
Description
技术领域
本发明属于运动监测领域,尤其涉及一种视频数据和运动效果动画的同步方法及装置。
背景技术
近年来,肌电数据开始应用于运动生物力学领域,具体地,在用户执行运动训练的过程中,可对人体特定部位的肌电数据进行采集,从而基于肌电数据的分析结果,对用户的运动效果进行分析及指导。
在现有技术中,用户只能在运动结束后查看运动指导意见,因此,即使运动指导意见指出了用户在运动过程中的某个姿势不规范,用户也只能凭借记忆回想自己当时的动作为什么错误,并且也无法知道自己所做的每个动作都达到了怎样的训练效果,因而即使运动监测设备提供了运动指导意见,用户也难以科学、有效地对自己的健身方式进行改进,由此降低了用户锻炼的有效性。
发明内容
有鉴于此,本发明实施例提供了一种视频数据和运动效果动画的同步方法及装置,以解决现有技术中用户难以科学、有效地对自己的健身方式进行改进以及存在锻炼的有效性较为低下的问题。
本发明实施例的第一方面提供了一种视频数据和运动效果动画的同步方法,包括:
对用户的运动过程进行视频录制,得到视频数据,并在录制所述视频数据时,同步采集各帧视频图像对应的肌电数据;
解析各视频图像帧所分别对应的肌电数据,以确定各视频图像帧所分别对应的运动肌肉群及肌电强度;
在终端界面中对所述视频数据进行回放;
在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画。
本发明实施例的第二方面提供了一种视频数据和运动效果动画的同步装置,包括:
采集单元,用于对用户的运动过程进行视频录制,得到视频数据,并在录制所述视频数据时,同步采集各帧视频图像对应的肌电数据;
解析单元,用于解析各视频图像帧所分别对应的肌电数据,以确定各视频图像帧所分别对应的运动肌肉群及肌电强度;
回放单元,用于在终端界面中对所述视频数据进行回放;
展示单元,用于在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画。
本发明实施例中,通过对用户的运动过程进行视频录制,并在视频回放的过程中根据视频图像帧对应的运动肌肉群及肌电强度,实时渲染运动效果动画,保证了每个时刻下所显示的运动效果动画是与当前时刻视频图像帧中所展示的运动动作相关联的,确保了运动效果动画以及视频数据的同步精度。同时,由于用户能够基于视频图像帧所同步播放的运动效果动画,直观地了解自己所做的每个动作都达到了怎样的训练效果,实时知道自己所做的哪个动作不规范,因而能够科学、有效地对自己的健身方式进行改进,提高了用户锻炼的有效性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的视频数据和运动效果动画的同步方法的实现流程图;
图2是本发明实施例二提供的视频数据和运动效果动画的同步方法S104的具体实现流程图;
图3是本发明实施例二提供的运动效果动画的示意图;
图4是本发明实施例三提供的视频数据和运动效果动画的同步方法S104的具体实现流程图;
图5是本发明实施例三提供的运动效果动画的示意图;
图6是本发明实施例四提供的视频数据和运动效果动画的同步方法S104的具体实现流程图;
图7是本发明实施例五提供的视频数据和运动效果动画的同步方法S104的具体实现流程图;
图8是本发明实施例六提供的视频数据和运动效果动画的同步装置的结构框图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
在本发明的各个实施例中,流程的执行主体为终端设备,所述终端设备为具有显示屏以及摄像头的智能终端,例如手机、平板、智能相机、笔记本电脑以及计算机等。该终端设备内部运行有特定的应用程序客户端,该应用程序客户端通过有线、无线或者蓝牙等连接方式,与配套的可穿戴运动装置交换数据。
在本发明实施例中,可穿戴运动装置可以是可穿戴式的智能健身衣,也可以是可穿戴、可贴附式的一个或多个采集模块的集合。
其中,当可穿戴运动装置为可穿戴式的智能健身衣时,其可以是由柔性面料制成的衣服或裤子,且在柔性面料贴近人体皮肤的一侧镶嵌有多个采集模块。每个采集模块固定于智能健身衣的不同位置点,以使得用户穿上该智能健身衣之后,各个采集模块能够贴附于用户身体的各块肌肉。在可穿戴运动装置中,还镶嵌有至少一个控制模块,每个采集模块分别与该控制模块通信相连。
特别地,当采集模块与控制模块通信相连时,每个采集模块中可以仅包含具有体感传感器功能的采集电极,也可以包含具有采集功能的集成电路。上述采集电极包括但不限于织物电极、橡胶电极以及凝胶电极等。
当可穿戴运动装置为可穿戴、可贴附式的一个或多个采集模块的集合时,用户可将各个采集模块灵活地固定于用户所指定的身体位置点,使得各个采集模块能够分别贴附于用户身体的指定肌肉。此时,每个采集模块为具有采集功能以及具有无线传输功能的集成电路,且该集成电路中包含上述具有体感传感器功能的采集电极。采集模块所采集到的肌电数据通过无线网络传输至远程的控制模块,该控制模块位于与采集模块配套使用的上述终端设备或远程控制盒子中。
实施例一
图1示出了本发明实施例提供的视频数据和运动效果动画的同步方法的实现流程,该方法流程包括步骤S101至S104。各步骤的具体实现原理如下:
S101:对用户的运动过程进行视频录制,得到视频数据,并在录制所述视频数据时,同步采集各帧视频图像对应的肌电数据。
本发明实施例中,当终端设备接收到用户在上述应用程序客户端中输入的视频录制指令时,终端设备启动摄像头并开始执行视频录制。同时,应用程序客户端向控制模块发出采集信号,以使控制模块控制各个采集模块以预设频率开始采集来自用户身体各个肌群的肌电数据,并使控制模块将各个采集模块所采集到肌电数据实时返回至终端设备。在终端设备接收到每一肌电数据的时刻,将该时刻所录制的视频图像帧与该肌电数据对应关联。在视频数据的录制过程中,终端设备将持续接收到可穿戴运动装置返回的肌电数据以及持续录制的各帧视频图像,因此能够确定采集各帧视频图像时所实时对应接收到的肌电数据。
当接收到视频录制停止指令时,终端设备关闭摄像头,并向控制模块发出终止信号,以停止采集以及停止传输肌电数据。
S102:解析各视频图像帧所分别对应的肌电数据,以确定各视频图像帧所分别对应的运动肌肉群及肌电强度。
由于终端设备所接收到的肌电数据分别来源于可穿戴运动装置上的不同采集模块,因此,根据肌电数据所携带的采集模块来源标识,终端设备将一帧视频图像所对应的肌电数据分成N路子数据,N为采集模块的数量。由于各个采集模块所贴附的人体肌群已预设于应用程序客户端中,因此,根据采集模块来源标识与人体肌群的对应关系,终端设备将每个视频图像帧对应的N路子数据分成M个组别。其中,M为可穿戴运动装置中采集模块所贴附的人体肌群的肌群总数,且M小于或等于N。具体地,对贴附于同一人体肌群的K个采集模块,终端设备将采集模块来源标识为该K个采集模块的K路子数据作为一个组别。M、N以及K均为正整数。
对连续多帧视频图像所分别对应的M个组别的肌电数据进行综合分析处理,将肌电强度最大的一组肌电数据所对应的人体肌群确定为所述连续多帧视频图像对应的运动肌肉群。其中,连续视频图像帧的数目为预设值。
在确定连续多帧视频图像对应的运动肌肉群后,连续多帧视频图像中的每一帧视频图像也确定为对应该运动肌肉群。运动肌肉群的肌电强度为该帧视频图像所对应的肌电数据的信号强度值。
终端设备保存各视频图像帧所分别对应的运动肌肉群及肌电强度。
S103:在终端界面中对所述视频数据进行回放。
通过启动终端设备的摄像头采集用户运动过程的各帧视频图像后,终端设备将生成视频数据文件。当在应用程序客户端接收到用户发出的视频数据文件选取指令时,或者,当视频数据文件生成时,终端设备读取该视频数据文件,并依照各帧视频图像的录制顺序,从第一帧视频图像开始,依次在显示屏中播放各帧视频图像。由于终端设备在1秒内能够播放多帧视频图像,因此,对于视频观看者而言,可以动态回顾用户在运动过程中所做的各个动作。
S104:在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画。
在视频数据回放过程的每一时刻,确定当前时刻所展示的一个视频图像帧。根据上述S102所存储的各视频图像帧对应的运动肌肉群及肌电强度,终端设备读取该当前回放的一帧视频图像所对应的运动肌肉群及肌电强度,从而以该运动肌肉群及肌电强度作为动画参数,实时生成运动效果动画,并展示于显示屏中的预设播放区域,以在播放各视频图像帧的同时,能够播放该视频图像帧对应的运动效果动画。
本发明实施例中,通过对用户的运动过程进行视频录制,并在视频回放的过程中根据视频图像帧对应的运动肌肉群及肌电强度,实时渲染运动效果动画,保证了每个时刻下所显示的运动效果动画是与当前时刻视频图像帧中所展示的运动动作相关联的,确保了运动效果动画以及视频数据的同步精度。同时,由于用户能够基于视频图像帧所同步播放的运动效果动画,直观地了解自己所做的每个动作都达到了怎样的训练效果,实时知道自己所做的哪个动作不规范,因而能够科学、有效地对自己的健身方式进行改进,提高了用户锻炼的有效性。
实施例二
作为本发明的一个实施例,在实施例一的基础上,如图2所示,上述S104还包括:
S201:根据读取到的运动肌肉群及肌电强度,确定该肌电强度对应的肌力等级。
终端设备内部预设有一张肌力等级关系对照表。肌力等级关系对照表中包含多个肌力等级,每个肌力等级与一个肌电强度百分比区间相对应。
通过S102确定了各视频图像帧所分别对应的运动肌肉群及运动肌肉群的肌电强度后,计算出该肌电强度与预设的肌电强度最大值的比值,并将该比值输出为运动肌肉群的肌电强度百分比。其中,预设的肌电强度最大值与运动肌肉群对应,即,需要在确定视频图像帧所对应的运动肌肉群之后,再确定出该运动肌肉群对应的肌电幅值最大值。
具体地,各运动肌肉群所对应的肌电幅值最大值与用户在应用程序客户端中所使用的个人账号相对应。作为本发明的一个实施示例,在用户执行运动动作之前,应用程序客户端将提示用户使出最大力度执行运动测试动作,并采集运动测试过程中用户所产生的肌电测试数据。通过对该肌电测试数据进行识别处理,应用程序客户端计算出与用户匹配的各个运动肌肉群的肌电强度最大值。
根据视频图像帧所对应的运动肌肉群的肌电强度百分比,终端设备读取肌力等级关系对照表,再确定该运动肌肉群的肌电强度百分比属于哪个肌电强度百分比区间,并将该肌电强度百分比区间所对应的肌力等级判断为该运动肌肉群的肌力等级。
示例性地,表1为肱三头肌的肌力等级关系对照表,具体如下:
表1
肌力等级 | 肌电强度百分比 |
Ⅰ | [0,20%] |
Ⅱ | (20%,40%] |
Ⅲ | (40%,60%] |
Ⅳ | (60%,80%] |
Ⅴ | (80%,100%] |
若当前回放的视频图像帧对应的运动肌肉群为肱三头肌,其肌电强度百分比为15%,则终端设备从表1中能够确定出15%属于第一个肌电强度百分比区间,从而把该肌电强度百分比区间对应的肌力等级Ⅰ确定为肱三头肌的肌电强度对应的肌力等级。
S203:获取所述肌力等级对应的第一色彩元素。
本发明实施例中,为了在运动效果动画图中展示运动肌肉群的肌力等级,在确定运动肌肉群的肌力等级后,直接从预设的色彩元素对应表中获取肌力等级所对应的色彩元素。同一肌力等级对应同一色彩元素。若不同的视频图像帧分别对应不同的运动肌肉群,且各个运动肌肉群的肌力等级都相同,则共同对应一种色彩元素。若各个运动肌肉群的肌力等级各不相同,则每一运动肌肉群的肌力等级分别对应一种色彩元素。
S203:在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群。
图3示出了本发明实施例提供的人体肌群分布图。如图3所示,该图展示了一个人体模型,该人体模型与用户的实际身躯为镜面对称显示关系。即,视频观察者所观看到的人体模型的左边部分也表示用户实际身躯的左边。并且,人体模型中以线条划分出不同的肌群,以使用户能够从该人体肌群分布图中,直观地看出各个肌群所实际对应的人体生理部位。
从人体肌群分布图中确认出当前回放的视频图像帧所对应的运动肌肉群,从而以该运动肌肉群的肌力等级所对应的第一色彩元素将该运动肌肉群标记出来。标记方法包括:以第一色彩元素标记该运动肌肉群的轮廓线,或者,对该运动肌肉群所处的位置区域,以第一色彩元素进行填充。
例如,若当前播放的视频图像帧所对应的运动肌肉群为左胸大肌,则在图3中,以左胸大肌的肌力等级所对应的第一色彩元素,将区域A进行填充。
本发明实施例中,通过直接读取预存储的视频图像帧所对应的运动肌肉群及肌电强度,提高了运动效果动画的实时渲染速度;通过在人体肌群分布图中以不同的色彩元素标记不同的肌力等级,使得用户能够直观地了解到运动肌肉群的实际发力程度,从而根据视频回放过程中色彩的变化可以检视自己的实际运动情况。
实施例三
作为本发明的一个实施例,在实施例二的基础上,如图4所示,上述S104还包括:
S401:获取当前回放的视频图像帧对应的参考运动肌群以及参考肌力等级。
在视频数据回放之前,终端设备对录制得到的所有视频图像帧进行图像识别处理,从而确定用户在运动过程中所做的每个动作所对应的起止视频图像帧。并将起止视频图像帧之间的所有视频图像帧共同确认为对应相同的动作。
对于每一视频图像帧,将其对应的一个动作输入数据分析模型,以得出该动作所要锻炼的肌群以及肌群的最佳发力等级,并将该肌群输出为参考运动肌群,将该最佳发力等级输出为该参考运动肌群的参考肌力等级。
在回放视频数据时,根据上述预先确定的各视频图像帧对应的参考运动肌群以及参考肌力等级,终端设备读取该当前回放的一帧视频图像所对应的参考运动肌群以及参考肌力等级。
S402:确定所述参考肌力等级对应的第二色彩元素。
本发明实施例中,从上述预设的色彩元素对应表中获取参考肌力等级所对应的色彩元素,该色彩元素即为第二色彩元素。其中,色彩元素对应表中的各个色彩元素均属于相同的色系,肌力等级越大,对应的色彩元素的亮度越高。由于终端设备中仅存储唯一的色彩元素对应表,故上述S203中确定肌力等级所对应的第一色彩元素与S402中确定参考肌力等级对应的第二色彩元素均基于同一色彩元素对应表实现,第一色彩元素以及第二色彩元素为相同色系。
S403:判断所述参考运动肌群与所述运动肌肉群是否相同。
将读取出的当前回放的视频图像帧所对应的参考运动肌群与运动肌肉群进行对比,从而判断运动肌肉群是否与参考运动肌群相同。
S404:当所述参考运动肌群与所述运动肌肉群相同时,在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群。
若参考运动肌群与运动肌肉群相同,则在人体肌群分布图中,仅对应相同的一个肌群,因此,仅以运动肌肉群的肌力等级所对应的第一色彩元素标记该人体肌群,避免多种色彩混叠而产生用户难以检视肌群实际发力程度的情况发生。
S405:当所述参考运动肌群与所述运动肌肉群不相同时,在预设的人体肌群分布图中,以所述第一色彩元素标记所述运动肌肉群,以所述第二色彩元素标记所述参考运动肌群,并闪烁显示所述参考运动肌群。
若参考运动肌群与运动肌肉群不相同,则在人体肌群分布图中,分别确定出表示运动肌肉群的第一肌群以及表示参考运动肌群的第二肌群。第一肌群以第一色彩元素标记,第二肌群以第二色彩元素标记。具体标记方式与上述实施例中的标记方式相同,因此不一一赘述。其中,在标记第二肌群的同时,令第二肌群闪烁显示,以突出显示该第二肌群表示参考运动肌群。
例如,在图5中,以亮度为50的第一色彩元素标记A肌群,以亮度为20的第二色彩元素标记及闪烁B肌群,则根据该人体肌群分布图的动画显示效果,可表示出参考运动肌群为B肌群,实际运动肌肉群为A肌群。且由于A肌群的显示亮度比B肌群的亮度大,因此可知用户的实际发力过大,正确的做法应当是以小一点的力度在B肌群所实际对应的人体肌群上发力。
本发明实施例中,通过在人体肌群分布图中闪烁显示参考运动肌群以及标记用户在运动过程中实际所对应的运动肌肉群,使得用户能够直观地了解到自己的实际发力位置与标准的发力位置存在哪些差异,并且能够基于两个人体肌群所展示的不同亮度的色彩,体现力度大小的差异,由此用户能够科学地对自己的动作姿势进行调整及改进,提高了运动分析效果的可用性。
实施例四
作为本发明的一个实施例,在上述各个实施例的基础上,如图6所示,上述S104还包括:
S601:在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度。
S602:判断读取到的运动肌肉群或肌电强度是否存在异常。
在本发明实施例中,获取当前回放的视频图像帧对应的参考运动肌群以及参考肌力等级。将读取出的参考运动肌群与运动肌肉群进行对比,将读取出的参考肌力等级与肌力等级进行对比,从而判断运动肌肉群及肌电强度是否存在异常。
S603:若读取到的运动肌肉群或肌电强度存在异常,则根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染携带有音频告警信号的运动效果动画。
当读取到的参考运动肌群与运动肌肉群不同时,判断为读取到的运动肌肉群存在异常。当读取到的参考运动肌群与运动肌肉群相同且参考肌力等级与肌力等级不同时,判断为读取到肌电强度存在异常。
根据当前回放的视频图像帧对应的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画,且该运动效果动画携带音频提示信息。例如,发出滴滴声或者发出中文告警等音频提示信息。
S604:若读取到的运动肌肉群及肌电强度不存在异常,则根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画。
当参考运动肌群与运动肌肉群相同,且参考肌力等级与肌力等级相同时,根据当前回放的视频图像帧对应的运动肌肉群及肌电强度,实时在所述终端界面渲染不携带音频告警信号的运动效果动画。
本发明实施例在实时渲染并展示运动效果动画时,在动作不标准的情况下同步发出音频告警信号,从而能够提醒用户留意观看视频,以查看自己动作的不足之处,规范自己的动作姿势,避免用户因没有时刻关注到运动效果动画而无视了自己的动作出现错误。
实施例五
作为本发明的一个实施例,在上述各个实施例的基础上,如图7所示,上述S104还包括:
S701:读取当前回放的视频图像帧所对应的图像帧号。
在录制视频数据时,根据各视频图像帧的采集顺序,依次为各视频图像帧标识图像帧号。则在回放至每一视频图像帧时,能够根据读取出的图像帧号,确定该帧视频图像是视频数据中的第几帧视频图像。
S702:将所述图像帧号添加至当前时刻所展示的所述运动效果动画中,并保存所述运动效果动画,以在再次回放所述视频数据时,根据当前回放的视频图像帧对应的图像帧号,实时在所述终端界面展示所述图像帧号相同的运动效果动画。
在实时生成运动效果动画时,将读取出的图像帧号添加至此时所播放的运动效果动画中,并将携带图像帧号的运动效果动画进行保存。
若在视频数据回放的过程中接收到用户的播放进度调节指令,假设该时刻为中止时刻,且该播放进度调节指令用于指示终端设备再次播放之前已回放完毕的多帧视频图像,则在回放至中止时刻之前,对于当前回放的视频图像帧,终端设备可直接读取与该视频图像帧的图像帧号相同的运动效果动画,并实时显示。在回放至中止时刻之后,则根据当前回放的视频图像帧所对应的运动肌肉群及肌电强度,在终端界面实时渲染运动效果动画。
当整份视频数据已完成第一次回放,且再次接收到用户的回放指令时,根据各个时刻所回放的视频图像帧对应的图像帧号,终端设备能够实时读取出与该图像帧号相同的运动效果动画并进行同步显示。
依照图像帧号的顺序,将所生成的各个运动效果动画依次衔接,得到视频数据所对应的一个运动效果动画文件。
其中,在接收到基于该运动效果动画文件的选取指令时,终端设备可单独回放该运动效果动画文件。
本发明实施例中,通过将每一帧视频图像的图像帧号帧添加至其对应生成的运动效果动画中,使得在再次回放视频数据的该帧视频图像时,能够根据该视频图像帧对应的图像帧号,快速地读取与其图像帧号相同的运动效果动画并播放,而无须重复生成运动效果动画,在保证视频数据与运动效果动画同步显示的同时,降低了终端设备的计算压力,提高了运动效果动画的播放效率。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
实施例六
对应于上文实施例所述的方法,图8示出了本发明实施例提供的视频数据与运动效果动画的同步装置的结构框图,该装置可以运行于具有显示屏以及摄像头的智能终端之中,例如手机、平板、笔记本电脑、智能相机以及计算机,等等。为了便于说明,仅示出了与本实施例相关的部分。
参照图8,该装置包括:
采集单元81,用于对用户的运动过程进行视频录制,得到视频数据,并在录制所述视频数据时,同步采集各帧视频图像对应的肌电数据。
解析单元82,用于解析各视频图像帧所分别对应的肌电数据,以确定各视频图像帧所分别对应的运动肌肉群及肌电强度。
回放单元83,用于在终端界面中对所述视频数据进行回放。
展示单元84,用于在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画。
可选地,所述展示单元84包括:
确定子单元,用于根据读取到的运动肌肉群及肌电强度,确定该肌电强度对应的肌力等级。
获取子单元,用于获取所述肌力等级对应的第一色彩元素。
显示子单元,用于在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群。
可选地,所述显示子单元具体用于:
获取当前回放的视频图像帧对应的参考运动肌群以及参考肌力等级;
确定所述参考肌力等级对应的第二色彩元素;
当所述参考运动肌群与所述运动肌肉群相同时,在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群;
当所述参考运动肌群与所述运动肌肉群不相同时,在预设的人体肌群分布图中,以所述第一色彩元素标记所述运动肌肉群,以所述第二色彩元素标记所述参考运动肌群,并闪烁显示所述参考运动肌群。
可选地,所述展示单元84包括:
判断子单元,用于在终端界面中对所述视频数据进行回放,并在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,并并判断读取到的运动肌肉群或肌电强度是否存在异常。
告警子单元,用于若读取到的运动肌肉群或肌电强度存在异常,则根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染并展示携带有音频告警信号的运动效果动画。
可选地,所述装置还包括:
读取单元,用于读取当前回放的视频图像帧所对应的图像帧号。
添加单元,用于将所述图像帧号添加至当前时刻所展示的所述运动效果动画中,并保存所述运动效果动画,以在再次回放所述视频数据时,根据当前回放的视频图像帧对应的图像帧号,实时在所述终端界面展示所述图像帧号相同的运动效果动画。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的系统实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本发明实施例各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (4)
1.一种视频数据和运动效果动画的同步方法,其特征在于,包括:
对用户的运动过程进行视频录制,得到视频数据,并在录制所述视频数据时,同步采集各帧视频图像对应的肌电数据;
解析各视频图像帧所分别对应的肌电数据,以确定各视频图像帧所分别对应的运动肌肉群及肌电强度;
在终端界面中对所述视频数据进行回放;
在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画;
所述根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画,包括:
根据读取到的运动肌肉群及肌电强度,确定该肌电强度对应的肌力等级;
获取所述肌力等级对应的第一色彩元素;
在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群;其中,所述人体肌群分布图为一个人体模型;
所述在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群,包括:
获取当前回放的视频图像帧对应的参考运动肌群以及参考肌力等级;
确定所述参考肌力等级对应的第二色彩元素;
当所述参考运动肌群与所述运动肌肉群相同时,在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群;
当所述参考运动肌群与所述运动肌肉群不相同时,在预设的人体肌群分布图中,以所述第一色彩元素标记所述运动肌肉群,以所述第二色彩元素标记所述参考运动肌群,并闪烁显示所述参考运动肌群;
所述在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画,包括:
在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,并判断读取到的运动肌肉群或肌电强度是否存在异常;
若读取到的运动肌肉群或肌电强度存在异常,则根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染携带有音频告警信号的运动效果动画;其中,所述音频告警信号为中文告警音频提示信息。
2.如权利要求1所述的同步方法,其特征在于,还包括:
读取当前回放的视频图像帧所对应的图像帧号;
将所述图像帧号添加至当前时刻所展示的所述运动效果动画中,并保存所述运动效果动画,以在再次回放所述视频数据时,根据当前回放的视频图像帧对应的图像帧号,实时在所述终端界面展示所述图像帧号相同的运动效果动画。
3.一种视频数据和运动效果动画的同步装置,其特征在于,包括:
采集单元,用于对用户的运动过程进行视频录制,得到视频数据,并在录制所述视频数据时,同步采集各帧视频图像对应的肌电数据;
解析单元,用于解析各视频图像帧所分别对应的肌电数据,以确定各视频图像帧所分别对应的运动肌肉群及肌电强度;
回放单元,用于在终端界面中对所述视频数据进行回放;
展示单元,用于在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染运动效果动画;
所述展示单元包括:
确定子单元,用于根据读取到的运动肌肉群及肌电强度,确定该肌电强度对应的肌力等级;
获取子单元,用于获取所述肌力等级对应的第一色彩元素;
显示子单元,用于在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群;其中,所述人体肌群分布图为一个人体模型;
所述显示子单元具体用于:
获取当前回放的视频图像帧对应的参考运动肌群以及参考肌力等级;
确定所述参考肌力等级对应的第二色彩元素;
当所述参考运动肌群与所述运动肌肉群相同时,在预设的人体肌群分布图中,以所述第一色彩元素标记该运动肌肉群;
当所述参考运动肌群与所述运动肌肉群不相同时,在预设的人体肌群分布图中,以所述第一色彩元素标记所述运动肌肉群,以所述第二色彩元素标记所述参考运动肌群,并闪烁显示所述参考运动肌群;
所述展示单元包括:
判断子单元,用于在终端界面中对所述视频数据进行回放,并在回放所述视频数据的同时,读取当前回放的视频图像帧对应的运动肌肉群及肌电强度,并并判断读取到的运动肌肉群或肌电强度是否存在异常;
告警子单元,用于若读取到的运动肌肉群或肌电强度存在异常,则根据读取到的运动肌肉群及肌电强度,实时在所述终端界面渲染并展示携带有音频告警信号的运动效果动画;其中,所述音频告警信号为中文告警音频提示信息。
4.如权利要求3所述的同步装置,其特征在于,还包括:
读取单元,用于读取当前回放的视频图像帧所对应的图像帧号;
添加单元,用于将所述图像帧号添加至当前时刻所展示的所述运动效果动画中,并保存所述运动效果动画,以在再次回放所述视频数据时,根据当前回放的视频图像帧对应的图像帧号,实时在所述终端界面展示所述图像帧号相同的运动效果动画。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710377650.1A CN108566520B (zh) | 2017-05-25 | 2017-05-25 | 视频数据和运动效果动画的同步方法及装置 |
PCT/CN2018/072320 WO2018214520A1 (zh) | 2017-05-25 | 2018-01-12 | 视频数据和运动效果动画的同步方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710377650.1A CN108566520B (zh) | 2017-05-25 | 2017-05-25 | 视频数据和运动效果动画的同步方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108566520A CN108566520A (zh) | 2018-09-21 |
CN108566520B true CN108566520B (zh) | 2020-10-20 |
Family
ID=63529167
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710377650.1A Active CN108566520B (zh) | 2017-05-25 | 2017-05-25 | 视频数据和运动效果动画的同步方法及装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN108566520B (zh) |
WO (1) | WO2018214520A1 (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109550222A (zh) * | 2019-01-09 | 2019-04-02 | 浙江强脑科技有限公司 | 电子健身训练方法、系统及可读存储介质 |
CN109771949A (zh) * | 2019-01-14 | 2019-05-21 | 珠海金山网络游戏科技有限公司 | 一种游戏内动态调整渲染等级的方法和系统 |
CN109805945B (zh) * | 2019-01-30 | 2021-12-14 | 北京津发科技股份有限公司 | 记录回放装置及方法 |
CN110782482A (zh) * | 2019-10-21 | 2020-02-11 | 深圳市网心科技有限公司 | 运动评估方法、装置、计算机设备及存储介质 |
CN112950951B (zh) * | 2021-01-29 | 2023-05-02 | 浙江大华技术股份有限公司 | 智能信息显示方法、电子装置和存储介质 |
KR20230086750A (ko) * | 2021-03-19 | 2023-06-15 | 썬전 샥 컴퍼니 리미티드 | 운동감시방법및 운동감시시스템 |
CN116920353A (zh) * | 2022-04-06 | 2023-10-24 | 成都拟合未来科技有限公司 | 健身塑形课程展示设备及方法 |
CN114549711B (zh) * | 2022-04-27 | 2022-07-12 | 广州公评科技有限公司 | 一种基于表情肌定位的视频智能渲染方法和系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN202960508U (zh) * | 2012-10-22 | 2013-06-05 | 陈保江 | 肢体肌肉运动电位感应装置 |
CN105392064A (zh) * | 2015-12-10 | 2016-03-09 | 博迪加科技(北京)有限公司 | 一种运动数据与视频的同步方法、系统及移动终端 |
CN105597298A (zh) * | 2016-04-05 | 2016-05-25 | 哈尔滨工业大学 | 基于肌电信号及肢体动作检测的健身效果评价系统 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101505657A (zh) * | 2006-08-17 | 2009-08-12 | 皇家飞利浦电子股份有限公司 | 动态机体状态显示装置 |
CN102237114A (zh) * | 2010-05-07 | 2011-11-09 | 北京华旗随身数码股份有限公司 | 健身用的视频播放装置 |
CN102274028B (zh) * | 2011-05-30 | 2013-03-27 | 国家体育总局体育科学研究所 | 一种人体运动状态多参数同步综合采集方法 |
ITMI20120494A1 (it) * | 2012-03-27 | 2013-09-28 | B10Nix S R L | Apparato e metodo per l'acquisizione ed analisi di una attivita' muscolare |
WO2014056000A1 (en) * | 2012-10-01 | 2014-04-10 | Coggins Guy | Augmented reality biofeedback display |
-
2017
- 2017-05-25 CN CN201710377650.1A patent/CN108566520B/zh active Active
-
2018
- 2018-01-12 WO PCT/CN2018/072320 patent/WO2018214520A1/zh active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN202960508U (zh) * | 2012-10-22 | 2013-06-05 | 陈保江 | 肢体肌肉运动电位感应装置 |
CN105392064A (zh) * | 2015-12-10 | 2016-03-09 | 博迪加科技(北京)有限公司 | 一种运动数据与视频的同步方法、系统及移动终端 |
CN105597298A (zh) * | 2016-04-05 | 2016-05-25 | 哈尔滨工业大学 | 基于肌电信号及肢体动作检测的健身效果评价系统 |
Also Published As
Publication number | Publication date |
---|---|
WO2018214520A1 (zh) | 2018-11-29 |
CN108566520A (zh) | 2018-09-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108566520B (zh) | 视频数据和运动效果动画的同步方法及装置 | |
CN101453941B (zh) | 图像输出装置、图像输出方法以及图像输出系统 | |
US8998828B2 (en) | Visualization testing and/or training | |
CN101453943B (zh) | 图像记录装置和图像记录方法 | |
WO2018214528A1 (zh) | 运动效果的展示方法及装置 | |
AU2017263802B8 (en) | A user interface for navigating through physiological data | |
CN104379056A (zh) | 用于肌肉活动的采集和分析的系统及其操作方法 | |
CN101453938B (zh) | 图像记录装置 | |
WO2018214521A1 (zh) | 健身动作的运动效果显示方法及装置 | |
CN110729047A (zh) | 基于人脸视频的心理生理分析与量表测试结合的装置及方法 | |
JPH0326281A (ja) | 動作診断装置 | |
CN201200409Y (zh) | 带有视觉刺激检测功能的测谎系统 | |
CN108771539A (zh) | 一种基于摄像的非接触式心率的检测方法及其装置 | |
JP7023004B2 (ja) | 運動解析システム、運動解析プログラム、及び運動解析方法 | |
CN111048202A (zh) | 一种智能化中医诊断系统及其方法 | |
WO2018214525A1 (zh) | 一种运动效果展示方法及装置 | |
CN215875885U (zh) | 一种基于vr技术的沉浸式抗压力心理训练系统 | |
CN116152924A (zh) | 一种运动姿势评估方法、装置、系统及计算机存储介质 | |
CN101454805A (zh) | 训练辅助设备、训练辅助方法和训练辅助程序 | |
WO2020139108A1 (ru) | Способ проведения когнитивных исследований с использованием системы нейровизуализации и механизма обратной связи | |
CN108966013A (zh) | 一种基于全景视频的观众反应评估方法及系统 | |
CN113517052A (zh) | 商用健身场景下的多感知人机交互系统与方法 | |
CN116781884B (zh) | 一种单眼立体视的数据采集方法及装置 | |
CN113974581B (zh) | 一种脉诊的动态切入特征的匹配方法及系统 | |
CN115346632A (zh) | 一种柯氏音血压计测量图谱生成和交互系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |